The post has been translated automatically. Original language: Russian Russian
No, but the profession will change!
Alexey Dral, the founder of the BigData Team, mentioned this in his speech at the WDS conference.:
"The key task of a Data engineer is to solve the issue of data consistency. At the dawn of computer development, the Data Engineer (DE) solved the issue of cache coherence. Then the first databases appeared, and DE was responsible for setting up transaction isolation. For the past twenty years, DE has been addressing issues of data consistency within a single cluster (intra-cluster consistency). It is only in the last five years that we have reached the issues of inter-cluster consistency. It is important for a Data engineer to understand where 100% consistency of data is needed, and where requirements can be relaxed. So, when making transactions in a bank, the data must always be accurate, and when calculating views, the approximate figure will have little effect. New technologies, frameworks, databases, paradigms, and programming languages are emerging to address these issues. But the average lifetime of a new technology in IT is about 1.5 years. Therefore, the key task will not go away, but the profession will really change."
In our Big Data courses, we combine fundamental knowledge and new technologies. Also, pay attention to the previously published questions for preparing for the interview for the role of DE.
BigData Team: the way you learn best
#study #work #opinions
Нет, но профессия изменится!
Об этом в своем выступлении на конференции WDS упоминал основатель BigData Team, Алексей Драль:
«Ключевая задача Data-инженера — решение вопроса консистентности данных. На заре развития компьютеров Data Engineer (DE) решал вопрос когерентности кэша. Затем появились первые базы данных и DE отвечали за настройку изолированности транзакций. Последние двадцать лет DE решали вопросы консистентности данных внутри одного кластера (intra-cluster consistency). И только последнюю пятилетку мы доросли до вопросов inter-cluster consistency. Именно Data-инженеру важно понимать, где необходима 100% консистентность данных, а где можно ослабить требования. Так, при транзакциях в банке, данные должны быть всегда точными, а при подсчете просмотров приблизительная цифра мало на что повлияет. Для решения поставленных вопросов появляются новые технологии, фреймворки, базы данных, парадигмы и языки программирования. Но средний срок жизни новой технологии в IT около 1.5 лет. Поэтому ключевая задача не уйдёт, но профессия действительно будет меняться.»
🎁 На наших курсах по Big Data мы совмещаем фундаментальные знания и новые технологии. Также обратите внимание на ранее опубликованные вопросы для подготовки к собеседованию на роль DE.
BigData Team: the way you learn best
#study #work #мнения
Share
