Публикация была переведена автоматически. Исходный язык: Русский
Опытный инженер блистает не только определениями (фундаментальными знаниями), но и пониманием тонкостей реализации (опытом).
Казалось бы, чего сложного в MapReduce (что в Hadoop, что в Spark)? Но то, насколько много времени и денег (ресурсов кластера) вы сожжете в компании напрямую зависит от того, насколько хорошо вы понимаете:
1. функциональную парадигму
// и чем она отличается от процедурной;
2. кто такой Shuffle
// и почему именно он все решает в мире Big Data;
3. каким именно образом решается Fault Tolerance
// т.е. какие именно гарантии предоставляются системой (см. часть 1) и за счет чего можно словить timeout'ы или наоборот выжать максимум производительности.
Big Data — это дорого. А если использовать неэффективно — то даже очень. Хотите быть ценным сотрудником, экономить ресурсы компании и уменьшать T2M (time-to-market)? Тогда вы знаете, где почерпнуть фундаментальных знаний и опыта:
👉 Практический курс по Big Data до 23.02 с 10% скидкой
// модуль 2. Hadoop экосистема, MapReduce и не только
Продолжаем рубрику о важных деталях в сфере IT.
Прошлый выпуск: ч.1 гарантии в IT проектах.
Сохраните и подпишитесь, если хотите быть востребованным в IT
BigData Team: the way you learn best
Опытный инженер блистает не только определениями (фундаментальными знаниями), но и пониманием тонкостей реализации (опытом).
Казалось бы, чего сложного в MapReduce (что в Hadoop, что в Spark)? Но то, насколько много времени и денег (ресурсов кластера) вы сожжете в компании напрямую зависит от того, насколько хорошо вы понимаете:
1. функциональную парадигму
// и чем она отличается от процедурной;
2. кто такой Shuffle
// и почему именно он все решает в мире Big Data;
3. каким именно образом решается Fault Tolerance
// т.е. какие именно гарантии предоставляются системой (см. часть 1) и за счет чего можно словить timeout'ы или наоборот выжать максимум производительности.
Big Data — это дорого. А если использовать неэффективно — то даже очень. Хотите быть ценным сотрудником, экономить ресурсы компании и уменьшать T2M (time-to-market)? Тогда вы знаете, где почерпнуть фундаментальных знаний и опыта:
👉 Практический курс по Big Data до 23.02 с 10% скидкой
// модуль 2. Hadoop экосистема, MapReduce и не только
Продолжаем рубрику о важных деталях в сфере IT.
Прошлый выпуск: ч.1 гарантии в IT проектах.
Сохраните и подпишитесь, если хотите быть востребованным в IT
BigData Team: the way you learn best
Поделиться
