Header: Инженер данных в Лавку
Description: Служба разработки платформы управления данными (DMP) Яндекс.Лавки формирует актуальные, полные и правдивые данные для сервиса. Мы ищем лучших инженеров данных, которые в команде с лучшими аналитиками будут проектировать и оптимизировать сложнейшие расчеты и алгоритмы, разрабатывать инструментарий для сотен бизнес-пользователей.
Requirements: • уверенно программируете на Python
  • разбираетесь в классических алгоритмах и структурах данных
  • работали с отладчиками и верификаторами
  • хорошо знаете SQL и понимаете устройство современных реляционных баз данных
  • понимаете и можете объяснить необходимость CI/CD, преимущества использования Git и ревью кода
Tasks: • оптимизировать нетривиальные ETL-процессы обработки больших данных
  • извлекать из исходных данных ценную информацию и обрабатывать ее для последующего анализа
  • работать с данными на каждом этапе их трансформации
  • реализовывать стабильный расчет бизнес-метрик вместе с командой аналитиков
  • поддерживать и модифицировать созданные решения, обеспечивать доступность сервиса и корректность данных для принятия решений
Pluses: • руководили стажерами или начинающими специалистами
  • работали по методологии Agile, участвовали в проектировании хранилищ данных
  • знакомы со стеком технологий Hadoop, Spark, Hive, Kafka Streams, Spark, Flink, Greenplum, Vertica, ClickHouse, Teradata, Jupyter, Pandas, SciPy, Matplotlib, Bokeh, Luigi и Airflow
  • программируете на C++
Hashtags: #python #SQL #CICD #git #ETL
Raw text: Инженер данных в Лавку🍉
  
  Служба разработки платформы управления данными (DMP) Яндекс.Лавки формирует актуальные, полные и правдивые данные для сервиса. Мы ищем лучших инженеров данных, которые в команде с лучшими аналитиками будут проектировать и оптимизировать сложнейшие расчеты и алгоритмы, разрабатывать инструментарий для сотен бизнес-пользователей.
  
  Мы ждем, что вы:
  • уверенно программируете на Python
  • разбираетесь в классических алгоритмах и структурах данных
  • работали с отладчиками и верификаторами
  • хорошо знаете SQL и понимаете устройство современных реляционных баз данных
  • понимаете и можете объяснить необходимость CI/CD, преимущества использования Git и ревью кода
  
  Что нужно делать:
  • оптимизировать нетривиальные ETL-процессы обработки больших данных
  • извлекать из исходных данных ценную информацию и обрабатывать ее для последующего анализа
  • работать с данными на каждом этапе их трансформации
  • реализовывать стабильный расчет бизнес-метрик вместе с командой аналитиков
  • поддерживать и модифицировать созданные решения, обеспечивать доступность сервиса и корректность данных для принятия решений
  
  Будет плюсом, если вы:
  • руководили стажерами или начинающими специалистами
  • работали по методологии Agile, участвовали в проектировании хранилищ данных
  • знакомы со стеком технологий Hadoop, Spark, Hive, Kafka Streams, Spark, Flink, Greenplum, Vertica, ClickHouse, Teradata, Jupyter, Pandas, SciPy, Matplotlib, Bokeh, Luigi и Airflow
  • программируете на C++
  
  https://ya.cc/t/EXIKEHX2akNYh
  
  #python #SQL #CICD #git #ETL