Header: Разработчик платформы управления данными в Go
Description: Наша платформа доставляет данные из множества источников сотням потребителей и использует самые разные технологии: от MapReduce до Flink, от Spark до SQL в аналитических базах данных. Мы стремимся писать совершенный код, проектировать и оптимизировать самые сложные расчеты, прорабатывать самые сложные алгоритмы и готовить инструментарий для сотен бизнес-пользователей.
Requirements: • уверенно программируете на Python, Java или Scala и готовы осваивать новые языки и технологии
  • умеете и любите писать тесты для своего кода
  • понимаете, зачем нужны непрерывная интеграция и непрерывная доставка (CI/CD), Git и ревью кода
  • любите и умеете писать чистый код и в меру рефакторить его
Tasks: • строить распределенную инфраструктуру для получения, обработки и контроля качества данных
  • разрабатывать собственный DSL для описания трансформаций данных в стриминге и батч-обработке
  • проектировать интерфейс системы, которой будут пользоваться сотни инженеров данных
  • оптимизировать потребление ресурсов в процессах обработки данных
  • автоматизировать рутину
  • заниматься автодокументацией, мониторингами, логами, метриками, админками
Pluses: • разрабатывали и проектировали распределенные системы — наша инфраструктура должна базироваться в нескольких дата-центрах
  • проектировали хранилища данных или поставку данных в них
  • проектировали и разрабатывали процессы обработки сложных событий (CEP) в почти реальном времени на Flink, Spark Streaming, Kafka Streams
  • работали со стриминговыми платформами, например AWS Kinesis, Apache Kafka, Azure Event Hubs, понимаете, как они устроены и зачем они нужны
Hashtags: #yandexgo #python
Raw text: Разработчик платформы управления данными в Go🗄
  
  Наша платформа доставляет данные из множества источников сотням потребителей и использует самые разные технологии: от MapReduce до Flink, от Spark до SQL в аналитических базах данных. Мы стремимся писать совершенный код, проектировать и оптимизировать самые сложные расчеты, прорабатывать самые сложные алгоритмы и готовить инструментарий для сотен бизнес-пользователей.
  
  Мы ждем, что вы:
  • уверенно программируете на Python, Java или Scala и готовы осваивать новые языки и технологии
  • умеете и любите писать тесты для своего кода
  • понимаете, зачем нужны непрерывная интеграция и непрерывная доставка (CI/CD), Git и ревью кода
  • любите и умеете писать чистый код и в меру рефакторить его
  
  Что нужно делать:
  • строить распределенную инфраструктуру для получения, обработки и контроля качества данных
  • разрабатывать собственный DSL для описания трансформаций данных в стриминге и батч-обработке
  • проектировать интерфейс системы, которой будут пользоваться сотни инженеров данных
  • оптимизировать потребление ресурсов в процессах обработки данных
  • автоматизировать рутину
  • заниматься автодокументацией, мониторингами, логами, метриками, админками
  
  Будет плюсом, если вы:
  • разрабатывали и проектировали распределенные системы — наша инфраструктура должна базироваться в нескольких дата-центрах
  • проектировали хранилища данных или поставку данных в них
  • проектировали и разрабатывали процессы обработки сложных событий (CEP) в почти реальном времени на Flink, Spark Streaming, Kafka Streams
  • работали со стриминговыми платформами, например AWS Kinesis, Apache Kafka, Azure Event Hubs, понимаете, как они устроены и зачем они нужны
  
  https://clck.ru/pxX9G
  
  #yandexgo #python