Big Data Solutions Architect

Ваши задачи

• Создавать архитектурные решения для Big Data-проектов, которые включают data science, предиктивную аналитику.
• Проектировать надёжную, высокопроизводительную и масштабируемую архитектуру для Big Data-решений.
• Подбирать оптимальные технологии для построения архитектуры Big Data-систем (Apache Hadoop, Apache Spark, Spark Streaming, Apache Cassandra, MongoDB и др.)
• Улучшать действующую IT-инфраструктуру заказчика по сбору, хранению, обработке и анализу данных, ориентируясь на бизнес-потребности клиента и новые технологии.
• Делиться своими экспертными знаниями с разработчиками внутри команды.

Ваши знания и опыт

• От 5 лет релевантного опыта работы.
• Опыт создания архитектуры решений для сбора, хранения, обработки и анализа больших данных.
• Опыт проектирования решений для распределённой обработки данных.
• Опыт разработки на одном из языков программирования: Python, Java, Scala, С#.
• Навыки работы с экосистемой Microsoft Azure.
• Опыт работы с сервисами AWS (EMR,EC2, S3, RDS, Redshift, Aurora, Athena, RDS).
• Владение технологиями для потоковой обработки данных (Amazon Kinesis, Apache Kafka, Spark Streaming, Apache Flink, Azure Stream Analytics и др.).
• Умение работать с технологиями пакетной обработки данных (Apache Hadoop, Apache Spark, AWS Batch и др.)
• Знание технологий data science, machine learning.
• Навыки работы с технологиями для NoSQL и SQL-баз данных (Hive, Pig, Spark SQL, Shark, Impala, BigQuery).
• Навыки работы с инструментами для визуализации данных и BI (Microsoft Power BI, Tableau, Qlik и др).
• Английский язык на уровне, который позволит вести письменную и устную коммуникацию с заказчиками.