Public Telegram Archive
Channels About
CY iT HR
@cyprusithr · supergroup · filtered by Irina Volkova
Irina Volkova 2023-08-29 15:13 UTC
#vacancy #вакансия #fulltime #Кипр #Лимассол

Вакансия: Big Data Engineer
Компания: Liepa Limited
Локация: Лимассол
Формат: офис
ЗП: до 5000 евро на руки + компенсация жилья до 750 евро

Всем привет! Мы разрабатываем B2B решения развлекательной, игровой и спортивной тематики.

Мы предлагаем белую ЗП, гибкое начало рабочего дня, корпоративное питание, компенсацию аренды жилья, годовой бонус. Если в данный момент вы не на Кипре, предоставим релокационный пакет🔥

**Задачи:
**-Участие в проектировании процессов хранения и процессинга данных (80% данных - логи, batch, stream), в проектировании архитектуры и сайзинга кластера (ожидаемый прирост сырых не сжатых данных около 1PB/год);
-Развертывание кластера (ключевые компоненты: HDFS, Impala, SPARK, Kafka, AirFlow, NiFi, ClickHouse);
-Настройка системы безопасности (Kerberos, LDAP, Apache Ranger);
-Настройка мониторинга и мониторинг работы кластера с точки зрения отказоустойчивости и производительности;
-Техническая поддержка работоспособности кластера (обновление, масштабирование, поддержание работоспособности).

**Обязательные требования:
**-Опыт работы от 3-х лет в области построения платформ больших данных;
-Релевантный опыт развертывания и поддержки кластера на базе vanilla Hadoop Stack (HDFS, YARN, ZooKeeper и т.д.) размером от 100 TB с учетом аспектов отказоустойчивости, производительности, безопасности;
-Практический опыт и умение развертывания и поддержки кластеров Kafka, AirFlow, HDFS, SPARK, Impala;
-Обязателен опыт керберизации кластера и интеграции с доменом AD (LDAP), настройки Apache Ranger;
-Понимание назначения и различий форматов хранения данных в HDFS (Parquet, Avro, ORC).

**Будет значимым плюсом:
**-Опыт развертывания и поддержки PostgreSQL, GreenPlum;
-Опыт развертывания и поддержки Apache Superset;
-Ansible.

**Будет весомым дополнением, но не обязателен:
**-Опыт развертывания и сопровождения NiFi, ClickHouse, ELK, Debezium;
-Опыт развертывания и сопровождения OpenMetadata или Apache Atlas;
-Опыт работы с любой enterprise-платформой для big data (Cloudera Data Platform, HPE Ezmeral Data Fabric, Splunk).

**Если вас заинтересовала вакансия - буду рада пообщаться😊
Для связи:
**@bylbylbylk
1 message on this day