Вакансия: Data Mining маманы
Data Mining маманы ретінде сізден келесі тапсырмаларды орындау талап етіледі:
- Есептік жүйе әзірлеуге қатысу.
- Python, SQL және Airflow пайдалана отырып batch ETL-процестерін әзірлеу және қолдау.
- Деректер ағындарын (Python, RabbitMQ) әзірлеу және қолдау.
- Деректер қоймасын жетілдіру және деректер витриналарын құру.
- Жаңа дереккөздерді DWH-қа интеграциялау.
- Деректер сапасын тексеру (DQ) жұмыстарын жүзеге асыру.
- Компанияда деректермен жұмыс істеу үшін жаңа инструменттерді енгізу.
- Тапсырыс берушілермен коммуникациялық процестерді қалыптастыру.
Кандидаттан келесі дағдылар мен білімдер күтіледі:
- SQL-ді жақсы білу - терезелік функциялар, күрделі join'дер, қосымша сұраулар, үлкен SQL сұрауларын оңтайландыру тәжірибесі.
- Реляциялық және колонкалық СУБД-ның жұмыс принциптерін түсіну, DWH жобалаудағы тәжірибе, деректерді модельдеу және қабаттарға бөлу.
- Python-ды жақсы білу (Pandas-пен жұмыс дағдылары артықшылық болып табылады) және Airflow пайдалана отырып data pipelines құру тәжірибесі.
- Инструменттерді білуді - Git, Docker, NoSQL СУБД-мен жұмыс дағдылары.
- Технологияларды білу - DBT, Debezium, Greenplum, Spark, Data Lake, k8s, PowerBI, Apache NiFi.
Орналасқан жері: Алматы қаласы, Алмалинский ауданы