<beeline meetup:
data engineering
.info
{
date: 20 декабря;
time: 17:00 GMT+3;
place: онлайн;
}
при поддержке
JUG Ru Group
tools/>
.вас ждет
quantity: 3 доклада;
cost: бесплатно;
feature: розыгрыш призов;
{
}
<программа/>
17:10–18:00
Как настроить ETL с JSON’ами в Apache NiFi
Сергей расскажет, как в Apache NiFi настроить пайплайн трансформации и сохранения JSON в хранилище данных, и как с помощью Jolt и Avro уменьшить время и трудозатраты на его построение.
Максим Стаценко (Яндекс)
18:00–18:50
Система сквозного логирования с передачей единого идентификатора процесса между независимыми задачами Airflow
Организовать систему пользовательских логов для периодических процессов несложно. Сложнее, когда ключ прекращает быть однозначным идентификатором процесса расчета. Никита расскажет, почему так бывает, и как в команде создавали сквозные пользовательские логи в продукте.
18:50–19:40
Apache Flink: Flink Table API & SQL
Александр расскажет, что такое Table API в Apache Flink, как выглядит создание Source и Sink для Table API & SQL и как Table API взаимодействует с DataStream API.
Открытие
17:00–17:10
Закрытие
19:40–19:45
Сергей Евсеев (билайн)
Никита Хилов (билайн)
Александр Булатов (билайн)
Михаил Благов (билайн)
Максим Стаценко (Яндекс)
<спикеры/>
Аспирант и преподаватель-ассистент в НГТУ, учит студентов основам ООП, логике и мышлению. Прошел путь от стажера до Middle дата-инженера за три года, два из них посвятил проекту Radcom. Занимается ETL-процессами в домене «Техника» с данными Radcom.
Когда-то мечтал стать программистом и научиться рисовать. Теперь рисует ETL и мешает коту писать код за себя. Угорает по вымышленным мирам, спейсшипам, космосу и ИИ. Дата-инженер в команде HR Services. Работает в билайне 2,5 года.
Middle дата-инженер
Сергей Евсеев (билайн)
Старший дата-инженер в домене «Техника»
Александр Булатов (билайн)
Десять лет занимается обработкой, хранением, анализом и визуализацией данных. Делал проекты для госпроектов (РЦОИ), энергетического сектора (Газпром, МОЭК), банков (БРК, ВТБ24) и IT-гигантов (Yandex, Mail.ru). Большие данные — работа и хобби Максима, готов говорить о них бесконечно.
Data Warehouse Team Lead
Максим Стаценко (Яндекс)
Работает в билайне более 10 лет. Занимается курированием дата-инженеров, продуктов и самых разных точек бизнес-приложений.
Руководитель по разработке, Департамент «Чаптер инженеров данных и разработчиков»
Никита Хилов (билайн)
Более десяти лет в IT, более шести лет в Big Data. В билайне занимается процессами и лучшими практиками разработки ETL. Интересуется всем, что связано с обработкой больших и малых данных.
Руководитель департамента «Чаптер инженеров данных и разработчиков»
Михаил Благов (билайн)
билайн — один из крупнейших телеком-операторов в России с абонентской базой около 47 млн человек и штатом около 30 тысяч сотрудников
В портфолио продуктовых команд билайна есть решения для поиска пропавших людей с помощью beeline AI, точной диагностики заболеваний на основе AI, распознавания речи, геоаналитики и т. д.
Мы строим новые бизнесы на основе технологий искусственного интеллекта, помогаем нашим корпоративным клиентам повышать эффективность бизнеса, а государственным структурам — внедрять новые решения.
<трансляция/>
© 2012–2022 JUG Ru Group