Инженер данных / Big Data в телекоме

Инженер данных / Big Data в телекоме — обложка Vibe

Как применять ИИ в работе

Проверяемый пример

Попроси ИИ написать запрос для учебного журнала трафика. События K1 — 120 МБ, K2 — 80 МБ, повтор K1 — 120 МБ. У K3 — 50 МБ, время события 10:55, время получения 11:03. Нужно посчитать уникальные события по времени события в интервале с 10:00 включительно до 11:00, включая опоздавшие записи, принятые до 11:10.

Как проверить результат. После дедупликации по идентификатору и отбора по времени события получатся 3 события и 250 МБ. K3 относится к интервалу 10:00–11:00. Повторный запуск на тех же записях должен вернуть тот же результат.

Чем занимается специалист

Строит потоки обработки сетевой телеметрии и события сервисов оператора. Контролирует дубли, опоздавшие события и качество витрин.

Какие навыки развивать

SQL, обработка потоков, ETL, дедупликация, контроль качества и наблюдаемость данных.

Поделиться с друзьями
Медиа Codenrock

Стать автором

Укажите email или Telegram для ответа.