0 added
0 removed
Original
2026-01-01
Modified
2026-03-10
1
<ul><li><a>Запись открытого занятия курса "Data Engineer"</a><ul><li><ul><li><a>Читайте на Хабр:</a></li>
1
<ul><li><a>Запись открытого занятия курса "Data Engineer"</a><ul><li><ul><li><a>Читайте на Хабр:</a></li>
2
</ul></li>
2
</ul></li>
3
</ul></li>
3
</ul></li>
4
</ul><h2>Запись открытого занятия курса<a>"Data Engineer"</a></h2>
4
</ul><h2>Запись открытого занятия курса<a>"Data Engineer"</a></h2>
5
<p>На сегодняшний день инструменты Оркестрации - это отраслевой стандарт для организации получения, обработки и сохранения данных из сотен и даже тысяч разнородных источников с разнообразной частотой обновления и природой.</p>
5
<p>На сегодняшний день инструменты Оркестрации - это отраслевой стандарт для организации получения, обработки и сохранения данных из сотен и даже тысяч разнородных источников с разнообразной частотой обновления и природой.</p>
6
<p>Сценарии использования платформ Оркестрации разнообразны: вы можете просто организовать регулярные select -> group by-> insert из production базы данных в "холодную" реплику под аналитику, а можете написать целый сервис, который будет раз в час обновлять данные, дообучать ML-модель и поставлять актуальные прогнозные значения конечным пользователям.</p>
6
<p>Сценарии использования платформ Оркестрации разнообразны: вы можете просто организовать регулярные select -> group by-> insert из production базы данных в "холодную" реплику под аналитику, а можете написать целый сервис, который будет раз в час обновлять данные, дообучать ML-модель и поставлять актуальные прогнозные значения конечным пользователям.</p>
7
<p>Данная технология - неотъемлемый инструмент в арсенале современного Data Engineer и администратора вычислительного кластера.</p>
7
<p>Данная технология - неотъемлемый инструмент в арсенале современного Data Engineer и администратора вычислительного кластера.</p>
8
<p>На открытом уроке мы подробно разобрали, что такое платформы Оркестрации, какие решения есть сегодня на рынке и углубились в практический пример использования одной из самых распространенных платформ на сегодня: Apache Airflow.</p>
8
<p>На открытом уроке мы подробно разобрали, что такое платформы Оркестрации, какие решения есть сегодня на рынке и углубились в практический пример использования одной из самых распространенных платформ на сегодня: Apache Airflow.</p>
9
<p><strong>Спикер: Максим Мигутин</strong></p>
9
<p><strong>Спикер: Максим Мигутин</strong></p>
10
<p>Более 5-ти лет опыта в индустрии Данных & Аналитики в роли внешнего косультанта и in-house лидера Data Engineering и Data Science-проектов</p>
10
<p>Более 5-ти лет опыта в индустрии Данных & Аналитики в роли внешнего косультанта и in-house лидера Data Engineering и Data Science-проектов</p>
11
<h4>Читайте на Хабр:</h4>
11
<h4>Читайте на Хабр:</h4>
12
<p><a>Современный дата-стек: прошлое, настоящее и будущее</a></p>
12
<p><a>Современный дата-стек: прошлое, настоящее и будущее</a></p>
13
<p><a>Вредные советы при построении Аналитики (Data Lake / DWH / BI) - целеполагание и результаты</a></p>
13
<p><a>Вредные советы при построении Аналитики (Data Lake / DWH / BI) - целеполагание и результаты</a></p>
14
<p><a>Кто такой Analytics Engineer - E2E-решение с использованием bash + dbt + Looker</a></p>
14
<p><a>Кто такой Analytics Engineer - E2E-решение с использованием bash + dbt + Looker</a></p>
15
15