1 added
1 removed
Original
2026-01-01
Modified
2026-03-10
1
<p>Теги: arenadata hadoop, экосистема hadoop, adcm</p>
1
<p>Теги: arenadata hadoop, экосистема hadoop, adcm</p>
2
<p>В этой статье мы коротко расскажем про дистрибутив<strong>Arenadata Hadoop</strong>. Он заслуживает внимание благодаря своей доступности, а также тем, что является импортозамещенным дистрибутивом Hadoop.</p>
2
<p>В этой статье мы коротко расскажем про дистрибутив<strong>Arenadata Hadoop</strong>. Он заслуживает внимание благодаря своей доступности, а также тем, что является импортозамещенным дистрибутивом Hadoop.</p>
3
<p>По сути, перед нами относительно новый дистрибутив отечественной разработки. Разработчики утверждают, что это полноценный дистрибутив, созданный на базе Apache Hadoop, который: - адаптирован для корпоративного использования, - предназначен для хранения и обработки слабоструктурированных и неструктурированных данных.</p>
3
<p>По сути, перед нами относительно новый дистрибутив отечественной разработки. Разработчики утверждают, что это полноценный дистрибутив, созданный на базе Apache Hadoop, который: - адаптирован для корпоративного использования, - предназначен для хранения и обработки слабоструктурированных и неструктурированных данных.</p>
4
<h2>Предыстория вопроса</h2>
4
<h2>Предыстория вопроса</h2>
5
<p>Появление Arenadata связано, как известно, с приобретением Hortonworks компанией Cloudera. В результате прекратилась поддержка бесплатной версии системы управления Ambari, а пользователям предложили перейти на коммерческий продукт Cloudera Data Platform.</p>
5
<p>Появление Arenadata связано, как известно, с приобретением Hortonworks компанией Cloudera. В результате прекратилась поддержка бесплатной версии системы управления Ambari, а пользователям предложили перейти на коммерческий продукт Cloudera Data Platform.</p>
6
-
<p>Естественно, возникли желающие остаться на открытой версии Hadoop. Но выбор был невелик: - пользоваться текущей бесплатной версией (она поддерживается незначительным числом энтузиастов); - мигриров��ть на закрытую систему управления, предложенную Cloudera.</p>
6
+
<p>Естественно, возникли желающие остаться на открытой версии Hadoop. Но выбор был невелик: - пользоваться текущей бесплатной версией (она поддерживается незначительным числом энтузиастов); - мигрировать на закрытую систему управления, предложенную Cloudera.</p>
7
<p>В этом плане разработчики Arenadata создали третий путь. По большему счету, они предложили универсальный оркестратор гибридного ландшафта - собственную систему управления<strong>ADCM (Arenadata Cluster Manager)</strong>. Эта система позволяет устанавливать Hadoop-сервисы, управлять ими и on-premise, и в облаке.</p>
7
<p>В этом плане разработчики Arenadata создали третий путь. По большему счету, они предложили универсальный оркестратор гибридного ландшафта - собственную систему управления<strong>ADCM (Arenadata Cluster Manager)</strong>. Эта система позволяет устанавливать Hadoop-сервисы, управлять ими и on-premise, и в облаке.</p>
8
<p>В состав дистрибутива ADH включены последние актуальные версии самых популярных инструментов. Многие из них доработаны, причем значительно - заявляется, что это обеспечивает: - минимум ошибок ПО, - наибольшую полноту существующего функционала, - корректную интеграцию компонентов друг с другом.</p>
8
<p>В состав дистрибутива ADH включены последние актуальные версии самых популярных инструментов. Многие из них доработаны, причем значительно - заявляется, что это обеспечивает: - минимум ошибок ПО, - наибольшую полноту существующего функционала, - корректную интеграцию компонентов друг с другом.</p>
9
<h2>Несколько слов об ADCM</h2>
9
<h2>Несколько слов об ADCM</h2>
10
<p>Итак, Arenadata Hadoop имеет свою систему управления, развертывания и мониторинга - это Arenadata Cluster Manager. ADCM распространяется бесплатно, функционал расширяется благодаря добавлению в него бандлов, представляющих собой набор ansible-playbooks. Бандлы делятся на 2 вида: enterprise и community, причем последние можно бесплатно загрузить с веб-сайта Arenadata. Плюс ко всему, присутствует возможность разработать собственный бандл и потом подключить его к ADCM.</p>
10
<p>Итак, Arenadata Hadoop имеет свою систему управления, развертывания и мониторинга - это Arenadata Cluster Manager. ADCM распространяется бесплатно, функционал расширяется благодаря добавлению в него бандлов, представляющих собой набор ansible-playbooks. Бандлы делятся на 2 вида: enterprise и community, причем последние можно бесплатно загрузить с веб-сайта Arenadata. Плюс ко всему, присутствует возможность разработать собственный бандл и потом подключить его к ADCM.</p>
11
<p>В общих чертах можно сказать, что дистрибутив выглядит весьма неплохо.</p>
11
<p>В общих чертах можно сказать, что дистрибутив выглядит весьма неплохо.</p>
12
<h2>Плюсы и минусы</h2>
12
<h2>Плюсы и минусы</h2>
13
<p>Какие ключевые преимущества заявляют разработчики:</p>
13
<p>Какие ключевые преимущества заявляют разработчики:</p>
14
<p>Состав компонентов нынешней и будущей версий следующий:</p>
14
<p>Состав компонентов нынешней и будущей версий следующий:</p>
15
<p>Что касается минусов, то они такие же, как и для остальных дистрибутивов Hadoop: • "vendor lock-in". Всегда существует вероятность изменения политики компании. Далеко ходить не надо: достаточно вспомнить пример Cloudera и Hortonworks; • наблюдается существенное отставание от апстрима Apache.</p>
15
<p>Что касается минусов, то они такие же, как и для остальных дистрибутивов Hadoop: • "vendor lock-in". Всегда существует вероятность изменения политики компании. Далеко ходить не надо: достаточно вспомнить пример Cloudera и Hortonworks; • наблюдается существенное отставание от апстрима Apache.</p>
16
<p><em>Источники:</em>• https://arenadata.tech/products/arenadata-hadoop/; • https://habr.com/ru/company/rostelecom/blog/499854/.</p>
16
<p><em>Источники:</em>• https://arenadata.tech/products/arenadata-hadoop/; • https://habr.com/ru/company/rostelecom/blog/499854/.</p>
17
17