13.06.2012  Новости, Открытый код/Linux

Cloudera, создатель наиболее распространенного дистрибутива Hadoop, объявила о выпуске версии 4 своего варианта Hadoop с открытым исходным кодом, известного как CDH (Cloudera`s Distribution including Apache Hadoop), а также продукта Cloudera Enterprise 4.0. Это не просто повышение версии Hadoop-продукта Cloudera на очередную единицу, так как CDH 4 содержит новое ядро Hadoop 2.0 с целым рядом новых функций в рабочем, стабильном и поддерживаемом релизе. Вот ряд примеров новых возможностей CDH 4. Высокий уровень доступности файловой системы HDFS (Hadoop Distributed File System) — ее сервер метаданных NameNode уже не является уязвимым звеном, так как может поддерживаться резервным оборудованием. Присутствие фреймворка MapReduce 2.0, который, как ни странно, допускает иные, чем MapReduce, алгоритмы обработки данных, как и возможность писать код MapReduce на языках, отличных от Java. Возможность продолжать использовать MapReduce 1.0 в сочетании с другими компонентами Hadoop 2.0. Полномочия уровня таблицы и уровня столбцов для СУБД HBase. “Сопроцессоры” для HBase с функциональностью, похожей на вставку триггеров в реляционные СУБД. Более детальное распределение заданий, обеспечивающее лучшую поддержку коммунального использования кластера. Интерфейс веб-сервисов RESTful к HDFS. Оболочка для Apache Pig и HBase на базе веб-браузера. Многочисленные улучшения производительности в MapReduce, HDFS и Flume. А вот примеры интересных новшеств в Cloudera ... читать далее.