04.07.2016  Новости, Идеи и практики автоматизации, Открытый код/Linux

На прошлой неделе в Нью-Йорке прошла конференция MongoDB World, на которой компания-организатор MongoDB анонсировала новый коннектор для Apache Spark под названием MongoDB Connector, позволяющий программистам и специалистам по обработке данных в режиме реального времени извлекать аналитическую информацию из быстро меняющихся данных. Пользователи уже могут пользоваться этим продуктом для выполнения аналитических операций и сбора нужных сведений из актуальных оперативных данных, передающихся в потоке. Все это время MongoDB тесно сотрудничала с Databricks — компанией, учрежденной создателями Apache Spark. Сам MongoDB Connector получил статус Databricks Certified Application (приложение, сертифицированное компанией Databricks) для использования совместно со Spark. Факт сертификации означает гарантию от компании Databricks того, что коннектор обеспечивает интеграцию и API-совместимость между процессами в Spark и базой данных MongoDB. Новый коннектор для Spark сделан по тому же принципу, что и существующий коннектор между MongoDB и фреймворком Hadoop. Келли Стирман, вице-президент по стратегическому развитию и маркетингу продуктов в MongoDB, рассказал, что у людей, использующих Spark в связке с MongoDB, это событие вызвало повышенный интерес. По его словам, при совместном использовании MongoDB и Hadoop обычно подразумевается наличие нескольких разных операционных систем, данные из которых поступают в Hadoop, проходя ETL-процесс (extract, transform and load, извлечение ... читать далее.