AZBUKADOM.RU

Организация IBM отправит 3500 специалистов работать над Apache Спарк — планом с открытым кодом, созданным для обработки огромных данных. Для увеличения детали механического изучения организация отдаст в свободное использование собственную технологию SystemML. Саму технологию Apache Спарк эксперты IBM объявляют ОС для специалисты.

Сервис Apache Спарк (sparc.apache.org) ставит мишенью опередить технологию MapReduce по скорости в сотни раз. На веб-сайте показывается 100-кратное преимущество над MapReduce при вычислении логистической регрессии на кластерах с применением лишь материнской платы, и 10-кратное при применении винчестеров. В плане принимает участие не менее 400 создателей из 50 организаций.

Также, IBM собирается научить еще тыс экспертов из компаний-клиентов проектировать решения для обработки Big Data, с прицелом на данные, поступающие от м2м (другими словами промеренные в живую миллионами механизмов) на базе Apache Спарк. При этом организация будет вести взаимодействие с Databrics — платной текстурой, внедряющей Apache Спарк.