The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Анонсирован Apache Spark 1.0"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Анонсирован Apache Spark 1.0"  +/
Сообщение от opennews on 31-Май-14, 13:55 
Фонд Apache опубликовал (https://blogs.apache.org/foundation/entry/the_apache_softwar...) релиз Apache Spark 1.0 (http://spark.apache.org), высокопроизводительного движка для обработки данных, хранящихся в кластере  Hadoop. По сравнению с предоставляемым в Hadoop механизмом MapReduce, Spark обеспечивает в 100 раз более высокую производительность при обработке данных в памяти и 10 раз при размещении данных на дисках. Решения на базе Spark уже внедрены в таких компаниях, как Alibaba, Cloudera, Databricks, IBM, Intel и Yahoo.


Движок может выполняться на узлах кластера Hadoop как при помощи Hadoop YARN, так и в обособленном режиме. Поддерживается обработка данных в хранилищах HDFS, HBase, Cassandra, Hive и любом формате ввода Hadoop (InputFormat). Spark может использоваться как в типичных сценариях обработки данных, похожих на MapReduce, так и для реализации специфичных методов, таких как потоковая обработка, SQL, интерактивные и аналитические запросы, решение задач машинного обучения и работа с графами. Приложения для обработки данных могут создаваться на языках Scala, Java и Python.


URL: https://blogs.apache.org/foundation/entry/the_apache_softwar...
Новость: https://www.opennet.ru/opennews/art.shtml?num=39896

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "Анонсирован Apache Spark 1.0"  +1 +/
Сообщение от Q2W on 31-Май-14, 13:55 
Звучит круто.
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

2. "Анонсирован Apache Spark 1.0"  –1 +/
Сообщение от DmA (??) on 31-Май-14, 22:08 
А что значит обработка данных? числа складывает?
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

3. "Анонсирован Apache Spark 1.0"  +2 +/
Сообщение от rob pike on 31-Май-14, 22:51 
Сначала в квадрат возводит, только потом складывает.
Ответить | Правка | ^ к родителю #2 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру