Фонд Apache утвердил (https://blogs.apache.org/foundation/entry/the_apache_softwar...) придание движку для обработки больших объёмов данных Spark (http://spark.apache.org/) статуса первичного проекта Apache. Перевод в разряд первичных проектов произведён после проверки в инкубаторе Apache способности следования принципам разработки и управления, принятым в сообществе Apache и основанным на идеях меритократии. Отныне Apache Spark признан готовым для самостоятельного существования, не требующего дополнительного надзора.
Apache Spark является высокопроизводительным движком для обработки данных, хранящихся в кластере Hadoop. По сравнению с предоставляемым в Hadoop механизмом MapReduce, Spark обеспечивает в 100 раз более высокую производительность при обработке данных в памяти и 10 раз при размещении данных на дисках. Движок может выполняться на узлах кластера Hadoop как при помощи Hadoop YARN, так и в обособленном режиме. Поддерживается обработка данных в хранилищах HDFS, HBase, Cassandra, Hive и любом формате ввода Hadoop (InputFormat).Spark может использоваться как в типичных сценариях обработки данных, похожих на MapReduce, так и для реализации специфичных методов, таких как потоковая обработка, SQL, интерактивные и аналитические запросы, решение задач машинного обучения и работа с графами. Приложения для обработки данных могут создаваться на языках Scala, Java и Python. Из компаний использующих Spark отмечаются Alibaba, Cloudera, Databricks, IBM, Intel и Yahoo.
URL: https://blogs.apache.org/foundation/entry/the_apache_softwar...
Новость: http://www.opennet.me/opennews/art.shtml?num=39208
насколько ж они там помешаны на яве
Ну не всё же можно на Ruby написать.
на ruby можно написать всё. даже небо. даже github.
>на ruby можно написать всё. даже небо. даже github.Даже бедного буратино и бот-генератор случайных фраз. Благо отличий-то...
нее, это вотчина python
Генератором случайных фраз всю жизнь был perl.Его таким родили.
папакарло буратину кодил на vb
делаем выводы )
Потом по быстрому модернизировал, перегнав автоматическим конвертором на питон.
> Потом по быстрому модернизировал, перегнав автоматическим конвертором на питон.не гвидохульствуй!
> не гвидохульствуй!Найти 10 отличий между кодом на vb и питоне не сможет даже папа карло.
самты виндузятник! исключительно бейсик спектрумовского разлива10 LET b="word"
20 PRINT b
30 GO TO 10
> самты виндузятник! исключительно бейсик спектрумовского разлива
> 10 LET b="word"эта фигня интерпретатором не прожуётся. твоё счастье, что бидон не проверяет синтаксис перед принятием строк, как zx basic: ты бы ни одной программы написать тогда не смог.
Да, помню, как какой-то редкий-редкий кейворд из двух букв найти не мог, перепечатывая программу из книжки. Заменил двумя большими буквами - не прошло. Пришлось искать в красненьких-зелёненьких. Еле нашёл (знатоки сейчас даже скажут, что это был за кейворд) :)
>> самты виндузятник! исключительно бейсик спектрумовского разлива
>> 10 LET b="word"
> эта фигня интерпретатором не прожуётся. твоё счастье, что бидон не проверяет синтаксис
> перед принятием строк, как zx basic: ты бы ни одной программы
> написать тогда не смог.да, конечно же b$ :) или, как говорили у нас в стране социализма, b(символ пуза и четырёх ноожек)
я начинал на msx, там была «черепаха».
Заменил одну ногу на колесо... и пошло-поехало.
Сколько же их появилось за последнее время. Spark, Presto, Impala, Tez... Глаза разбегаются
И это только в достаточно узкой нише, а что творится в широко используемом ПО....
Может эта.... как её - информационная сингулярность? Частота смены событий доходит до такой величины, что уже чуть отстал в знании технологий, языков, библиотек или проектов - бесконечно опоздал.
> уже чуть отстал в знании технологий, языков, библиотек
> или проектов — бесконечно опоздал.это у быдлокодеров, у них вообще жизнь очень печальная.
Как будто по MS рассказал. В этой области они переплюнули весь остальной мир, вместе взятый.
> после проверки в инкубаторе Apache способности следования принципам разработки и управления, принятым в сообществе ApacheПрохожих не пугать, лежать смирно, шабаш только в полнолуние в пятницу?
Ждём наездов от Oracle за использование (TM).