<?xml version="1.0" encoding="koi8-r"?>
<rss version="0.91">
<channel>
    <title>OpenForum RSS: Увидела свет платформа для распределённой обработки данных A...</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html</link>
    <description>Организация Apache Software Foundation представила (https://blogs.apache.org/foundation/entry/the_apache_software_foundation_announces48) релиз Apache Hadoop 2 (http://hadoop.apache.org), свободной платформы для организации распределённой обработки больших объёмов данных с использованием парадигмы map/reduce (http://ru.wikipedia.org/wiki/MapReduce), при которой задача делится на множество более мелких обособленных фрагментов, каждый из которых может быть запущен на отдельном узле кластера. Хранилище на базе Hadoop может охватывать тысячи узлов и  содержать эксабайты данных (общий объём цифровой информации на Земле оценивается в 161 эксабайт).&lt;br&gt;&lt;br&gt;&lt;br&gt;&lt;br&gt;В состав Hadoop входит реализация распределенной файловой системы Hadoop Distributed Filesystem (HDFS), автоматически обеспечивающей резервирование данных и оптимизированной для работы MapReduce-приложений. Для упрощения доступа к данным в Hadoop хранилище разработана БД HBase и SQL-подобный язык Pig, который является своего рода SQL для MapReduce, запросы которог</description>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (all_glory_to_the_hypnotoad)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#33</link>
    <pubDate>Fri, 18 Oct 2013 18:44:56 GMT</pubDate>
    <description>нельзя.&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (all_glory_to_the_hypnotoad)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#32</link>
    <pubDate>Fri, 18 Oct 2013 18:42:27 GMT</pubDate>
    <description>его используют многие компании для задач data mining&apos;а. В частности все известные интернет проекты и рекламщики. Некоторые упорыши додумались даже на нём поиск делать&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (edwin)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#31</link>
    <pubDate>Thu, 17 Oct 2013 18:15:28 GMT</pubDate>
    <description>&amp;gt; МОжет и в России когда-нибудь будут компании, которые используют Hadoop . Не &lt;br&gt;&amp;gt; всё же время нефть качать &lt;br&gt;&lt;br&gt;Знаю несколько довольно крупных компаний. у которых на нем развернуто решение ряда внутренних задач ... беда в том, что компании эти не афишируют этого факта и узнать об этом можно только &quot;за рюмкой чая&quot; с коллегами ...   &lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (gleb_se)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#30</link>
    <pubDate>Thu, 17 Oct 2013 17:35:08 GMT</pubDate>
    <description>Вроде Mail.ru использует Hadoop для поиска: http://habrahabr.ru/company/mailru/blog/167297/&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (тигар)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#23</link>
    <pubDate>Thu, 17 Oct 2013 08:11:55 GMT</pubDate>
    <description>&amp;gt;&amp;gt; p.s. ох и много же времени им понадобилось чтобы дойти до &quot;Поддержка доступа к HDFS через NFSv3;&quot; &lt;br&gt;&amp;gt; Самому Hadoop это не сильно и нужно. Точнее не нужно совсем. Стало &lt;br&gt;&amp;gt; быть понадобилось кому то из потребителей. Когда сделали и оттестили, тогда &lt;br&gt;&amp;gt; и вошло в релиз.&lt;br&gt;&lt;br&gt;самому хадупу (а что/кто это?) это если и нужно, то оно у них есть, в публичной версии, как видим, не было.&lt;br&gt;&amp;gt; PS не понимаю нужность HDFS через NFS. не будете же вы располагать &lt;br&gt;&amp;gt; обычные данные (файловые шары / файлы виртуалок / etc) на HDFS. &lt;br&gt;&amp;gt; загрузить данные для RM можно и через шелл. а вероятнее вообще &lt;br&gt;&amp;gt; через сборщика данных ;) &lt;br&gt;&lt;br&gt;элементарно. сервис генерит дофига и еще немного логов, внутри этой жавахрени оно обрабатывается нужным образом. теперь сервис писать может их прям в туда, без лишней фигни ;-)&lt;br&gt;ну и еще: некоторые юзают хдфс именно как распределенную fs&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (VoDA)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#22</link>
    <pubDate>Thu, 17 Oct 2013 08:01:32 GMT</pubDate>
    <description>&amp;gt; p.s. ох и много же времени им понадобилось чтобы дойти до &quot;Поддержка доступа к HDFS через NFSv3;&quot;&lt;br&gt;&lt;br&gt;Самому Hadoop это не сильно и нужно. Точнее не нужно совсем. Стало быть понадобилось кому то из потребителей. Когда сделали и оттестили, тогда и вошло в релиз.&lt;br&gt;&lt;br&gt;PS не понимаю нужность HDFS через NFS. не будете же вы располагать обычные данные (файловые шары / файлы виртуалок / etc) на HDFS. загрузить данные для RM можно и через шелл. а вероятнее вообще через сборщика данных ;)&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (cijic)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#21</link>
    <pubDate>Thu, 17 Oct 2013 07:11:39 GMT</pubDate>
    <description>А потом раздаёт сервера, купленные на эти попрошайнические деньги.&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (Аноним)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#19</link>
    <pubDate>Thu, 17 Oct 2013 06:08:51 GMT</pubDate>
    <description>На сайте про это написано &quot;2.2.0 - is the first stable release in the 2.x line&quot;&lt;br&gt;</description>
</item>

<item>
    <title>Увидела свет платформа для распределённой обработки данных A... (Аноним)</title>
    <link>https://www.opennet.dev/openforum/vsluhforumID3/92206.html#18</link>
    <pubDate>Thu, 17 Oct 2013 06:02:10 GMT</pubDate>
    <description>&amp;gt;&amp;gt; Почему Википедию не реализуют на Hadoop? Быстрее бы работала на порядки.&lt;br&gt;&amp;gt; И какие распределенные вычисления нужно делать википедии?&lt;br&gt;&lt;br&gt;Под вычислениями давно уже понимают не только математические действия.&lt;br&gt;</description>
</item>

</channel>
</rss>
