The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"Компания LexisNexis опубликовала код системы распределенных ..."
Вариант для распечатки  
Пред. тема | След. тема 
Форум Разговоры, обсуждение новостей
Изначальное сообщение [ Отслеживать ]

"Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от opennews (ok) on 14-Сен-11, 18:31 
Компания LexisNexis выполнила (http://hpccsystems.com/about-us/press_center/press_releases/...) своё обещание и открыла исходные тексты проекта HPCC (http://hpccsystems.com/) (High Performance Computing Cluster), предназначенного для создания кластеров для обработки большого объема данных (петабайты). Код проекта открыт (https://github.com/hpcc-systems) под лицензией AGPLv3 (http://ru.wikipedia.org/wiki/GNU_Affero_General_Public_License), требующей открытия всех изменений в случае использования продукта для обеспечения работы сетевых сервисов. Кроме кода подготовлены (http://hpccsystems.com/download/free-community-edition) тестовые бинарные сборки Community-версии HPCC для CentOS, Red Hat, Ubuntu и SUSE Linux.

Проект HPCC написан на языке C++ и конкурирует платформой Hadoop (http://hadoop.apache.org/), написанной на языке Java. HPCC отличается значительно более высокой производительностью при отличном уровне надежности - связанные с HPCC продукты LexisNexi...

URL: http://hpccsystems.com/about-us/press_center/press_releases/...
Новость: http://www.opennet.ru/opennews/art.shtml?num=31751

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "Компания LexisNexis опубликовала код системы распределенных ..."  +3 +/
Сообщение от VoDA (ok) on 14-Сен-11, 18:31 
открытый конкурент Hadoop это хорошо - конкуренция двигает прогресс )))
Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

18. "Компания LexisNexis опубликовала код системы распределенных ..."  –1 +/
Сообщение от user (??) on 16-Сен-11, 15:17 
После второй мировой войны, Япония приняла решение что конкуренция- это плохо. Внутренний рынок был поделен между кланами, так чтобы конкуренция существовала только между Японией и внешним миром.
Современная Япония - лидер в технологиях.
Советский Союз - был мировым лидером в военных и космических технологиях.

Вся из себя конкурирующая сама с собой Европа  - неочем...
Вся из себя конкурирующая сама с собой Америка - развивает технологии и живет за счет ОГРОМНОГО внешнего долга...Вактически америка живет на иждивении у всего остального мира, тоесть за счет всех зон не обеспеченного ничем доллара.

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

20. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от Anonim (??) on 16-Сен-11, 16:53 
А где об этом можно почитать?
Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

22. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от Аноним (??) on 03-Окт-11, 21:59 
Бла-бла. Только вот американцы почему-то первые и последние были на Луне.
Ответить | Правка | ^ к родителю #18 | Наверх | Cообщить модератору

23. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от user (??) on 04-Окт-11, 08:49 
> Бла-бла. Только вот американцы почему-то первые и последние были на Луне.

"Бла-бла" - было достаточно чтобы продемонстрировать ваше незнание предмета.
А еще они первые и последние использовали атомное оружие на мирных жителях...

Ответить | Правка | ^ к родителю #22 | Наверх | Cообщить модератору

19. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от user (??) on 16-Сен-11, 15:25 
> открытый конкурент Hadoop это хорошо - конкуренция двигает прогресс )))

Прокомменитируйте пожалуста вот эту цитату:

"
Интересно, что в конце своей книги "Международная конкуренция" М.Портер признает, что его идеи и выводы о пользе "жесткой конкуренции" противоречат подходам экономистов и властей в Великобритании, Швеции, Японии и некоторых других странах [25]. Обратим внимание: страны – то он назвал не какие-нибудь отсталые, а передовые, постиндустриальные. Предупреждая о том, что замедление процессов конкуренции делает неустойчивыми блестящие перспективы Европы, М.Портер тридцать лет назад видимо даже не предполагал того, что первый глобальный экономический кризис в истории человечества начнется именно с "жестко конкурентной" американской экономики. А надо было бы.
"

Ответить | Правка | ^ к родителю #1 | Наверх | Cообщить модератору

6. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от phprus (ok) on 14-Сен-11, 20:14 
Подскажите пожалуйста, а этой системой можно обрабатывать данные в процессе их генерации? Например, у нас есть некоторый стенд, данные с которого необходимо обрабатывать во время работы стенда.

Пока чтение сайта http://hpccsystems.com/ ясности в этом вопросе для меня не добавило. Возможно кто-нибудь окажется более внимательным и сможет помочь мне найти ответ на этот вопрос.

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

8. "Компания LexisNexis опубликовала код системы распределенных ..."  –1 +/
Сообщение от Аноним (??) on 14-Сен-11, 20:23 
Задача поставлена мощно. У нас есть масорубка (ручная), нужно посчитать количество оборотов в секунду. Кто сможет? За 100 баксов?
Ответить | Правка | ^ к родителю #6 | Наверх | Cообщить модератору

9. "Компания LexisNexis опубликовала код системы распределенных ..."  –2 +/
Сообщение от Аноним (??) on 14-Сен-11, 20:28 
> масорубка

мясорубка.
Точность подсчета не менее +-2 оборота.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

13. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от Аноним (??) on 14-Сен-11, 22:45 
> мясорубка.
> Точность подсчета не менее +-2 оборота.

Да фигня вопрос: желаемую периодичность выдачи результата вы не указали :). Поэтому реализатору можно например мерять обороты ровно 1 минуту, копеечным оптодатчиком (типа того как в мышах) прицепленным к любому микроконтроллеру. С фирмварой в стиле hello world. Такое на коленке сгородит даже пионер. А в каком городе 100 баксов за такую ерунду выдают? Не боитесь что к вам толпа ардуинщиков выстроится в очередь за стольниками? :)

Ответить | Правка | ^ к родителю #9 | Наверх | Cообщить модератору

14. "Компания LexisNexis опубликовала код системы распределенных ..."  +1 +/
Сообщение от Аноним (??) on 14-Сен-11, 23:03 
Решаете задачу в лоб. Сколько за секунду можно сделать оборотов? При точности +-2 можно и на глаз посчитать без всяких оптодатчиков. Я хотел показать абсурдность ТЗ.
Ответить | Правка | ^ к родителю #13 | Наверх | Cообщить модератору

10. "Компания LexisNexis опубликовала код системы распределенных ..."  +1 +/
Сообщение от phprus (ok) on 14-Сен-11, 20:38 
> Задача поставлена мощно. У нас есть масорубка (ручная), нужно посчитать количество оборотов в секунду. Кто сможет? За 100 баксов?

А в чем собственно проблема? Терафлопс 10+ для расчетов у меня есть, сетевая инфраструктура для передачи данных есть, хранилища найдем, стенд - источник данных тоже в наличии.

А суть вопроса в том, что у нас есть своя разработка, которая эту задачу ("реалтаймовой" обработки генерируемых данных) частично решает, но так как открыт мощный инструмент для высокопроизводительных вычислений, то грех не поинтересоваться подходит ли он для решаемого нами класса задач, хотя-бы чтобы сравнить эффективность своей разработки и разработки других коллективов.

P.S. "реалтаймовой" в кавычках по тому, что гарантий реального времени у нас нет, но этот термин наиболее близкий по смыслу применительно к нашей задаче.

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

11. "Компания LexisNexis опубликовала код системы распределенных ..."  +2 +/
Сообщение от VoDA (ok) on 14-Сен-11, 22:22 
напиши им на формум или разверни систему и затести ;)
Ответить | Правка | ^ к родителю #10 | Наверх | Cообщить модератору

12. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от Аноним (??) on 14-Сен-11, 22:31 
> ? За 100 баксов?

Рискуете нарваться на то что кто-нить притащит оптический датчик оборотов и замеряет. Сто баксов за 1 замер слупить - поди хреново?! :)

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

15. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от Аноним (??) on 14-Сен-11, 23:20 
Если он притащит этот датчик с "Терафлопс 10+" на борту для замера количества оборотов в секунду ручной мясорубки с погрешностью +-2 оборота - нужно будет его в книгу рекордов гиннеса занести. Угадай в какую категорию.
Ответить | Правка | ^ к родителю #12 | Наверх | Cообщить модератору

21. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от phprus (ok) on 16-Сен-11, 21:13 
> Если он притащит этот датчик с "Терафлопс 10+" на борту для замера количества оборотов в секунду ручной мясорубки с погрешностью +-2 оборота - нужно будет его в книгу рекордов гиннеса занести. Угадай в какую категорию.

Боюсь Вас разочаровать, но калибровка метода расчета (а у него порядка 10 параметров) именно так и происходит. На вращающемся объекте (ибо вот какое дело, параметры вращения калибровочного объекта можно определить со значительной точностью, и сравнивать с тем, что рассчитал метод). Правда считает это не весь кластер, а только один узел.

Ответить | Правка | ^ к родителю #15 | Наверх | Cообщить модератору

17. "Компания LexisNexis опубликовала код системы распределенных ..."  +/
Сообщение от gs on 15-Сен-11, 14:31 
> У нас есть масорубка (ручная)

Надеюсь, ошибка во второй букве, а не в пропущенной в 3(4) позиции еще одной "с" :)

Иначе это что-то вроде "стиральной машины", которая работает здесь, а "стирает" - на полигоне в Тихом океане :)

Ответить | Правка | ^ к родителю #8 | Наверх | Cообщить модератору

16. "Компания LexisNexis опубликовала код системы распределенных ..."  +1 +/
Сообщение от Денис (??) on 15-Сен-11, 07:21 
Теоретически, НРСС нет разницы, генерируются данные на лету или он молотит заранее подготовленные данные. Вопрос эффективности упирается в то, как данные будут подаваться: хватит ли пропускной способности вашей системы, чтобы употреблять их налету, без задержек и будут ли они генерироваться достаточно быстро, чтобы кластер не простаивал в ожидании очередной порции информации.
Ответить | Правка | ^ к родителю #6 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру