The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

Компания Google открыла исходные тексты фреймворка ReFr (Reranker Framework)

05.10.2012 13:15

Компания Google открыла под лицензией BSD код фреймворка ReFr (Reranker Framework), предназначенного для создания, использования и "обучения" моделей переранжирования (reranking), позволяющих изменить весовые характеристики уже отранжированной серии входящих значений, используя для выбора дополнительные весовые характеристики и параметры, которые не были доступны при выполнении первого ранжирования. Такими параметрами могут выступать вероятностные показатели того или иного состояния значений, полученные на основе "обучения" на основе ранее обрабатываемых результатов ранжирования. Код ReFr написан на языке C++ и оптимизирован для работы в распределённых системах и параллельной обработки больших объемов данных (поддерживается работа с Hadoop).

Фреймворк ReFr подходит для решения таких задач как выбор варианта в системах машинного перевода или распознавания речи, в которых, как правило, генерируется несколько гипотез для каждого объекта распознавания. Для более точного смыслового подбора варианта в этой ситуации дополнительно могут быть учтены вероятностные характеристики, полученные на основе обучения системы по базе изначально корректных материалов (например, можно принять во внимание какой из вариантов фигурирует чаще в других переводах с учетом соседних слов). Другой пример использования ReFr - исключение аномальных значений в выборке, не наблюдаемых в прошлых выборках.

  1. Главная ссылка к новости (http://google-opensource.blogs...)
Лицензия: CC BY 3.0
Короткая ссылка: https://opennet.ru/35011-refr
Ключевые слова: refr, ranking, google
При перепечатке указание ссылки на opennet.ru обязательно


Обсуждение (20) Ajax | 1 уровень | Линейный | +/- | Раскрыть всё | RSS
  • 1.1, Guest (??), 13:36, 05/10/2012 [ответить] [﹢﹢﹢] [ · · · ]  
  • –7 +/
    зачем Гуглу разрабатывать что-то, а затем открывать на радость конкурентам?
     
     
  • 2.2, Нету имени (?), 13:38, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +8 +/
    Может потому что они империя добра ?
     
  • 2.3, анонимус (??), 13:45, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Науку не остановить!
     
  • 2.4, savant (ok), 13:45, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    Может чтобы обкатать алгоритмы на как можно большем количестве данных?
     
     
  • 3.7, kosha (?), 13:56, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +5 +/
    Гуглу не хватает данных?!
     
     
  • 4.10, savant (ok), 14:22, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    > Гуглу не хватает данных?!

    разнородных данных. У гугла данных дохрена, но на них уже гоняли, а тут на чём-то другом.

     
  • 4.17, Аноним (-), 02:13, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    > Гуглу не хватает данных?!

    Само собой. Он ведь постоянно ищет новые способы сбора данных о пользователях.

     
  • 2.5, Просто аноним (?), 13:50, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +3 +/
    может потому, что использовать это они не собирются, а просто выкинуть жалко
     
     
  • 3.9, slowpoke (?), 14:04, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +4 +/
    Аборигены в Австралии постоянно выкидывали кривые палки. В итоге они изобрели бумеранг.
     
     
  • 4.14, Аноним (-), 02:10, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    Причем изобретатель получил тяжелое сотрясение мозга.
     
  • 2.6, anonymous (??), 13:52, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    Самим допиливать влом, хотят чтобы за них конкуренты допиливали.
     
     
  • 3.15, Аноним (-), 02:11, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    > Самим допиливать влом, хотят чтобы за них конкуренты допиливали.

    Тогда надо было под copyleft-лицензией выкладывать.
    А так - конкуренты допилят и не откроют.

     
  • 3.18, другой аноним (?), 15:27, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    > Самим допиливать влом, хотят чтобы за них конкуренты допиливали.

    Так оно под BSD лицензией - конкуренты допилят для себя и не откроют

     
  • 2.8, Аноним (-), 13:58, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +8 +/
    >  зачем Гуглу разрабатывать что-то, а затем открывать на радость конкурентам?

    Если некто выложит перед вами самосвал кирпичей, это еще не значит что вы дворец их них отгрохать сможете.

     

  • 1.11, ВовкаОсиист (ok), 17:08, 05/10/2012 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    > на языке C++

    Да не ужели... А как же ими любимая жавочка?

     
     
  • 2.12, XoRe (ok), 17:39, 05/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    >> на языке C++
    > Да не ужели... А как же ими любимая жавочка?

    У вас неожиданный баттхерт?

     
  • 2.16, Аноним (-), 02:12, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • –1 +/
    >> на языке C++
    > Да не ужели... А как же ими любимая жавочка?

    Сожрала всю память на всех серваках гугла и требует еще.

     

  • 1.13, umbr (ok), 18:32, 05/10/2012 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Скайнет решил выложить часть исходников самого себя.
     
  • 1.19, baz (??), 20:18, 06/10/2012 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    так а нахрен оно нужно? )))))
     
     
  • 2.20, Freest (?), 21:12, 06/10/2012 [^] [^^] [^^^] [ответить]  
  • +/
    Фреймворк ReFr подходит для решения таких задач как выбор варианта в системах машинного перевода или распознавания речи, в которых, как правило, генерируется несколько гипотез для каждого объекта распознавания. Для более точного смыслового подбора варианта в этой ситуации дополнительно могут быть учтены вероятностные характеристики, полученные на основе обучения системы по базе изначально корректных материалов (например, можно принять во внимание какой из вариантов фигурирует чаще в других переводах с учетом соседних слов). Другой пример использования ReFr - исключение аномальных значений в выборке, не наблюдаемых в прошлых выборках.
     
     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Партнёры:
    PostgresPro
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2024 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру