Опубликован выпуск системы машинного перевода OpenNMT 0.28.0 (Open Neural Machine Translation), использующей методы машинного обучения. Для построения нейронной сети проект использует возможности библиотеки глубинного машинного обучения TensorFlow. Код развиваемых проектом OpenNMT модулей написан на языке Python и распространяется под лицензией MIT. Готовые модели подготовлены для английского, немецкого и каталанского языков, для остальных языков можно самостоятельно сформировать модель на основе набора данных от проекта OPUS (для обучения системе передаётся два файла - один с предложениями на исходном языке, а второй с качественным переводом этих предложений на целевой язык)...Подробнее: https://www.opennet.ru/opennews/art.shtml?num=57577
>pip install ctranslate2а где-нибудь можно посмотреть результат онлайн? А то systran известные трешеделы, нет доверия.
Любопытно. Коли обучаемая система, и есть хорошие переводы Набокова и туда, и сюда, и Пастернака, и Вудхауза, и Троллопа, да и Шекспир не обойден хорошими переводами, словарный запас у них и словоформы выходят за пределы "поколения твитов", может возможно сделать хороший переводчик?
Там перевод литературный, не "близко к тексту", а "близко по смыслу и духу", а это даже для ML сложно.Сочинить шумелки, пыхтелки, сопелки, а также кричалки и ворчалки Винни-пуха - ни один переводчик не сможет, наверное, никогда. А люди - смогли.
DALL-E может рисовать картинки в заданном стиле. Почему бы и генераторам текста не научится генерить тексты в заданном стиле? Тебе кажется, что с текстом как-то иначе, и у ML возникнут неодолимые проблемы с этим?С текстом есть сложность в осмысленности этого текста. С картинками нет проблем осмысленности, потому что они проективны: зритель сам находит в них смысл, даже если они бессмысленны. Кляксы Роршаха подтвердят. А смысл, когда он есть, завязан на причинно-следственные модели в головах у людей, а у современного ИИ этих моделей нет пока. Поэтому у него смысл выглядит непреодолимой проблемой, по-крайней мере до тех пор, пока разработчики ИИ не сменят парадигму. Но на пути передачи стиля я не вижу особых проблем.
> Применение TensorFlow позволяет
> задействовать возможности GPUАгаблин, и кому это надо кроме его кодеров, чтоб еще на GPU это акселерировать? Тому кто пытается закосплеить гуглтранслейт третьесортный? Он даже и первосортный то глубинно жжет напалмом, выдавая аццкие перлы.
> чтоб еще на GPU это акселерироватьНовая фича пакета для перевода - майнинг на ГПУ во время использования в пользу разрабов
Но без поддержки видеокарт получается даже меньше чем ничего
2022 год, теперь для работы с текстом нужен Tensorflow и GPU
Никто не мешает вам продолжать работать с текстом (на самом деле перевод — это не работа с текстом, но да ладно) на уровне PROMT'а образца 2000 года.
Хочу согласится, перевод это когда ты пытаешься понять на одном языке, затем пытаешься объяснить на другом
Для работы с текстом на родном языке, Tensorflow точно ненужен. Вот GPU нужен, если это текстовый процессор (для отрисовки интерфейса).
Для работы с текстом как с набором символов достаточно и Z80. Но когда вопрос встаёт именно о _языке_, всё меняется. Простейший пример: нужно текст, написанный в настоящем времени, переделать на написанный в прошедшем. Что, SED уже не справляется?
про soft rendering на cpu современные погромисты не слышали
240 кадров в 4к не вытягивает плавно отрендерить (и требует слишком много электричества), в итоге имеешь видимые лаги на скролле. Проблема сугубо техническая, видеокарты куда лучше справляются с такими задачами. Это хорошо, что программисты, которым может прийти в голову рендерить на процессоре, давно ушли в прошлое.
240 кадров, безусловно, необходимы тестовому процессору.
*текстовому
Текстовому процессоры необходимо много что - как и браузеру. Видимо есть скрытая сложность в отображении сложных документов.
Запиши сейчас эти слова и сохрани где-нибудь. Когда зрение начнёт садиться, достанешь и посмеёшься.
Тогда уже 960 к/с будет минимумом.
А посмеяться я могу и сейчас.
Современные опеннетовцы просто не сталкивались с софтрендером, и поэтому считают, что это что-то хорошее. А те, кому приходилось сталкиваться, и поработать с десктопом поверх vesa драйвера видеокарты например, особой любви к софтрендеру не испытывают. Когда у тебя скролл волнами по экрану прокатывается, хочется смеяться над теми, кто стонет о тиринге.
> Когда у тебя скролл волнами по экрану прокатывается, хочется смеяться над
> теми, кто стонет о тиринге.В Diablo 2 местность даже в самых быстрых сапогах-скороходах прекрасно скроллилась без "волн", тиринга и прочих артефактов на третьем пентиуме. А сегодня на восьмиядерном андроиде скролл в соцсетях подлагивает.
Ну ты сравнил. Диабло 2, со статичным бекграундом уровня, и несколькими анимациями мобов, которые как-то там надо комбинировать. И соцсеточка, которая рисует 100500 глифов. Плюс соцсеточка -- это тысячи жабоскрипта, да ещё обмазанные жабой андроида. И подлагивает, по-моему опыту, оно из-за ввода-вывода: сеть и накопители они меееедленные, ты знаешь об этом? Диабло мог хранить всё в оперативке и видеопамяти.
А почему это просто работа с текстом? Тут нужно переводить смысл (работа со смыслом), угадывать его, машинный перевод - сложное и "нечёткое" дело как по мне. Относительно качественные переводчики появились не так давно и они - нейронные сети, ведь так? И всё равно до людей далеко.
Это ...мышление, но в каком-то смысле.
Что ещё ожидать от смузихлебов веб-макак, не умеющих освободить за собой память и не знающих архитектуру систем компьютеров
> для обучения системе передаётся два файла - один с предложениями на исходном языке, а второй с качественным переводом этих предложений на целевой языкНадо поэкспериментировать и скормить этой системе смешные переводы Матрицы и Властелина колец от Гоблина.
А есть автономные свободные эл. переводчики со словарями в комплекте? Что-то наподобие старого "Сократа" под виндой?
Ага, а переводили чтобы как Deepl.
Это уже умеет переводить hentai jrpg с лунного на гаш? Нет? Бесполезное барахло тогда.
Вообще-то умеет. Гугли Translator++
Современный серверный ПРОМТ, "ой какая неожиданность" - предлагает использовать gpu для ускорения перевода