The OpenNET Project / Index page

[ новости/++ | форум | wiki | теги | ]

08.02.2017 13:30  Google представил технику реконструкции пикселизированных изображений

Разработчики из команды Google Brain, занимающейся исследованиями в области искусственного интеллекта, нейронных сетей и машинного обучения, опубликовали свои наработки в области восстановления пикселизированных изображений, детализация которых была утеряна в результате масштабирования.

Предложенная система позволяет с достаточно высокой точностью реконструировать возможное изображение даже когда имеются сведения всего о нескольких десятках пикселей. Например, на приведённом выше изображении показан результат воссоздания изображения, уменьшенного до 8x8 пикселей. Во втором столбце размещён предложенный системой вариант, а в третьем столбце эталонное изображение, из которого был создан исходный вариант 8x8.

Метод основан на комбинировании двух нейронных сетей. Первая сеть решает задачу сопоставления восстанавливаемого изображения 8×8 с эталонной коллекцией изображений более высокого разрешения. Эталонные изображения приводятся к разрешению исходного варианта (8x8) и выявляются наиболее близкие совпадения. Вторая сеть, пытается восстановить недостающие детали на исходном изображении, используя в качестве источника воссоздания утраченных деталей наиболее близкие изображения.

Например, для реконструкции изображений ванной комнаты используются детали с фотографий реальных ванных комнат, которые оказались наиболее близки при сопоставлении в низком разрешении. На последнем этапе воссоздания изображения результат работы двух нейронных сетей комбинируется. При воссоздании деталей используется свёрточная нейронная сеть pixel-cnn++, реализация которой распространяется под лицензий MIT в виде модуля для платформы глубокого машинного обучения TensorFlow.

Восстановленное изображение выглядит реалистично, но оно не является реальным, а лишь показывает как могло выглядеть реальное изображение, предлагая наиболее вероятный вариант. Результат обычно содержит детали, которых не было на исходном изображении. Для оценки точности восстановления группе добровольцев было предложено исходное изображение в высоком разрешении и два уменьшенных варианта - восстановленное в 32x32 из 8x8 и уменьшенное до 32x32. Люди ошибочно посчитали реальным восстановленное изображение в 10% случаев, если на фотографии было лицо, и в 28% случаев, если на фотографии была ванная комната. Идеальным был бы результат в 50%, который указывал бы на то, что изображения неотличимы.



  1. Главная ссылка к новости (https://arstechnica.com/inform...)
  2. OpenNews: В рамках проекта subpixel подготовлена нейронная сеть для восстановления изображений
  3. OpenNews: Google открыл код SyntaxNet, системы восприятия естественного языка
  4. OpenNews: Открыт код системы машинного обучения TensorFlow, разработанной командой Google Brain
  5. OpenNews: Facebook открыл наработки по распознаванию объектов на фотографиях
  6. OpenNews: Google открыл код SyntaxNet, системы восприятия естественного языка
Лицензия: CC-BY
Тип: К сведению
Ключевые слова: pixel, tensorflow, image
При перепечатке указание ссылки на opennet.ru обязательно
Обсуждение Ajax/Линейный | Раскрыть все сообщения | RSS
 
  • 1.1, Аноним (-), 13:41, 08/02/2017 [ответить] [смотреть все]    [к модератору]
  • +19 +/
    Никаким воссозданием тут и не пахнет.
     
     
  • 2.5, ixrws (??), 13:57, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]
  • +26 +/
    А как можно воссоздать то, что утрачено безвозвратно? Только нафантазировать или наобещать. Так с историей делают, теперь с фотографиями будут делать.
     
     
  • 3.13, Аноним (-), 14:31, 08/02/2017 [^] [ответить] [смотреть все]    [к модератору]
  • +30 +/
    Даже страшно подумать к какой трагической х**те это приведет в уголовном деле, если хватит мозгов доверять этой штуке.
     
     
  • 4.96, rshadow (ok), 12:55, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]
  • +3 +/
    Просто не выкладывай свои фотки в контактике и страдать будут всякие пугачевы и ... весь текст скрыт [показать]
     
  • 3.22, Аноним (-), 15:21, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +3 +/
    Ну наш мозг же как-то справляется Слышим сильно искажённое аудио, осознаём 48k ... весь текст скрыт [показать]
     
     
  • 4.26, анон (?), 15:38, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +4 +/
    Только если вы уже похожее аудио слышали, и картинки дорисовываются только до уж... весь текст скрыт [показать]
     
     
  • 5.27, Аноним (-), 15:53, 08/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +11 +/
    Вот, кстати, давно заметил, что хорошо знакомая музыка может радовать, чем бы ее не воспроизводили (хоть даже динамиком мобильника или ноутбука), потому что полноценное звучание уже есть в памяти, достаточно только напоминания. А вот впечатление от новой музыки может быть сильно испорчено плохим качеством звука.
     
     
  • 6.32, Moomintroll (ok), 16:41, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Да нифига Меня переворачивает, когда слушают музыку через динамики телефона А ... весь текст скрыт [показать]
     
     
  • 7.42, KOT040188 (ok), 18:27, 08/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +8 +/
    Возможно вы просто психопат и вам нужен повод.
     
     
  • 8.53, Аноним (-), 19:56, 08/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +6 +/
    Все может оказаться еще хуже — аудиофилия страшная вещь: ТЛЗ, самодельные кондюки на электролите из соплей девственницы, звучащие провода (включая шнур питания, ага).
     
     
  • 9.74, Аноним (-), 23:22, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –5 +/
    Электролит - это как раз тот случай, когда субъективные оценки легко подтверждаю... весь текст скрыт [показать]
     
     
  • 10.77, Michael Shigorin (ok), 00:10, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Многие ли из культурных бывали в глухой комнате, не говоря уже -- аудиофильств... весь текст скрыт [показать]
     
     
  • 11.78, Аноним (-), 00:18, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Бывали, конечно Абсолютно противоестественная для звукового восприятия среда и... весь текст скрыт [показать]
     
     
  • 12.80, Zarat (ok), 03:02, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Оффтоп К тому же, подтверждено двойным, плацебо-контроллируемым исследованием, ч... весь текст скрыт [показать]
     
     
  • 13.85, Аноним (-), 05:18, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Сводить все к одним лишь резонансам было бы упрощением Тот же самый оркестр на ... весь текст скрыт [показать]
     
  • 13.87, Аноним (-), 05:41, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Подмешивают шумы, маскирующие изначальные дефекты записи т н дизеринг , как в... весь текст скрыт [показать]
     
  • 10.84, Аноним (-), 04:21, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +2 +/
    Вот только студийное оборудование тяготеет больше к прагматичным решениям То ес... весь текст скрыт [показать]
     
     
  • 11.86, Аноним (-), 05:26, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –2 +/
    Прошел, конечно И это бывает слышно Но еще добавлять не надо ... весь текст скрыт [показать]
     
     
  • 12.98, Аноним (-), 15:41, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    А когда не слышно, как тогда этого достигли ... весь текст скрыт [показать]
     
     
  • 13.99, Аноним (-), 16:23, 09/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +/
    Записывали не где попало и не на чем попало. :)
     
  • 10.94, anonymous (??), 11:27, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +4 +/
    Ох уж эти сказки аудиофилов До определённого предела аудиофилия работает, конеч... весь текст скрыт [показать]
     
     
  • 11.107, Ю.Т. (?), 12:40, 11/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Коврики неровно положены ... весь текст скрыт [показать]
     
  • 10.103, Аноним (-), 19:48, 09/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +1 +/
    Теперь расскажи мне о том, какие же провода идут к тебе от подстанции, клован.
     
  • 9.97, adminlocalhost (ok), 14:26, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Без всякой СПЕЦИАЛЬНОЙ аудиофилии По поводу проводов вопрос обстоятельно рассмо... весь текст скрыт [показать]
     
     
  • 10.100, Аноним (-), 17:05, 09/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +/
    Спасибо за ссылку.
     
  • 10.101, Michael Shigorin (ok), 18:42, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Не удивлюсь, если это элементарно долетевший до звучка или микрофона механически... весь текст скрыт [показать]
     
     
  • 11.104, Аноним (-), 19:55, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Так оно и есть Эксперементаторы могут ронять провода на паралон, например Или ... весь текст скрыт [показать]
     
  • 8.58, Аноним_1 (?), 20:19, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +3 +/
    Когда я вижу слушающих музыку через граммофон телефона в общественных местах, мн... весь текст скрыт [показать]
     
     
  • 9.83, Аноним (-), 03:58, 09/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +/
    Меня это тоже сильно раздражает, но речь была совсем не об этом.
     
  • 7.105, Аноним (-), 20:14, 10/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • –1 +/
    "Очень плохая музыка" ?
     
  • 5.55, Аноним_1 (?), 20:14, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +2 +/
    Может и посложнее, но не менее бажные Человеческий мозг видит знакомые образы т... весь текст скрыт [показать]
     
  • 1.3, dkg (?), 13:55, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +2 +/
    Круто же!
     
  • 1.4, Аноним (-), 13:56, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +2 +/
    Во что восстановливается чёрный квадрат?
     
     
  • 2.7, Аноним (-), 13:58, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +5 +/
    В коробку из-под ксерокса с известным содержимым.
     
  • 2.8, tsypa (?), 13:59, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +1 +/
    в Малевича
     
  • 2.109, die_russofobs (?), 20:55, 02/04/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    В чёрный же квадрат на стене на против входа в дом, собой символизиующий нап... весь текст скрыт [показать] [показать ветку]
     
  • 1.6, Аноним (-), 13:58, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +/
    Вот же она, замена полиграфу.
     
     
  • 2.39, Андрей (??), 17:45, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • –1 +/
    И анализу по структуре и цвету волос Когда наконец-то научились анализировать Д... весь текст скрыт [показать] [показать ветку]
     
     
  • 3.62, Аноним (-), 20:42, 08/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Вот кстати сериал про первое применение днк в криминалистике - код убийцы - очен... весь текст скрыт [показать]
     
  • 3.95, Гентушник (ok), 12:04, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Кстати при анализе ДНК проверяют не на полное стопроцентное сходство, а рассматр... весь текст скрыт [показать]
     
  • 1.9, Аноним (-), 14:02, 08/02/2017 [ответить] [смотреть все]     [к модератору]  
  • +/
    Люди на 32х32 просто другие по сравнению с groung_truth, то-есть для восстановле... весь текст скрыт [показать]
     
     
  • 2.38, Андрей (??), 17:41, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • –1 +/
    Вот-вот они настолько другие, что некоторые настоящие актёры больше похожи друг... весь текст скрыт [показать] [показать ветку]
     
  • 1.12, Аноним (-), 14:12, 08/02/2017 [ответить] [смотреть все]     [к модератору]  
  • +2 +/
    Интересно, каким образом определяется, что изображение нужно воссоздавать именно... весь текст скрыт [показать]
     
     
  • 2.81, Zarat (ok), 03:09, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • –1 +/
    Наверное, или ручками задается, или, что более вероятно, Гугл же статистику соби... весь текст скрыт [показать] [показать ветку]
     
  • 2.88, Ал (??), 06:00, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +/
    Человек явным способом это задает
     
  • 1.14, fi (ok), 14:42, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +/
    да, скрывать лица на порно сайтах станет сложней :))))
     
     
  • 2.71, Хаосит (?), 22:48, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +/
    Пять букв: пакет.
     
  • 1.15, Аноним (-), 14:45, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +7 +/
    Не, теперь история бесконечного увеличения с камер видеонаблюдения в американских фильмах становится реальностью.
     
     
  • 2.82, Zarat (ok), 03:10, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +/
    Ждал этот коммент
     
  • 2.89, EuPhobos (ok), 07:16, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Однако детали, которые так важны в этих фильмах, эта система берёт с других фото... весь текст скрыт [показать] [показать ветку]
     
  • 1.17, vitalif (ok), 14:57, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +2 +/
    С такой точностью и с таким объёмом базы, как у гугла, можно просто похожее изображение подобрать и за оригинал выдать)))
     
     
  • 2.90, EuPhobos (ok), 07:17, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • –1 +/
    Об этом и написано, оно просто берёт схожие фото, только более сложным алгоритмо... весь текст скрыт [показать] [показать ветку]
     
  • 1.18, vitalif (ok), 14:58, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +1 +/
    Ещё они конечно молодцы, но это хорошо когда известно под каким углом лицо. А чуть поверни и будет вообще ни о чём результат, я предполагаю
     
  • 1.19, Аноним (-), 15:09, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +3 +/
    Кристобаль де Кубик?
     
  • 1.20, SpaceRaven (ok), 15:14, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • –1 +/
    ну не знаю, честно говоря лица из одной линей не очень то и похожи между собой если так можно выразиться тут :)
     
     
  • 2.63, Анонимс (?), 20:48, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    кое-что очень даже хорошо получилось - нос прямой, губы тонкие, подбородок круг... весь текст скрыт [показать] [показать ветку]
     
     
  • 3.91, EuPhobos (ok), 07:19, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Предлагаю подсунуть туда классического пришельца из фильмов, подозреваю в итоге ... весь текст скрыт [показать]
     
  • 1.21, Аноним (-), 15:20, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +2 +/
    Ждём Super Mario HD и Minecraft HD.
     
     
  • 2.25, A.Stahl (ok), 15:36, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +4 +/
    >Ждём Super Mario HD

    И окажется, что Марио -- она:)

     
     
  • 3.49, annual slayer (?), 19:22, 08/02/2017 [^] [ответить] [смотреть все]    [к модератору]  
  • +/
    ну, тут уже на что сеть натаскать...
     
     
  • 4.110, die_russofobs (?), 21:07, 02/04/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Лаконичней и правильней что нужно будет - то и нарисует ... весь текст скрыт [показать]
     
  • 1.33, Moomintroll (ok), 16:44, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +3 +/
    А теперь пусть покажут то же самое, но с любимыми объектами из фильмов — номерами машин!
     
     
  • 2.47, www2 (ok), 19:12, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Вот, кстати, номера гораздо реальнее восстановить таким образом У каждой цифры ... весь текст скрыт [показать] [показать ветку]
     
  • 1.34, nonamed anon (?), 16:52, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +/
    Давай все по новой, гугл, все фигня. На чем сеть научишь, то она и будет фантазировать.
     
  • 1.36, Анонимум (?), 17:32, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +/
    Ещё лет 10 назад думал о таком применении нейронных сетей (а теоретики кибернетики, само собой, ещё в 60-х, скорее всего) и уже тогда понял, что это будет враньё, а не восстановление. Ничего продвинутее метода super-resolution на основе совмещения субпиксельной информации из нескольких кадров не придумано, да и тот даёт смехотворно мало прироста в детализации. И доля вранья там тоже присутствует, но хоть не такая... Хотя, по идее, если их совместить, добавить алгоритм анализа правдоподобности, и через то ограничить процент "вранья"...
     
     
  • 2.48, www2 (ok), 19:13, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Если бы губы Никанора Ивановича да приставить к носу Ивана Кузьмича, да взять ск... весь текст скрыт [показать] [показать ветку]
     
  • 2.79, Мяут (ok), 00:47, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +1 +/
    Ничего продвинутей метода, используемого в нашей голове, которая, понятное дело,... весь текст скрыт [показать] [показать ветку]
     
  • 1.37, Аноним (-), 17:40, 08/02/2017 [ответить] [смотреть все]     [к модератору]  
  • +/
    Одно дело утеряно в результате масштабирования, другое это обработка фото с низк... весь текст скрыт [показать]
     
     
  • 2.40, Аноним (-), 17:51, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Название проекта Google brain, они хотят доказать что разработали искусственный ... весь текст скрыт [показать] [показать ветку]
     
     
  • 3.108, Ю.Т. (?), 12:43, 11/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Они не могут хотеть это доказывать Разве только опровергли работу Флореса и Вин... весь текст скрыт [показать]
     
  • 1.64, Baz (?), 20:55, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +2 +/
    сразу вспомнил ту гифку где нашли лицо преступника по отражению на диске автомобиля через камеру уличного банкомата...
     
     
  • 2.66, anonymous (??), 21:54, 08/02/2017 [^] [ответить] [смотреть все] [показать ветку]    [к модератору]  
  • +4 +/
    http://cs5.pikabu.ru/images/big_size_comm/2014-10_4/14135566876324.jpg
     
     
  • 3.92, fyjy (?), 08:30, 09/02/2017 [^] [ответить] [смотреть все]     [к модератору]  
  • +/
    Ох, это точно но счистема реально работает на угадывание и в итоге был человек ... весь текст скрыт [показать]
     
  • 1.75, Линукс еще не готов (?), 23:58, 08/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +4 +/
    А не пробовали восстановить лицо из фото ванной комнаты?
     
     
  • 2.93, Аноним (-), 08:34, 09/02/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Собственно, на первом скриншоте как раз восстанавливается лицо из отражения в зе... весь текст скрыт [показать] [показать ветку]
     
  • 1.102, Аноним (-), 18:48, 09/02/2017 [ответить] [смотреть все]    [к модератору]  
  • +/
    пиратки камрипа можно пилить в HD?
     
     
  • 2.112, die_russofobs (?), 23:14, 02/04/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Для этого технологии такого уровня - даже не нужны ну разве что для уже запис... весь текст скрыт [показать] [показать ветку]
     
  • 1.106, Аноним (-), 09:23, 11/02/2017 [ответить] [смотреть все]     [к модератору]  
  • –1 +/
    Отлично Скоро можно будет восстановить утраченный код динозавров у птиц и воссо... весь текст скрыт [показать]
     
     
  • 2.111, die_russofobs (?), 22:44, 02/04/2017 [^] [ответить] [смотреть все] [показать ветку]     [к модератору]  
  • +/
    Никаких миллионов утерянных видов животных не было, всё что сейчас - то было и р... весь текст скрыт [показать] [показать ветку]
     

     Добавить комментарий
    Имя:
    E-Mail:
    Заголовок:
    Текст:


      Закладки на сайте
      Проследить за страницей
    Created 1996-2018 by Maxim Chirkov  
    ДобавитьПоддержатьВебмастеруГИД  
    Hosting by Ihor