The OpenNET Project / Index page

[ новости/++ | форум | wiki | теги | ]

08.02.2017 13:30  Google представил технику реконструкции пикселизированных изображений

Разработчики из команды Google Brain, занимающейся исследованиями в области искусственного интеллекта, нейронных сетей и машинного обучения, опубликовали свои наработки в области восстановления пикселизированных изображений, детализация которых была утеряна в результате масштабирования.

Предложенная система позволяет с достаточно высокой точностью реконструировать возможное изображение даже когда имеются сведения всего о нескольких десятках пикселей. Например, на приведённом выше изображении показан результат воссоздания изображения, уменьшенного до 8x8 пикселей. Во втором столбце размещён предложенный системой вариант, а в третьем столбце эталонное изображение, из которого был создан исходный вариант 8x8.

Метод основан на комбинировании двух нейронных сетей. Первая сеть решает задачу сопоставления восстанавливаемого изображения 8×8 с эталонной коллекцией изображений более высокого разрешения. Эталонные изображения приводятся к разрешению исходного варианта (8x8) и выявляются наиболее близкие совпадения. Вторая сеть, пытается восстановить недостающие детали на исходном изображении, используя в качестве источника воссоздания утраченных деталей наиболее близкие изображения.

Например, для реконструкции изображений ванной комнаты используются детали с фотографий реальных ванных комнат, которые оказались наиболее близки при сопоставлении в низком разрешении. На последнем этапе воссоздания изображения результат работы двух нейронных сетей комбинируется. При воссоздании деталей используется свёрточная нейронная сеть pixel-cnn++, реализация которой распространяется под лицензий MIT в виде модуля для платформы глубокого машинного обучения TensorFlow.

Восстановленное изображение выглядит реалистично, но оно не является реальным, а лишь показывает как могло выглядеть реальное изображение, предлагая наиболее вероятный вариант. Результат обычно содержит детали, которых не было на исходном изображении. Для оценки точности восстановления группе добровольцев было предложено исходное изображение в высоком разрешении и два уменьшенных варианта - восстановленное в 32x32 из 8x8 и уменьшенное до 32x32. Люди ошибочно посчитали реальным восстановленное изображение в 10% случаев, если на фотографии было лицо, и в 28% случаев, если на фотографии была ванная комната. Идеальным был бы результат в 50%, который указывал бы на то, что изображения неотличимы.



  1. Главная ссылка к новости (https://arstechnica.com/inform...)
  2. OpenNews: В рамках проекта subpixel подготовлена нейронная сеть для восстановления изображений
  3. OpenNews: Google открыл код SyntaxNet, системы восприятия естественного языка
  4. OpenNews: Открыт код системы машинного обучения TensorFlow, разработанной командой Google Brain
  5. OpenNews: Facebook открыл наработки по распознаванию объектов на фотографиях
  6. OpenNews: Google открыл код SyntaxNet, системы восприятия естественного языка
Лицензия: CC-BY
Тип: К сведению
Ключевые слова: pixel, tensorflow, image
При перепечатке указание ссылки на opennet.ru обязательно
Обсуждение Ajax/Линейный | Раскрыть все сообщения | RSS
 
  • 1.1, Аноним (-), 13:41, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]
  • +19 +/
    Никаким воссозданием тут и не пахнет.
     
     
  • 2.5, ixrws (??), 13:57, 08/02/2017 [^] [ответить]    [к модератору]
  • +26 +/
    А как можно воссоздать то, что утрачено безвозвратно? Только нафантазировать или наобещать. Так с историей делают, теперь с фотографиями будут делать.
     
     
  • 3.13, Аноним (-), 14:31, 08/02/2017 [^] [ответить]    [к модератору]
  • +30 +/
    Даже страшно подумать к какой трагической х**те это приведет в уголовном деле, если хватит мозгов доверять этой штуке.
     
     
  • 4.96, rshadow (ok), 12:55, 09/02/2017 [^] [ответить]    [к модератору]
  • +3 +/
    Просто не выкладывай свои фотки в контактике и страдать будут всякие пугачевы и киркоровы =)
     
  • 3.22, Аноним (-), 15:21, 08/02/2017 [^] [ответить]    [к модератору]
  • +3 +/
    Ну наш мозг же как-то справляется. Слышим сильно искажённое аудио, осознаём 48k аудио. И картинки дорисовываем в уме.
     
     
  • 4.26, анон (?), 15:38, 08/02/2017 [^] [ответить]    [к модератору]  
  • +4 +/
    Только если вы уже похожее аудио слышали, и картинки дорисовываются только до уже виденных.
    Общий принцип тот же, что и в этой технологии, только алгоритмы посложнее.
     
     
  • 5.27, Аноним (-), 15:53, 08/02/2017 [^] [ответить]    [к модератору]  
  • +11 +/
    Вот, кстати, давно заметил, что хорошо знакомая музыка может радовать, чем бы ее не воспроизводили (хоть даже динамиком мобильника или ноутбука), потому что полноценное звучание уже есть в памяти, достаточно только напоминания. А вот впечатление от новой музыки может быть сильно испорчено плохим качеством звука.
     
     
  • 6.32, Moomintroll (ok), 16:41, 08/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Да нифига Меня переворачивает, когда слушают музыку через динамики телефона А ... весь текст скрыт [показать]
     
     
  • 7.42, KOT040188 (ok), 18:27, 08/02/2017 [^] [ответить]    [к модератору]  
  • +8 +/
    Возможно вы просто психопат и вам нужен повод.
     
     
  • 8.53, Аноним (-), 19:56, 08/02/2017 [^] [ответить]    [к модератору]  
  • +6 +/
    Все может оказаться еще хуже — аудиофилия страшная вещь: ТЛЗ, самодельные кондюки на электролите из соплей девственницы, звучащие провода (включая шнур питания, ага).
     
     
  • 9.74, Аноним (-), 23:22, 08/02/2017 [^] [ответить]     [к модератору]  
  • –5 +/
    Электролит - это как раз тот случай, когда субъективные оценки легко подтверждаю... весь текст скрыт [показать]
     
     
  • 10.77, Michael Shigorin (ok), 00:10, 09/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Многие ли из культурных бывали в глухой комнате, не говоря уже -- аудиофильств... весь текст скрыт [показать]
     
     
  • 11.78, Аноним (-), 00:18, 09/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Бывали, конечно Абсолютно противоестественная для звукового восприятия среда и... весь текст скрыт [показать]
     
     
  • 12.80, Zarat (ok), 03:02, 09/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Оффтоп К тому же, подтверждено двойным, плацебо-контроллируемым исследованием, ч... весь текст скрыт [показать]
     
     
  • 13.85, Аноним (-), 05:18, 09/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Сводить все к одним лишь резонансам было бы упрощением Тот же самый оркестр на ... весь текст скрыт [показать]
     
  • 13.87, Аноним (-), 05:41, 09/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Подмешивают шумы, маскирующие изначальные дефекты записи т н дизеринг , как в... весь текст скрыт [показать]
     
  • 10.84, Аноним (-), 04:21, 09/02/2017 [^] [ответить]     [к модератору]  
  • +2 +/
    Вот только студийное оборудование тяготеет больше к прагматичным решениям То ес... весь текст скрыт [показать]
     
     
  • 11.86, Аноним (-), 05:26, 09/02/2017 [^] [ответить]    [к модератору]  
  • –2 +/
    > В общем, звук все равно уже прошел через все это.

    Прошел, конечно. И это бывает слышно. Но еще добавлять не надо. :)

     
     
  • 12.98, Аноним (-), 15:41, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    > Прошел, конечно. И это бывает слышно. Но еще добавлять не надо. :)

    А когда не слышно, как тогда этого достигли?

     
     
  • 13.99, Аноним (-), 16:23, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Записывали не где попало и не на чем попало. :)
     
  • 10.94, anonymous (??), 11:27, 09/02/2017 [^] [ответить]    [к модератору]  
  • +4 +/
    Ох уж эти сказки аудиофилов. До определённого предела аудиофилия работает, конечно, но это болезнь.
    https://0x0.st/W6J.jpg
     
     
  • 11.107, Ю.Т. (?), 12:40, 11/02/2017 [^] [ответить]    [к модератору]  
  • +/
    > Ох уж эти сказки аудиофилов. До определённого предела аудиофилия работает, конечно, но
    > это болезнь.
    > https://0x0.st/W6J.jpg

    Коврики неровно положены.

     
  • 10.103, Аноним (-), 19:48, 09/02/2017 [^] [ответить]    [к модератору]  
  • +1 +/
    Теперь расскажи мне о том, какие же провода идут к тебе от подстанции, клован.
     
  • 9.97, adminlocalhost (ok), 14:26, 09/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Без всякой СПЕЦИАЛЬНОЙ аудиофилии По поводу проводов вопрос обстоятельно рассмо... весь текст скрыт [показать]
     
     
  • 10.100, Аноним (-), 17:05, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Спасибо за ссылку.
     
  • 10.101, Michael Shigorin (ok), 18:42, 09/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Не удивлюсь, если это элементарно долетевший до звучка или микрофона механически... весь текст скрыт [показать]
     
     
  • 11.104, Аноним (-), 19:55, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Так оно и есть. Эксперементаторы могут ронять провода на паралон, например. Или открыть курс школьной физики и выяснить, что движение влияет на электромагнитные волны НИКАК.
     
  • 8.58, Аноним_1 (?), 20:19, 08/02/2017 [^] [ответить]     [к модератору]  
  • +3 +/
    Когда я вижу слушающих музыку через граммофон телефона в общественных местах, мн... весь текст скрыт [показать]
     
     
  • 9.83, Аноним (-), 03:58, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Меня это тоже сильно раздражает, но речь была совсем не об этом.
     
  • 7.105, Аноним (-), 20:14, 10/02/2017 [^] [ответить]    [к модератору]  
  • –1 +/
    "Очень плохая музыка" ?
     
  • 5.55, Аноним_1 (?), 20:14, 08/02/2017 [^] [ответить]     [к модератору]  
  • +2 +/
    Может и посложнее, но не менее бажные Человеческий мозг видит знакомые образы т... весь текст скрыт [показать]
     
     ....нить скрыта, показать (30)

  • 1.3, dkg (?), 13:55, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    Круто же!
     
  • 1.4, Аноним (-), 13:56, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    Во что восстановливается чёрный квадрат?
     
     
  • 2.7, Аноним (-), 13:58, 08/02/2017 [^] [ответить]    [к модератору]  
  • +5 +/
    В коробку из-под ксерокса с известным содержимым.
     
  • 2.8, tsypa (?), 13:59, 08/02/2017 [^] [ответить]    [к модератору]  
  • +1 +/
    в Малевича
     
  • 2.109, die_russofobs (?), 20:55, 02/04/2017 [^] [ответить]     [к модератору]  
  • +/
    В чёрный же квадрат на стене на против входа в дом, собой символизиующий нап... весь текст скрыт [показать]
     
  • 1.6, Аноним (-), 13:58, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    Вот же она, замена полиграфу.
     
     
  • 2.39, Андрей (??), 17:45, 08/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    И анализу по структуре и цвету волос Когда наконец-то научились анализировать Д... весь текст скрыт [показать]
     
     
  • 3.62, Аноним (-), 20:42, 08/02/2017 [^] [ответить]    [к модератору]  
  • –1 +/
    Вот кстати сериал про первое применение днк в криминалистике - код убийцы - очень хорош.
     
  • 3.95, Гентушник (ok), 12:04, 09/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Кстати при анализе ДНК проверяют не на полное стопроцентное сходство, а рассматр... весь текст скрыт [показать]
     
  • 1.9, Аноним (-), 14:02, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    Люди на 32х32 просто другие по сравнению с groung_truth, то-есть для восстановления оно все равно не годится, но может нарисовать что-то, тоже неплохо.
     
     
  • 2.38, Андрей (??), 17:41, 08/02/2017 [^] [ответить]    [к модератору]  
  • –1 +/
    Вот-вот: они настолько другие, что некоторые настоящие актёры больше похожи друг на друга, чем эти "восстановленные" изображения.
     
  • 1.12, Аноним (-), 14:12, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    Интересно, каким образом определяется, что изображение нужно воссоздавать именно как "комнату", а не как "лицо"? Из некоего контекста? Из какого?
     
     
  • 2.81, Zarat (ok), 03:09, 09/02/2017 [^] [ответить]    [к модератору]  
  • –1 +/
    Наверное, или ручками задается, или, что более вероятно, Гугл же статистику собирает. Вот на основании ее и можно уточнить, а также из контекста страницы в интернете
     
  • 2.88, Ал (??), 06:00, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Человек явным способом это задает
     
  • 1.14, fi (ok), 14:42, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    да, скрывать лица на порно сайтах станет сложней :))))
     
     
  • 2.71, Хаосит (?), 22:48, 08/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Пять букв: пакет.
     
  • 1.15, Аноним (-), 14:45, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +7 +/
    Не, теперь история бесконечного увеличения с камер видеонаблюдения в американских фильмах становится реальностью.
     
     
  • 2.82, Zarat (ok), 03:10, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Ждал этот коммент
     
  • 2.89, EuPhobos (ok), 07:16, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    Однако детали, которые так важны в этих фильмах, эта система берёт с других фото и подрисовывает сюда. Нет тут никакого «восстановления».
     
  • 1.17, vitalif (ok), 14:57, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    С такой точностью и с таким объёмом базы, как у гугла, можно просто похожее изображение подобрать и за оригинал выдать)))
     
     
  • 2.90, EuPhobos (ok), 07:17, 09/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Об этом и написано, оно просто берёт схожие фото, только более сложным алгоритмо... весь текст скрыт [показать]
     
  • 1.18, vitalif (ok), 14:58, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +1 +/
    Ещё они конечно молодцы, но это хорошо когда известно под каким углом лицо. А чуть поверни и будет вообще ни о чём результат, я предполагаю
     
  • 1.19, Аноним (-), 15:09, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +3 +/
    Кристобаль де Кубик?
     
  • 1.20, SpaceRaven (ok), 15:14, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • –1 +/
    ну не знаю, честно говоря лица из одной линей не очень то и похожи между собой если так можно выразиться тут :)
     
     
  • 2.63, Анонимс (?), 20:48, 08/02/2017 [^] [ответить]    [к модератору]  
  • +/
    кое-что очень даже хорошо получилось - "нос прямой, губы тонкие, подбородок круглый.."
     
     
  • 3.91, EuPhobos (ok), 07:19, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    > кое-что очень даже хорошо получилось - "нос прямой, губы тонкие, подбородок круглый.."

    Предлагаю подсунуть туда классического пришельца из фильмов, подозреваю в итоге человек получиться )

     
  • 1.21, Аноним (-), 15:20, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    Ждём Super Mario HD и Minecraft HD.
     
     
  • 2.25, A.Stahl (ok), 15:36, 08/02/2017 [^] [ответить]    [к модератору]  
  • +4 +/
    >Ждём Super Mario HD

    И окажется, что Марио -- она:)

     
     
  • 3.49, annual slayer (?), 19:22, 08/02/2017 [^] [ответить]    [к модератору]  
  • +/
    ну, тут уже на что сеть натаскать...
     
     
  • 4.110, die_russofobs (?), 21:07, 02/04/2017 [^] [ответить]    [к модератору]  
  • +/
    > ну, тут уже на что сеть натаскать...

    Лаконичней и правильней: что нужно будет - то и нарисует.

     
  • 1.33, Moomintroll (ok), 16:44, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +3 +/
    А теперь пусть покажут то же самое, но с любимыми объектами из фильмов — номерами машин!
     
     
  • 2.47, www2 (ok), 19:12, 08/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Вот, кстати, номера гораздо реальнее восстановить таким образом У каждой цифры ... весь текст скрыт [показать]
     
  • 1.34, nonamed anon (?), 16:52, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    Давай все по новой, гугл, все фигня. На чем сеть научишь, то она и будет фантазировать.
     
  • 1.36, Анонимум (?), 17:32, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    Ещё лет 10 назад думал о таком применении нейронных сетей (а теоретики кибернетики, само собой, ещё в 60-х, скорее всего) и уже тогда понял, что это будет враньё, а не восстановление. Ничего продвинутее метода super-resolution на основе совмещения субпиксельной информации из нескольких кадров не придумано, да и тот даёт смехотворно мало прироста в детализации. И доля вранья там тоже присутствует, но хоть не такая... Хотя, по идее, если их совместить, добавить алгоритм анализа правдоподобности, и через то ограничить процент "вранья"...
     
     
  • 2.48, www2 (ok), 19:13, 08/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Если бы губы Никанора Ивановича да приставить к носу Ивана Кузьмича, да взять ск... весь текст скрыт [показать]
     
  • 2.79, Мяут (ok), 00:47, 09/02/2017 [^] [ответить]     [к модератору]  
  • +1 +/
    Ничего продвинутей метода, используемого в нашей голове, которая, понятное дело,... весь текст скрыт [показать]
     
  • 1.37, Аноним (-), 17:40, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    Одно дело утеряно в результате масштабирования, другое это обработка фото с низким разрешением. В первом случае можно найти из чего масштабировали, во втором только фантазии.
     
     
  • 2.40, Аноним (-), 17:51, 08/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Название проекта Google brain, они хотят доказать что разработали искусственный ... весь текст скрыт [показать]
     
     
  • 3.108, Ю.Т. (?), 12:43, 11/02/2017 [^] [ответить]     [к модератору]  
  • –1 +/
    Они не могут хотеть это доказывать Разве только опровергли работу Флореса и Вин... весь текст скрыт [показать]
     
  • 1.64, Baz (?), 20:55, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +2 +/
    сразу вспомнил ту гифку где нашли лицо преступника по отражению на диске автомобиля через камеру уличного банкомата...
     
     
  • 2.66, anonymous (??), 21:54, 08/02/2017 [^] [ответить]    [к модератору]  
  • +4 +/
    http://cs5.pikabu.ru/images/big_size_comm/2014-10_4/14135566876324.jpg
     
     
  • 3.92, fyjy (?), 08:30, 09/02/2017 [^] [ответить]     [к модератору]  
  • +/
    Ох, это точно но счистема реально работает на угадывание и в итоге был человек ... весь текст скрыт [показать]
     
  • 1.75, Линукс еще не готов (?), 23:58, 08/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +4 +/
    А не пробовали восстановить лицо из фото ванной комнаты?
     
     
  • 2.93, Аноним (-), 08:34, 09/02/2017 [^] [ответить]    [к модератору]  
  • +/
    > А не пробовали восстановить лицо из фото ванной комнаты?

    Собственно, на первом скриншоте как раз восстанавливается лицо из отражения в зеркале.

     
  • 1.102, Аноним (-), 18:48, 09/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • +/
    пиратки камрипа можно пилить в HD?
     
     
  • 2.112, die_russofobs (?), 23:14, 02/04/2017 [^] [ответить]     [к модератору]  
  • +/
    Для этого технологии такого уровня - даже не нужны ну разве что для уже запис... весь текст скрыт [показать]
     
  • 1.106, Аноним (-), 09:23, 11/02/2017 [ответить] [показать ветку] [···]    [к модератору]  
  • –1 +/
    Отлично! Скоро можно будет восстановить утраченный код динозавров у птиц и воссоздать миллионы утраченных видов живых существ.
     
     
  • 2.111, die_russofobs (?), 22:44, 02/04/2017 [^] [ответить]     [к модератору]  
  • +/
    Никаких миллионов утерянных видов животных не было, всё что сейчас - то было и р... весь текст скрыт [показать]
     

     Добавить комментарий
    Имя:
    E-Mail:
    Заголовок:
    Текст:


      Закладки на сайте
      Проследить за страницей
    Created 1996-2018 by Maxim Chirkov  
    ДобавитьПоддержатьВебмастеруГИД  
    Hosting by Ihor