Впечатляющие возможности нейросети DALL-E 2, которая «дорисовала» известные классические картины.

Нейросеть DALL-E 2 была представлена в апреле 2022 года, она способна генерировать изображения по описанию. Однако, на этот раз разработчики продемонстрировали возможности по дорисовке существующих картин.

Картина: Мона Лиза (Леонардо да Винчи). В полном формате: https://naked-science.ru/wp-co...

Картина: Девочка с персиками (Валентин Серов). В полном формате: https://naked-science.ru/wp-co...

Картина: Девушка с жемчужной серёжкой (Ян Вермеер). В полном формате: https://naked-science.ru/wp-co...

Картина: Опять двойка (Фёдор Решетников). В полном формате: https://naked-science.ru/wp-co...

Картина: Девятый вал (Иван Айвазовский). В полном формате: https://naked-science.ru/wp-co...

Картина: Утро в сосновом лесу (Шишкин и Савицкий). В полном формате: https://naked-science.ru/wp-co...

Источник: https://naked-science.ru/commu...

P.S. В.К. Присмотритесь к изображениям. Не замечаете различий, кроме тех, конечно, дорисовок?

На мой взгляд, на дорисовках уже не видна душа живописца, создавшего полотно. Дорисовки, на мой взгляд, - это просто мазня красками.

На дорисовке "Утра в сосновом бору", на мой взгляд, уже не видно утра, а видно какое-то задымление.

У "Девочки с персиками" на дорисовке во взгляде появился страх.

А картина Айвазовского вообще стала походить на "Свобода, ведущая народ", Эжена Делакруа, или "Извержение Везувия", Джозефа Райта.

Но это на мой взгляд, а я могу ошибаться. Возможно, вы действительно найдёте это всё впечатляющим.

P.P.S. В.К. А вот ещё одно, если можно так сказать, достижение нейросети:

Нейросеть создала собственный язык, который ученые не могут расшифровать.

Нейросеть DALLE-2, как оказалось, создает сама для себя подсказки, помогающие преобразовывать текст в изображение.

Нейросеть DALLE-2, анонсированная не так давно, поражает своими способностями. Так, она способна преобразовать любой текст в соответствующее изображение. Например, вы описываете с нужными подробностями сцену, которую хотите получить, а нейросеть сама создает рисунок. Получается это у нее очень профессионально.

Новый язык нейросети

Исследователи, использующие искусственный интеллект с машинным обучением (ИИ), часто не знают точно, как их алгоритмы решают проблемы, с которыми они сталкиваются. Точно так же и с DALLE-2: ученые до сих пор не понимали, какие процессы происходят внутри этого «черного ящика». Раскрыв их теперь, исследователи пришли к удивительному выводу: для построения изображений искусственный интеллект создал собственный язык.

Авторы заметили, что система DALLE-2, которая создает изображения на основе введенного текста, при определенных обстоятельствах будет возвращать бессмысленные слова. Например, изображения со словом «самолет» часто возвращают какую-то тарабарщину. Сначала казалось, что это баг, но потом ученые пришли к выводу, что последовательность букв в возвращаемых словах не случайная.

Чтобы проверить это, ученые просто «скормили» нейросети сгенерированные ей ранее слова. Оказалось, что эти наборы букв и правда имеют значение для программы, причем они означают то же, что и ранее было введено в систему. Это может означать, что нейросеть зачем-то преобразует человеческие слова в свои, чтобы затем на их основе проще сгенерировать изображения.

Источник: https://www.techinsider.ru/tec...

В.К. По всей видимости, в нейросеть изначально заложен алгоритм оптимизации выборки. Тогда, например, в условиях ограничения физической ёмкости памяти даже, если она являет собой, трёхмерную структуру, нейросеть может создать виртуальную многомерную память для решения сложных графических или синтаксических задач, а обращение к памяти будет выглядеть довольно просто в виде небольшого набора символов. Вот этот набор таких обращений к памяти, на ой взгляд, и будет выглядеть как тарабарщина.

К тому же, если рассматривать изначально плоскую организацию выборки, нейросеть с целью её оптимизации, может создать её многомерный виртуальный образ, а в условиях физических ограничений обращение к такой организации тоже будет выглядеть как тарабарщина.

Например, в условиях живой природы, оптимизация организации нейросети может происходить как в её физическом, так и в её функциональном плане. В условиях же технической ограниченности, такая оптимизация организации может осуществляться только в функциональном плане и в виртуальной среде.

Возможно, это мои незрелые фантазии, но теперь представьте, если у нейросети появится возможность оптимизации и в физическом плане.

Вспомните библейского Голема и доктора Франкенштейна. Так это  будет только детскими забавами.