Разблокировка третьего измерения: Полное руководство по картам глубины в искусстве, созданном ИИ

Карты глубины — это одноканальные изображения, представляющие расстояние пикселей в сцене от зрителя. Они играют ключевую роль в создании 3D-эффектов из 2D-изображений. Обычно карты глубины используют оттенки серого и белого, где белый цвет обозначает области, ближе к камере, а темные оттенки указывают на более дальние расстояния. Эти карты предоставляют ценную информацию о глубине сцены, позволяя преобразовывать плоские 2D-изображения в более динамичные трехмерные представления.

Карты глубины предлагают захватывающие возможности для улучшения искусства, созданного ИИ. Их можно использовать для создания анимаций, которые создают иллюзию глубины для 2D-изображений, генерировать базовые 3D-модели для импорта в такие программы, как Blender, производить стереоскопические изображения для VR-гарнитур и создавать анаглифные изображения для просмотра с 3D-очками. Используя информацию о глубине, художники могут оживить свои творения, созданные ИИ, добавляя новое измерение в свою работу.

Чтобы работать с картами глубины в изображениях, созданных ИИ, вам понадобятся определенные инструменты и расширения. Основное требование — это актуальная установка Automatic1111 WebUI для Stable Diffusion. Кроме того, вам нужно установить расширение stable-diffusion-webui-depthmap-script, которое можно найти во вкладке расширений Automatic1111 или установить с GitHub. Для тех, кто не использует Automatic1111, доступен отдельный интерфейс Gradio, который можно получить, клонировав репозиторий и запустив скрипт main.py.

Расширение глубины в Automatic1111 предлагает два основных способа работы с картами глубины. Пользователи могут вычислять карты глубины из существующих изображений во вкладке Depth или генерировать их одновременно с созданием изображения, используя выпадающее меню Scripts. Вкладка Depth предоставляет множество опций для настройки процесса генерации карт глубины, включая выбор модели, соответствие размера, усиление и различные форматы вывода.

Для генерации карт глубины пользователи могут выбирать из различных моделей, каждая из которых имеет свои сильные и слабые стороны. Модель по умолчанию, res101, основана на AdelaiDepth/LeReS, в то время как другие используют реализации MiDaS и ZoeDepth. Опции, такие как Boost, могут значительно улучшить результаты, но могут увеличить время вычислений. Пользователи также могут настраивать вывод, инвертируя карту глубины, регулируя пороги ближнего и дальнего клипа и комбинируя карту глубины с оригинальным изображением.

После генерации карты глубины можно использовать различными способами. Их можно применять для создания 3D-анимаций, генерации стереоскопических изображений для VR-гарнитур, производства анаглифных изображений для 3D-очков и даже для создания простых 3D-сеток. Расширение Depth также предлагает опции для удаления фона и генерации нормальных карт, что еще больше расширяет творческие возможности для художников ИИ.

Для более продвинутых приложений пользователи могут генерировать 3D-замещенные сетки, которые можно использовать для создания видео с пользовательскими движениями камеры. Вкладка Generate Video позволяет создавать анимации с настраиваемыми параметрами, такими как количество кадров, частота кадров и траектория камеры. Кроме того, сгенерированные файлы .obj и .ply можно импортировать в 3D-моделирующее программное обеспечение, такое как Blender, для дальнейшей обработки и улучшения.

3D-эффекты, созданные с использованием карт глубины, можно просматривать различными способами. Стереоскопические изображения можно просматривать на VR-устройствах, таких как Oculus Quest, или через приложения, такие как Google Cardboard. Анаглифные изображения можно просматривать с помощью недорогих красно-циановых 3D-очков, что предлагает доступный способ испытать эффекты глубины. Онлайн-инструменты, такие как Depth Player и Depthy, предоставляют интерактивные платформы для визуализации и экспериментов с картами глубины, позволяя художникам тонко настраивать свои творения и делиться ими с более широкой аудиторией.