Компания Adobe выпустила бета-версию своей генеративной нейросети, создающей изображения на основе текста, и внедрила её в программу вёрстки InDesign. Это отличный повод поговорить о возможностях применения современных AI-инструментов, об их качестве и том, чего я как пользователь InDesign действительно жду от компании.
Что нового?
В InDesign версии 19.4 появилась возможность генерировать изображения на основе фрагмента текста. Воспользоваться этим непосредственно в InDesign смогут пока что не все пользователи, но протестировать функционал можно и в отдельном веб-приложении Adobe под названием Firefly, доступном по той же подписке, что и основной пакет программ.
Нейронок, генерирующих изображения на основе промптов, уже сотни, но здесь интересно, что AI-инструмент встраивается в программу вёрстки, становится частью экосистемы Adobe и не требует дополнительных действий и затрат (но некоторые ограничения всё-таки есть, о них речь пойдёт ниже).
В этой статье я приведу примеры, как Firefly проиллюстрировала рассказ Артура Конан Дойля «Воронка из кожи» в переводе Елены Ильиной-Пожарской.
Мой друг, Лионель Дакр, жил в Париже. Он занимал на Авеню Ваграм тот красивый дом, с лужайкой и решеткой перед ним, который бросался в глаза налево от Триумфальной арки, когда от нее спускались вниз. Вероятно, этот дом стоял здесь раньше, чем было проложено авеню, потому что его серые черепицы были покрыты мхом, а стены были испещрены ржавыми пятнами. С виду дом со своими пятью окнами по фасаду казался очень большим.
Возможности Firefly
Firefly Image 3 — самая свежая версия генеративной нейросети Adobe, выпущенная в апреле 2024 года. Интерфейс максимально упрощён и понятен. Пользователь может выбрать иллюстрацию в виде «фотографии» или арта, а также доверить выбор Firefly.
Настроек техник, тем, художественных направлений весьма много, и экспериментировать с ними можно долго — сначала разобраться, как нейросеть стилизует создаваемые изображения по каждому из шаблонов, а потом заняться их смешиванием. Самый верный способ подсказать Firefly, какой вы ожидаете результат, — загрузить свою картинку с референсом. Firefly предупреждает, что можно загружать только картинки, на использование которых у вас есть права, но, кажется, никак это не проверяет.
Эту нейросеть можно тренировать, ставя положительные или отрицательные оценки получившимся картинкам. А если один из вариантов вам понравился, но он немного не дотягивает до идеала, на его основе можно сгенерировать ещё несколько вариантов. Кстати, о вариантах — Firefly выдаёт 4 варианта картинки по каждому запросу в заданном размере.
Когда разберётесь со всеми шаблонными концептами, материалами, эффектами, можете ещё поиграть с цветами, освещением и даже углом камеры.
Неприятная новость — все эти эксперименты не могут длиться бесконечно. Сейчас Firefly даёт возможность отправить 1000 запросов в месяц. Для экспериментов и баловства этого более чем достаточно, но вот для серьёзной работы и большого объёма вариантов — может и не хватить.
Мне снилось, что я нахожусь в какой-то низкой комнате со сводами. Архитектура постройки была грубая, но не лишенная величия. Эта зала очевидно была частью громадного здания.
Как хорошо нейросеть Adobe понимает текст?
Этим уже никого не удивишь, но понимает! И даже запросы на русском языке её не смущают. При этом ей не по душе слишком короткие промпты из пары слов, а из слишком длинных промптов на 3–4 предложения она проигнорирует то, что посчитает малозначимым. Оптимальный запрос, насколько я смог выяснить опытным путём, — одно-два предложения.
Firefly честно пытается нарисовать то, что написано в запросе. Чем более абстрактный фрагмент текста вы ей предложите, тем более абстрактное нечто она изобразит. Базовый сценарий использования Firefly в InDesign — выделение фрагмента текста прямо в вёрстке и генерация картинки по этому запросу из контекстного меню. Но будьте готовы к тому, что, разочаровавшись первыми результатами, вы захотите добавить в промпт уточняющие слова, раскрывающие контекст.
Если запрос содержит что-то конкретное, например, описание интерьера или внешности персонажа, то результат будет неплох по формальным критериям. Но в конкретном фрагменте художественного текста может не быть детального описания мизансцены. В таком случае придётся отредактировать авторский текст.
Он при этих словах уселся с одной стороны камина, а я сел с другой. На столе, в средине комнаты, стояла лампа с очень сильным светом и под ней обрисовывался яркий, золотистый круг. На средине стола лежал полузавернутый свиток пергамента. Кругом были разбросаны всевозможные вещи.
Firefly заменит книжного иллюстратора?
Посредственного — может, и заменит. Видится, что в ближайшем будущем критерием выбора художника станет не только портфолио, но и то, может ли художник привнести в книгу что-то недоступное нейросети.
Но пока что мне трудно представить серьёзное издательство, которое будет иллюстрировать свои книги с помощью AI-художника. Кроме того что нужно потратить немало времени на подготовку промптов, нужно и постараться выдержать стилистику иллюстраций по всей книге, а нейросеть каждый раз выдаёт что-то новенькое даже при одинаковых настройках.
Удивительно, но разработчики этой фичи совсем не смотрели в сторону вспомогательных художественных элементов, которые есть почти в каждой книге — буквиц, концовок, заставок и других, в хорошем смысле, украшательств. Нейросеть настроена на отрисовку чего-то невиданного, а вот снять с дизайнера-верстальщика рутинную работу по перерыванию фотобанков она пока не может. Те же орнаменты с Shutterstock могут быть заново отрисованы нейросетью с учётом жанра и контекста каждой конкретной книжки, и наше представление о прекрасном особо от этого не пострадает.
Я охватил дрожащими руками голову с бьющимися жилами в висках и огляделся кругом в громадной комнате, в окна которой пробивался бледный лунный свет. И вдруг я почувствовал, что сердце у меня перестает биться. Я хотел крикнуть и не мог, горло точно что-то сдавило, через темную комнату ко мне двигалась какая-то тень. Я был не способен ни двинуться, ни заговорить и ждал, замирая от страха, приближения этой тени.
3 идеи для InDesign
Генерация картинок нейросетью — это, конечно, прекрасно, но сомневаюсь, что новой возможностью воспользуется хотя бы каждый десятый верстальщик, создающий макеты печатных или электронных книг в InDesign. А вот 3 фичи с использованием AI, которые действительно пригодились бы многим.
Генерация предложений по дизайну макетов на основе анализа текста. Идея очень простая: оценить миллионы макетов книг всех эпох по формальным признакам — это несложная задачка для AI. И только нейросети будет под силу на основе анализа текста произведения выдавать предложения по шрифтам, стилю вёрстки, элементам оформления и т.д. для конкретной книги. Если AI сможет предложить десятки шаблонов, подходящих для конкретной книги, — полдела уже будет сделано.
Адаптация печатного макета для электронной версии книги. Нравится вам это или нет, но экспорт в EPUB из InDesign одной кнопкой не работает. Кроме набора технических проблем, в деле адаптации макетов под EPUB есть и творческий элемент: плавающая вёрстка и маленькие экраны требуют совсем других подходов. И если у Adobe уже есть такой творческий AI, почему бы не поручить ему и адаптацию электронных версий книг .
(Верстальщикам это не понравится, но...) пора уже добавить функцию автоматической вёрстки макетов. Не знаю даже, это задачка для AI или для обычных алгоритмов InDesign, но тратить драгоценные рабочие часы на техническую отладку исходников, размещение текста, таблиц, иллюстраций и прочего на полосах — это какой-то XX век. Нужно смотреть в будущее!
Commentaires