Идея проекта
Ботанические таблицы XIX века учили людей смотреть. Вот растение целиком, вот его разрез, вот семя крупным планом, и каждая деталь подписана. Мы окружены вещами, которые так никогда не рассматривали.
«Гербарий вещей» переносит этот взгляд на предметы повседневности. Смартфон, наушники, кроссовок, бумажный стаканчик, связка ключей и зонт описаны так, будто натуралист нашёл их в поле. Зонт похож на гриб, провод наушников на корневую систему, ключи на гроздь высохших семян.
Задача проекта: обучить Stable Diffusion XL стилю таблиц и проверить, насколько этот стиль переносится на предметы, которых в обучающих данных нет.
Результирующая серия изображений
(1) Датасет: 19 ботанических таблиц из открытых музейных коллекций.
(2) Обучение: нейросеть учится стилю таблиц через небольшой адаптер LoRA.
(3) Серия: нейросеть рисует шесть бытовых предметов в этом стиле.
Пояснение: LoRA — небольшая «насадка» на большую модель: она не переписывает нейросеть, а добавляет к ней новый стиль.
Исходные изображения
Датасет состоит из 19 таблиц Пьера-Жозефа и Анри-Жозефа Редуте (1802–1827): цветная пунктирная гравюра с ручной раскраской. 18 работ из Cleveland Museum of Art (Open Access, лицензия CC0), 1 из The Metropolitan Museum of Art (Open Access, Public Domain). Список авторов, ссылок и лицензий приложен.
Оговорка: все работы одной мастерской, поэтому модель учится именно стилю Редуте, а не ботанической иллюстрации вообще.
Процесс обучения
Использован метод DreamBooth с адаптером LoRA на модели Stable Diffusion XL 1.0, обучался только адаптер. Работа выполнена в Google Colab на видеокарте T4 на основе учебного примера преподавателя и скрипта diffusers 0.35.1. Параметры: 500 шагов, rank 16, learning rate 1e-4, разрешение 512×512, seed 2026. К каждой картинке автоматически подобрана подпись (модель BLIP) и добавлена фраза «a botanical herbarium plate in the style of HERBVEX». Слово HERBVEX выдумано: у модели нет для него готового значения, поэтому оно становится «кнопкой» нового стиля.
Трудность: первая попытка обучения остановилась из-за несовместимости версий библиотек. Проблема устранена удалением лишней библиотеки torchao.
Детали генерации
Для каждой тройки использовались одинаковые промпт и seed, поэтому различия вызваны только адаптером. Остальное напиши по картинкам: чем колонки отличаются палитрой, линией, бумагой, композицией.
Серия создана Stable Diffusion XL с адаптером LoRA: 1024×1024, 30 шагов, guidance 6.5, seed 7001–7006. Полные промпты хранятся в generation_log.json. ControlNet, ретушь и апскейл не применялись
Атрибуция
Исходные изображения предоставлены Cleveland Museum of Art (CC0) и The Metropolitan Museum of Art (Open Access). Авторы таблиц: Пьер-Жозеф Редуте (1759–1840), Анри-Жозеф Редуте (1766–1853).
Описание применения генеративной модели
Stable Diffusion XL 1.0 (https://huggingface.co/stabilityai/stable-diffusion-xl-base-1.0), в ней обучен адаптер LoRA. Дополнительно: BLIP для подписей, SDXL-VAE fp16 fix, скрипт diffusers 0.35.1. Помимо обученной модели использован Claude Sonnet 5.5 (Anthropic, https://www.anthropic.com/claude): помощь с разработкой идеи, подбором источников датасета, фрагменты кода. Так же использовалась модель Deepseek, для написания промта, а Krea, для создания изображения на обложку.
A vintage 18th-century botanical scientific illustration book cover. A surrealist composition featuring a pair of worn beige canvas sneakers acting as plant pots. From inside the shoes, lush green botanical stems, leaves, and delicate white bell-shaped flowers are growing upwards. The central illustration is surrounded by detailed scientific watercolor studies of large brown plant bulbs, exposed intricate root systems, and dark seed pods arranged like a museum chart. Rendered in delicate watercolor washes and fine black ink linework. The background is aged, slightly stained cream parchment paper with faded, elegant handwritten cursive text and Latin botanical annotations. Muted earthy tones, greens, and browns. Masterpiece, highly detailed, natural history manuscript aesthetic, flat lay view. --ar 1140:1600
