Как создать качественный русскоязычный датасет на примере проекта «Нужное вокруг»

Тонкая настройка (Supervised Fine-Tuning, SFT) больших языковых моделей (LLM) позволяет адаптировать их под специфические задачи, уникальный стиль письма или узкую предметную область. Однако аксиома машинного обучения гласит: качество модели напрямую зависит от качества данных, на которых она обучается. Создать хороший датасет — это искусство.

Знакомьтесь: dataset_junk_store

В своем репозитории dataset_junk_store я публикую специализированный русскоязычный SFT-датасет в формате JSONL (со структурой сообщений OpenAI). Этот датасет создан для обучения моделей сюрреалистичному ролеплею и креативному письму в уникальном сеттинге: метафизическая лавка «Нужное вокруг» и её загадочный хранитель — Дон Пригодин.

О чём статья: что такое SFT-датасет на практике, как я собрал русскоязычный датасет из 1173 диалогов для файнтюна, кто такой Дони Пригодин и лавка «Нужное вокруг», какой формат нужен для обучения и какие ошибки я совершил. С примерами и кодом.

GitHub: https://github.com/pro2rus/dataset_junk_store

Зачем вообще тюнить модель самому?

Стоковые ChatGPT, Claude, Qwen, Llama — отличные generalist-ы. Они вежливые, усреднённые, правильные.

Но как только вам нужен:

• персонаж со своим голосом для фильма, игры или книги,
• стилист — сюрреалист, философ, сказатель, а не «AI-ассистент»,
• русскоязычный ролеплей без постоянного сползания в английский шаблон,

— промпта уже не хватает. Промпт забывается, стиль плывёт через 10 реплик, персонаж превращается в «услужливого помощника».

Решение — дообучение (fine-tuning). А источник для него — датасет.

Я как AI-филммейкер и сценарист столкнулся с этим в лоб: мне нужен был живой второстепенный герой, который держит стиль 50+ реплик. Так родилась лавка «Нужное вокруг» и одноимённый датасет.

Многие пользователи Obsidian сталкиваются с дилеммой: как синхронизировать заметки между компьютерами, не прибегая к платным облачным сервисам или сторонним приложениям, которые могут ставить под угрозу конфиденциальность данных? Для тех, кто ценит приватность, независимость от интернета и простоту, идеальным решением становится обычная USB-флешка.

Я веду все проекты, сценарии, раскадровки и заметки в Obsidian. База знаний — это тысячи markdown-файлов, картинки, PDF, ссылки.

Проблема классическая:

• дома — стационарный ПК,
• в поездке или на втором компьютере — другой ПК,
• облако (Google Drive, Dropbox, Obsidian Sync) — либо платно, либо нельзя по политике безопасности, либо просто не хочется отдавать свои тексты наружу.

Флешка — самый простой «транспорт». Но просто копировать папку туда-сюда — это постоянные проблемы:

1. Затираешь новые файлы старыми.
2. Забываешь, что удалил, и удалённое «воскресает» при копировании.
3. Не помнишь, в какую сторону последний раз копировал.

Мне нужен был простой синхронизатор: воткнул флешку — нажал одну кнопку туда, одну обратно. Без git, без консоли, без лишней магии. Так появилось приложение Sync Tool.

Как работает Sync Tool

Это маленькая программа на Python для Windows. Никаких зависимостей — только стандартный Python 3.x.

Логика простая, всего два каталога:

• Base catalog — основная папка. Например D:\ObsidianVault на вашем ПК.
• Temp catalog — папка обмена. Это папка на флешке, например E:\vault_sync.

И две кнопки:

Вашему вниманию представляю сценарий для AI-анимации, созданный по мотивам рассказа Михаила Ворха «Сказка о двух ключах».

Эта история — не просто притча о выборе между материальным и духовным. Это размышление о преемственности поколений, о силе знаний и о том, что истинное наследие невозможно обрести, просто открыв сундук с золотом.

Перед вами визуальный план превращения заброшенного, застывшего во времени поместья в живое, процветающее место, где история встречается с будущим.

НАТ. ЛУГ, ДОРОГА В УСАДЬБУ — УТРО

Ясное утро. Туман медленно тает над лугом.

По дороге едет старая бричка, поднимая пыль из-под колес.

В бричке сидит АРСЕНИЙ (25). На нем дорожный костюм 19-го века, слегка припорошенный дорожной пылью. Он смотрит вдаль с лёгким волнением.

НАТ. ВОРОТА УСАДЬБЫ — УТРО

Бричка останавливается перед полуразрушенными воротами. Арсений замирает.

Перед ним — картина запустения. Среди густой травы и дикого кустарника виднеется единственный уцелевший флигель. Вдалеке, в глубине заросшего сада, мрачно высится старый барский дом с пустыми глазницами окон.

НАТ. ВХОД ФЛИГЕЛЯ — УТРО

Арсений спешивается у флигеля. Он оглядывает владения. Его взгляд устремляется к высокому холму, поросшему реликтовым лесом. Склоны холма прорезаны серебристыми нитями родников, стекающих к скрытому в чаще пруду.

Арсений толкает дверь флигеля. Та отзывается тяжелым, жалобным скрипом.

Создание клипа «Аватар» с помощью ИИ

Как превратить рисунок на салфетке в эпический видеоряд и заложить основу для целой вселенной? Я расскажу, как использовал связку AI-инструментов — Qwen2512, Flux2 и Wan2.2 — чтобы оживить сюрреалистический мир, где сталкиваются лёд и пламя.

От идеи к кадру: рождение визуального конфликта

Всё началось с образа. Нам нужно было создать клип, который бы визуально передавал напряжение, динамику и масштаб. Вдохновением послужил концепт-арт с «разрезом» мира: верх — извергающийся вулкан в клубах пепла, низ — океанская пучина с лучами света, пробивающимися сквозь толщу воды.

Главный вызов: как перенести эту сложную, многослойную композицию с листа бумаги в динамичный видеоряд? Ответ нашли в комплексном пайплайне генеративного ИИ.

Этап 1: Генерация ключевых кадров (Qwen2512 + Flux2)

Для создания статичных сцен мы использовали связку мультимодальной модели Qwen2512 и генеративной сети Flux2. Наш подход заключался не в простом написании промпта, а в создании «режиссёрского сценария» для нейросети.

Мы загрузили в Qwen2512 текстовое описание желаемой сцены — тот самый детальный разбор изображения с разделением на слои, где описаны цветовые контрасты, драматическое освещение и текстуры. Модель помогла структурировать этот запрос в формат, оптимальный для понимания Flux2.

Результат первого этапа — серия гиперреалистичных ключевых кадров (keyframes):

• Кадр 1 (Вулкан): Тяжелые клубы дыма, раскаленная лава, внутреннее свечение.
• Кадр 2 (Океан): Турбулентность воды, лучи света («лучи бога»), коралловые рифы с неоновыми оттенками.
• Кадр 3 (Геология): Трещины в застывшей породе, где магма встречается с водой.

Flux2 позволил добиться той самой «триумфальной детализации», где каждый элемент (пена, искры, текстура камня) проработан с фотографической точностью, а цветовой диполярный контраст (сапфировый синий против магматического оранжевого) создал необходимое визуальное напряжение.

Этап 2: Оживление сцен (Wan2.2)

Следующий шаг — анимация. Здесь нам пригодилась модель видеогенерации Wan2.2. Её ключевая особенность — способность сохранять временную согласованность (temporal coherence) при работе со сложными сценами.

Мы использовали технику, схожую с созданием раскадровки для музыкального клипа. Каждый сгенерированный кадр от Flux2 подавался в Wan2.2 как опорный (reference) вместе с промптом, описывающим движение:

Представьте: вы стоите у выхода шахты и из глубины темноты перед Вами открывается. Перед вами — забытый богом уголок, застывший в вечном ожидании. Солнце высвечивает детали: ржавую вагонетку, грубую каменную кладку, истерзанные временем деревянные конструкции. Этот кадр — не фото, а синематик, созданный в Unreal Engine 5. И сегодня мы разберем, какие технологии стоят за этим визуальным рядом и почему такие сцены становятся новой вехой в цифровом искусстве.

Unreal Engine 5 — это не просто игровой движок. Сегодня это полноценная киноплатформа, на которой снимают сериалы уровня «Мандалорца» и создают фотореалистичные короткометражки. Одно из самых впечатляющих направлений — создание синематиков. Разберемся, что это такое, на примере атмосферного проекта «Заброшенная шахта».

Что такое синематик в UE5?

Синематик (cinematic) — это короткий видеоролик, созданный внутри игрового движка в реальном времени. В отличие от игрового процесса, здесь всё подчинено режиссуре: камера движется плавно, свет расставлен по законам кинематографа, а сцена рассказывает историю без участия игрока.

В Unreal Engine 5 за синематики отвечает инструмент Sequencer — нелинейный видеомонтажер, встроенный прямо в движок. Он позволяет:

• управлять виртуальными камерами,
• анимировать свет и объекты,
• оживлять персонажей,
• настраивать спецэффекты и постобработку.

По сути, Sequencer — это как Adobe Premiere, только внутри 3D-мира, где вместо готовых видеофайлов вы работаете с живыми сценами.

Заброшенная шахта: пример синематика

Посмотрите на этот кадр с заброшенной шахтой. Он не просто показывает графику — он рассказывает историю. Запустение, тишина, остывшая человеческая деятельность — все это передано через композицию, свет и детали. Такой подход к созданию виртуальных миров — это не просто хобби энтузиастов, а полноценный тренд в индустрии.

Художники все чаще используют Unreal Engine 5 не для игр, а для создания кинематографичных сред. Это и демонстрация портфолио для будущих работодателей, и полноценные короткометражные фильмы, и даже виртуальный продакшен для киноиндустрии

Как это сделано:

Создатель использовал стандартный набор инструментов UE5:

• Nanite — для сверхдетализированных скал и текстур (геометрия обрабатывается без потери производительности).
• Lumen — для динамического освещения: свет от фонарика или пробивающийся сверху луч ведет зрителя по коридорам.
• Quixel Megascans — библиотека фотореалистичных материалов (камни, земля, ржавчина), которая делает шахту почти осязаемой.

Визуализация загородного коттеджа — это не просто «нарисовать красивую картинку». Это возможность увидеть будущий дом таким, каким он будет в реальности: понаблюдать за игрой света на фасаде, оценить, как тени от деревьев падают на террасу, и почувствовать атмосферу пространства до того, как будет залит первый фундамент. Современные инструменты делают этот процесс невероятно быстрым и наглядным. И сегодня мы поговорим об одном из лучших решений для архитектурной визуализации — программе Twinmotion.

Что такое Twinmotion?

Twinmotion — это профессиональная программа для создания реалистичной 3D-визуализации в реальном времени, разработанная компанией Epic Games (создателями Unreal Engine). Если говорить проще — это мощный движок, который превращает ваши чертежи и 3D-модели в «живые» фотореалистичные изображения, видео и даже виртуальные туры.

Ключевая особенность Twinmotion — это скорость и простота. В отличие от сложных профессиональных пакетов, здесь не нужно тратить часы на настройку рендера. Всё происходит мгновенно: вы меняете угол камеры, добавляете траву или меняете время суток — и картинка обновляется прямо у вас на глазах.

Для чего нужна программа и что в ней можно делать?

Возможности Twinmotion впечатляют и охватывают практически все задачи, которые могут возникнуть при проектировании и презентации загородного дома.

1. Мгновенная фотореалистичная визуализация

Это главная «суперсила» программы. На основе вашей модели из ArchiCAD, Revit, SketchUp или других САПР вы можете буквально за несколько минут получить изображения, неотличимые от фотографий. Программа использует технологию Lumen — систему динамического глобального освещения, которая в реальном времени просчитывает, как свет отражается от поверхностей и наполняет пространство. Вам не нужно настраивать сложные параметры — просто выберите время дня, и дом «оживет».

2. Работа с окружением и ландшафтом

Загородный дом — это всегда про природу. В Twinmotion вы можете:

• Менять времена года и погоду. Показать клиенту, как коттедж выглядит летом в солнечный день, осенью под дождем или зимой в снегу — вопрос пары кликов.
• Высаживать деревья и кустарники. В библиотеке программы тысячи растений, которые реалистично выглядят и даже могут колыхаться на ветру.
• Создавать водоемы и газоны. Трава в Twinmotion умеет расти и выглядит объёмно, а вода выглядит как настоящая.

3. Создание видео и интерактивных презентаций

Статичные картинки — это хорошо, но видеооблёт или прогулка по дому производят гораздо более сильное впечатление. В программе можно легко создавать анимированные ролики и даже интерактивные презентации. Например, клиент может самостоятельно «пройтись» по дому или переключать варианты отделки фасада прямо во время презентации.

3D-визуализация / Интерьер / Минимализм

Визуализация интерьера современной двухкомнатной квартиры общей площадью 44 квадратных метра. Проект демонстрирует функциональный подход к организации компактного жилого пространства, выполненный в эстетике минимализма.

Ключевая концепция — формирование светлого и воздушного интерьера с максимальной эффективностью использования каждого квадратного метра. Нейтральная цветовая палитра, построенная на преобладании серых тонов в сочетании с натуральным деревом, визуально расширяет границы пространства. Продуманная система освещения добавляет композиции глубины и создаёт атмосферу уюта.

Профессиональная 3D-визуализация интерьера реализована с применением современного софта:

• 3D-моделирование: Autodesk 3ds Max

• Рендеринг: Corona Renderer

• Постобработка: Corona Image Editor + Adobe Photoshop

При работе над визуализациями приоритетное внимание было уделено следующим аспектам:

Развернуть

Двухкомнатная квартира — 3D-визуализация

3D-визуализация / Интерьер / Минимализм

Визуализация интерьера современной двухкомнатной квартиры общей площадью 44 квадратных метра. Проект демонстрирует функциональный подход к организации компактного жилого пространства, выполненный в эстетике минимализма.

Ключевая концепция — формирование светлого и воздушного интерьера с максимальной эффективностью использования каждого квадратного метра. Нейтральная цветовая палитра, построенная на преобладании серых тонов в сочетании с натуральным деревом, визуально расширяет границы пространства. Продуманная система освещения добавляет композиции глубины и создаёт атмосферу уюта.

Профессиональная 3D-визуализация интерьера реализована с применением современного софта:

• 3D-моделирование: Autodesk 3ds Max

• Рендеринг: Corona Renderer

• Постобработка: Corona Image Editor + Adobe Photoshop

При работе над визуализациями приоритетное внимание было уделено следующим аспектам:

Развернуть

Фотореалистичная 3D-визуализация интерьера компактной спальни площадью 12 квадратных метров. Задача проекта — продемонстрировать эргономичную организацию ограниченного пространства с сохранением эстетики современного минимализма.

Концептуальный подход

В основе дизайна лежит идея создания гармоничного пространства для отдыха через сдержанную цветовую палитру и натуральные материалы. Доминирующие тёплые древесные оттенки сочетаются с нейтральной серой гаммой, а медные акценты в светильниках придают интерьеру завершённость и характер.

Ключевые дизайн-решения

Акцентная деревянная панель

Панель из натурального дерева за изголовьем кровати выполняет двойную функцию: визуально разделяет зоны помещения и привносит тактильное тепло в атмосферу спальни.

Симметричная система освещения

Подвесные светильники комбинированного исполнения (медь + белый матовый пластик) формируют сбалансированную композицию над спальным местом. Дневной свет поступает через панорамное окно, обеспечивая естественную подсветку в течение светового дня.

Мебельная группа

Подобраны изделия светлых оттенков с лаконичными силуэтами — это позволяет избежать визуальной перегруженности небольшого помещения и сохранить ощущение воздушности.

Текстильная программа

Покрывало с геометричным принтом вводит графический акцент в спокойную колористическую схему, добавляя динамики без нарушения общей стилистической целостности.

Технические аспекты визуализации

Работа со светом