Самая рабочая модель для реалистичных реставраций

Фотомонтаж в Stable Diffusion (и в Photoshop, конечно)

Не реставрацией единой жив фотошопер. Сегодня я делаю обычный фотомонтаж не обычным инструментом - нейросеть Stable Diffusion.
Фотокерамика и быстрая реставрация портрета с помощью Photoshop и Stable Diffusion

Демонстрация быстрого восстановления фотокерамики с помощью Photoshop-а и нейросети Stable Diffusion
Реставрация дедушки, с подробностями, Photoshop-ом и нейросетью Stable Diffusion в обнимку

Подробный пошаговый видос реставрации дедушки с помощью Photoshop и Stable diffusion. Почти мастер-класс по реставрации в нейросети
Реставрация разбитой фотокерамики. Stable Diffusion в действии

Обратилась девушка с просьбой спасти положение - разбила свеженапечатанную фотокерамику. Исходника нет, клиент уже едет, последний шанс спасти репутацию - перепечатать. Но нужен исходник...
Кто уволил Эмада Мостака?

Итак, Эмад Мостак, основатель и генеральный директор Stability AI, ушел со своих постов генерального директора и председателя правления. Временно компанию возглавят ее главный операционный директор Шан Шан Вонг и технический директор Кристиан Лафорте.
Мостак говорит, что хочет сосредоточиться на децентрализованных проектах в области искусственного интеллекта. Он считает, что централизованные структуры ИИ, такие OpenAI и Anthropic, не могут победить такие же централизованные ИИ. Он считает, что важно обеспечить большую прозрачность и распределенное управление в области искусственного интеллекта, поскольку это становится все более важным. Мостак также упомянул, что он сам принял это решение.
В прошлом году казалось, что Мостак не считал увеличение выручки приоритетом. Он считал, что ориентировать компании на прибыль странно (капитализм ни разу не про прибыль, ага! прим. авт.), и привел примеры таких компаний, как MagicLeap, которые потратили миллиарды, прежде чем стали прибыльными. Однако в этом году финансовый вопрос стал более насущным. В недавнем посте на Reddit Мостак написал, что в этом году дела у компании идут хорошо и они превосходят прогнозы. Их цель — добиться положительного денежного потока раньше, а не позже.
Что вы думаете по этому поводу? Вы когда-нибудь работали в стартапе или были вовлечены в подобные проекты? Поделитесь своими мыслями в комментариях!
«Рынок огромен, и открытые модели будут нужны для периферийных вычислений и всех регулируемых отраслей. Вот почему мы являемся одной из немногих компаний, которые открывают данные, код, детали обучения и прочее. Индивидуальные модели, консалтинг и другое — огромные рынки и очень разумные бизнес-модели; примерно в следующем году мы выйдем на корпоративное внедрение, а прошлый год мы просто проводили испытания», — рассказал Эмад Мостак в совём аккаунте на Reddit.
Stable Diffusion против Midjourney

Это похоже на драку двух карманников за подрезанный кошелёк! Довольно иронично, учитывая их род деятельности. Я имею в виду, кто бы мог подумать, что воры чужих изображений будут воровать друг у друга изображения, созданные с помощью ИИ, для обучения своих ИИ? Это просто показывает, что даже в цифровом мире все еще есть место для драмы и интриги!
Суть переполоха.
Программисты Midjourney заметили, что какая-то учётка на их серверах выкачивала пары «запрос + картинка» ото всех пользователей сервиса как не в себя. Перегрузка сервера была настолько сильной, что Midjourney пришлось отключить свою базу данных на 24 часа! А потом все приняло еще более безумный оборот, когда они обнаружили, что подозрительная учетная запись «была связана через две кредитные карты с одним из ведущих инженеров по сбору данных в команде Stable Diffusion компании Stability AI» И в качестве наказания Midjourney запретили всем сотрудникам Stability AI пользоваться их платформой…
Техническая ремарка.
Сбор данных (data scraping) — извлечение информации из ответов другой программы, обычно производимое для обучения собственной модели. Сегодня этот метод является стандартной практикой в гонке за разработку инструментов ИИ, хотя иногда вызывает претензии — эта практика перегружает серверы платформ, с которых производится сбор данных и ухудшает качество обслуживания пользователей. Но крупные инциденты с отключением серверов до настоящего момента не отмечались.
Финансовая ремарка
Midjourney и Stability AI — прямые конкуренты в области генеративного ИИ. Работающая в Сан-Франциско компания Midjourney была основана Дэвидом Хольцем (David Holz). Её доход, по некоторым оценкам составляет $200 млн, а штат — менее 100 сотрудников; внешний капитал для работы компании не привлекался. Базирующаяся в Лондоне Stability AI привлекла $197 млн от Lightspeed, Coatue и Intel при оценке в $1 млрд. В 2023 году выручка компании, по данным AIM Research, составила $44,2 млн.
Чем сердце успокоится
Генеральные директора Midjourney и Stability AI прокомментировали ситуацию. Первый подтвердил факт кражи и упомянул, что команда уже получила некоторую информацию по этому вопросу, в то время как второй отрицал, что давал указания своим сотрудникам красть у Midjourney, и пообещал помочь в расследовании. Учитывая дружеские отношения между двумя генеральными директорами, вероятно, что их заявления искренни и не являются попыткой сгладить ситуацию.
В общем, ИИ-война идет, но совсем не там, где мы ожидали.
Что вы думаете по этому поводу? Есть ли у вас любимые генераторы изображений с искусственным интеллектом? Дайте мне знать в комментариях…
Реставрация фото из интернета

Галерея
- Это исходное фото из интернета, немного подрезанное под формат 640 х 768 пикс. Дело в том, что вся жизнь в Stable Diffusion бьётся между двух цифр - 512 и 1024. Это рабочий формат картинок, который нейросеть SD1.5 более-менее хорошо переваривает внутри своих слоёв. Я давно определился со своим любимым портретным форматом, в котором работаю и реставрирую. Это 640 х 768 пикс. С этим и стартую.
- Ни заход в улучшайзеры (CodeFormer или GFPGAN), ни полчаса махача в Inpaint-е не дали нормального устранения трещин. Всё, что я смог добиться от SD - это колоризацию фотографии девочки в дополнении Deoldify на вкладке Extras. И то пришлось рихтовать границы заливок в фотошопе. Все трещины убирал в фотошопе по-старинке, грубо и брутально. Особой точностью не заморачивался, так как SD прекрасно вылизывает незначительные царапины и мусор. Текстурную поверхность фотографии, к стати, тоже.
- Первый нормальный заход в улучшайзер GFPGAN. Возврат в фотошоп, рихтую косяки с глазами и овалом лица. Снова GFPGAN, снова фотошоп. На третью итерацию улучшения меня всё устроило.
- Его величество Inpaint - всё волшебство нейросети Stable Diffusion происходит именно здесь. Первым заходом я обычно бью по всему фото самым брутальным способом и смотрю что получается: сначала накрываю маской брови, глаза, нос, рот и все мимические морщины поблизости, инвертирую маску и перебираю несколько сэмплеров - DPM++ 2M Karras, Euler a и всю эту компанию. Для первого даю осторожный деноиз где-то 0,3 - 0,4, для второго - 0,2. Вроде не сильно перебилось лицо и волосы.
- В фотошопе собираю все варианты, оцениваю изменения и через маски собираю в один слой самые удачные локации - с одного варианта забрал бантик, с другого платье, где-то ухо удачно получилось, где-то рука. Второй заход в Inpaint выполняю уже локальные косметические работы - перегенерировал руку, долго возился с бантиком. SD постоянно рисовала его то в сеточку, то вязанный, то мохнатый как из шкуры розового зайца))). Пока в промпте не указал явно - satin bow, дело не двигалось.
- Предпоследнее фото, где я собрал всё, что посчитал удачным и законченным. Осталось немного "зажарить" в фотошопе и здравствуй Upscales. Для апскейлов установил скрипт Ultimate SD upscale и под него специально выкачал апскейлер 4x-Struzan - всё это легко гуглится. Тактика такая - делаю апскейл в два шага: первый в 1,5 раза, максимально аккуратно, Euler -ом с деноизом 0,02 - 0,03, второй в 2 раза сэмплером DPM++ 2M Karras и с максимально разумным деноизом 0,3 - 0,35. Часто прыгаю обратно в фотошоп, что-то рихтую, через маски собираю локации и вот...
- Финальная генерация, которая не сильно понравилась. Можно было ещё повозиться в Inpaint, апскейлы сделать посильнее на втором шаге... Но пусть будет как будет))
Для подробной индивидуальной консультации о методах реставрации устаревших фотографий стучите в личку, в VK. Сначала созвонимся по видеосвязи, определим круг ваших интересов и задач, за тем я составляю индивидуальную программу для вас и за 2-3 мастер-класса я научу вас делать такие реставрации на уровне среднего уверенного пользователя нейросети Stable Diffusion. Навыки работы в Фотошопе сильно необходимо иметь ДО начала мастер-классов. Надеюсь это очевидно)))
В Китае запустили сериал, созданный с помощью ИИ
Государственная телекомпания China Media Group начала показ первого в стране мультсериала, созданного с помощью сервисов генеративного искусственного интеллекта (GenAI), включая инструменты преобразования текста в видео, аналогичные Sora от OpenAI, поскольку правительство призывает государственные фирмы пилотировать использование искусственного интеллекта в своем бизнесе.
В 26-серийном сериале " Цяньцю Шисун", который дебютировал в понедельник, представлены некоторые из самых легендарных классических китайских стихотворений и их предыстории, каждая часть длится около 7 минут, согласно заявлению, опубликованному в WeChat-аккаунте Шанхайской лаборатории искусственного интеллекта (SAIL).
Нейросеть Stable Diffusion на слабом пк - не повод отставать от конкурентов
Как запустить нейросеть на слабом ПК?
Что делать, если компьютер не тянет нейросеть Stable Diffusion?
Никак и ничего. Нужно просто освоить аренду удаленной графической станции. Мы в 21-м веке живём, или где?))) Аренда решает проблему не только слабого ПК, но и не готовности к новым реалиям производителей яблок.
Зарегистрироваться в сервисе, описанном в видело, можно по ссылке:
Что мутит папа Stable Diffusion Эмад Мастак, основатель Stability AI?

Stability AI стала компанией стоимостью 1 миллиард долларов благодаря вирусному генератору изображений Stable Diffusion и – согласно многочисленным интервью с инвесторами -благодаря некоторым вводящим в заблуждение заявлениям основателя Эмада Мостака.
В этой статье репортер Кенрик Цай рассказывает о том, как расследование Forbes смогло разобраться в этих заявлениях, чтобы отделить факты от вымысла, и как впоследствии отреагировали в компании Эмада Мостака.
Короче, я связался с сотрудниками Stability, которые занимались Stable Diffusion, и узнал, что профессор из Мюнхенского университета Людвига Максимилиана руководил первоначальными исследованиями, которые послужили основой для Stable Diffusion.
Он выразил недовольство тем, как Stability представляет себя и взяла на себя заслуги, которых они не заслуживали. Я связался с Amazon, чтобы проверить партнерство Stability с ними. Оказалось, что Stability была просто обычным клиентом Amazon и получала стандартную скидку на чипы искусственного интеллекта, а не выгодное стратегическое партнерство.
Они также преувеличивали свои партнерства с другими организациями, такими как Организация Объединенных Наций, Всемирный Банк и Всемирная организация здравоохранения. Короче говоря, в Stability AI не все так гладко, как они пытаются показать. Инвесторы должны быть более осмотрительными при вложении средств в компании, особенно в области искусственного интеллекта.
Кроме того, стоит обратить внимание на ключевых игроков внутри компании Stability. Основателем компании является Эмад Мастак, но также важную роль играет его жена Зара Куреши, которая ранее работала в отделе связей с общественностью и заявляла о себе как операционном директоре. Оказалось, что она также была членом совета директоров компании после получения 100 миллионов долларов венчурного финансирования.
В процессе нашего расследования мы обратились к Stability для комментария, и хотя они ответили на некоторые наши вопросы, некоторые вопросы они либо отклонили, либо проигнорировали. Это вызывает некоторые сомнения относительно прозрачности и искренности компании.
Возникает вопрос о том, какие еще важные партнерства существуют у Stability AI на самом деле. Информация, предоставленная ими, кажется не всегда надежной. Инвесторы и другие заинтересованные стороны должны быть более критическими и более тщательно изучать компанию перед тем, как вкладывать деньги.
История Stability AI является отличным примером того, что происходит в сфере искусственного интеллекта в настоящее время. Популярность генеративного искусственного интеллекта привлекает инвесторов, которые готовы вкладывать огромные суммы в компании, не проводя должную осмотрительность и не обращая внимание на потенциальные красные флажки.
Очень важно, чтобы инвесторы исследовали компании более тщательно и обращали внимание на все подробности, прежде чем принимать решение об инвестициях. История Stability AI является напоминанием о необходимости критического подхода и осмотрительности при рассмотрении инвестиций в компании, особенно в сфере искусственного интеллекта.