Нейросети и прочие ИИ

Ты хочешь, чтобы она понимала запрос на русском? Яндекс "ИИ" до сих пор не умеет "улучшать" текст на русском, к примеру)

 

Наверное, любая нейросеть может нарисовать картинку с шахтёрами-золотоискателями. Что такое "золотое руно"? Это метод поиска золота в древнем мире, в ручье топили баранью шкуру и смотрели, не застряло ли в ней золотого песка. То есть алконавты пытались выяснить, не намыл ли товарищ неучтённого бабла и не желает ли поделиться с бродягами

 

Решил дать второй шанс A1111. Как задействовать в нем 8 bit floating point, так и не понял, галочка в настройках ничего не делает (как, впрочем, и у форжа), но при этом, параметров запуска, как в форже, нет. Соответственно - по 10 минут на картинку 1024x1024 в 20 шагов, вместо 1:45. Там кстати обнова вышла на кузницу, теперь не надо лезть в настройки, чтобы поменять планировщик.

 

Ась?

webuid-gpu0.cmd:

Код:

pushd C:\shares\personal\tbapb\sd\stable-diffusion-webui
title port 27860 DEVICES=1 GPU0 #2 9F543CB
set CUDA_VISIBLE_DEVICES=1
set COMMANDLINE_ARGS=--xformers --port 27860 --listen --enable-console-prompts
call webui.bat

 

@TBAPb, я, как бэ, про --unet-in-fp8-e5m2 --clip-in-fp8-e5m2

 

@Forgettable, а, интерпретировал как отсуствие args вообще.
У меня результат через настройки есть (начинает писать в info, меняется генерация с того же seed), потребление памяти падает с включеным fp8 (9.5GB против 12G.
Так что настройки работают, с 2 марта.
1.8.0 · AUTOMATIC1111 stable-diffusion-webui · Discussion #15073

--- добавлено 31 июл 2024, предыдущее сообщение размещено: 31 июл 2024 ---

а) в auto/comfy/forge сначала. Во вложении примеры с разным CFG, для иллюстрации
б) без фотожопа всё равно не обойтись

Ну так зачем искать где светло сначала заниматься цветами, если база не готова?

Он попал пальцем в небо, вот и всё. Опять таки см. вложение - вполне всё рисуется.

Пофиг, надо 512х512 для SD1.5, для SDXL 1024x1024. Но надо чистить, иначе будет добавлять мусор (eg когда модели натасканные на тыренных артах добавляют "автора" в углу, ессно кракозябрами)

How to train SDXL LoRA models - Stable Diffusion Art

Ну так надо пробовать! с разными чекпоинтами! Логично, что стиль рисовки PriPara, который гораздо ближе к американскому, плохо передаётся моделями натасканными на "чистом" аниме.

Ну так пробуйте с ними.

Для "оригинальной" картинки выдаёт следующие теги:

Собсно таскайте понравившиеся картинки в промтер и смотрите как он их интерпретирует (для A1111: вкладка Extras, пункт Caption)

 

@TBAPb, а как его включить-то?)) впрочем, не важно, кузница топ по прежнему.

 

@Forgettable,

 

@TBAPb, врубал, это ничего не дает, равно как и в форже ничего не давало, пока не прописал параметры выше

После этого я могу генерить 6 картинок 1024x1024 одновременно на 6 гигах видеопамяти

 

Интересный подход с реверс-инжинирингу разума на примере крыс:
Want to make robots more agile? Take a lesson from a rat. — Harvard Gazette
По кусочкам, возможно, и целый мозг потом соберут.

 

Код:

c:\>python --version
Python 3.10.11

Код:

stable-diffusion-webui>git log
commit 82a973c04367123ae98bd9abdf80d9eda9b910e2 (HEAD -> master, tag: v1.10.1, origin/master, origin/HEAD)

 

@TBAPb, сравни сам)

 

@Forgettable, я писал выше, при включении fp8 (кеш не трогал):
а) потребление памяти меняется (жрёт меньше)
б) меняется генерация от того же seed (проблема известная, проявляется при работающем fp)

 

У тебя оно падает где-то на четверть, у меня упало раза в четыре, если не больше. ~4 ГБ - 1 картинка, ~5.5 ГБ - 6 картинок.

Еще бы она не менялась, это ж влияет на отрисовку

 

Это показатели занятой памяти вообще, там попутно ещё кой-чего крутится, что жрёт VRAM, в районе 5Gb, плюс я не проверял batch, мне нет необходимости.
Я к чему - у меня, на недавно апнутом питоне и с нуля поставленным A1111 - fp8 работает, при включении в настройках.

 

Как?

Вообще, со своего предыдущего сообщения попробовал все-таки в Photoshop воспользоваться инструментом "Replace Color", чтобы не выделать вручную отдельные цветовые области и не менять цвета сразу на всем изображении. Оказалось, это проще сделать, чем я ожидал. Боялся, что он будет "задевать" близкие цвета, но как-то удалось достаточно легко подобрать параметр "Fuzziness" для каждого цвета, чтобы почти не задевало другие. Но потом меня "понесло". Для начала перерисовал глаза, а то, как я уже говорил, не нравится мне стиль у этого AutismMix. Потом еще подправил мусор под бантиком со скрипичным ключом, сам скрипичный ключ подправил, чтобы выглядел менее криво, хотя его надо бы по хорошему вообще убрать и нарисовать самостоятельно заново. Поправил еще бантик на левой руке (на картинке он справа), а то его нейросеть тоже криво сделала. Вообще, надо бы еще полоски на лифе платья стереть и заново нарисовать, а то нейросеть нарисовала четыре, а надо пять.

Вот, слева оригинал, Checkpoint - AutismMix_confetti, справа с ручной доводкой:

Опять же, уже спрашивал в предыдущих сообщениях. Не понял что вы под этим имеете в виду? Хотите сказать, что он перебирал Seed, пока не получилось годно?

Увы, во вложении "бред".

А если у артов соотношение не 1:1? Если у них высота больше, чем ширина?

???

 

So, Suno. Розембаум А.Я., "Вите надо выйти" (jazz, funk, swing)
Вите надо выйти (типа полный вариант)
p.s. сам "виноват", нечего было модняк на первом канале распевать :-)

Песня пиратов из "Острова сокровищ, 1939"
(промт тот же самый, стили гитара+энергично; название в суно ошибочное)

 

Боже, ну я же русским по светло-голубому пишу и даже привожу примеры.
а) CFG, как уже писал выше. Учитесь в XYZ grid, задавайте там разные CFG для понравившегося варианта и смотрите, насколько она меняется, в зависимости от.
б) colorful в prompt, monochrome в negative prompt и все возможнные вариации

Да, он набил дурной, но подходящий pprompt, набил всякого говна в nprompt, нашёл удачный сид, поигрался с steps/CFG/upscaler.

- Говно!
- Почему говно, какие причины, что не нравится?
- Потому что говно!

А что будет если квадратное сувать в круглое?

--- добавлено 3 авг 2024, предыдущее сообщение размещено: 3 авг 2024 ---

Напоминаю, как варианты CFG/monochrome влияют на изображение.
Без Hires, уж увольте.

--- добавлено 3 авг 2024 ---

и совсем банальщина

 

Есть у меня подозрения, май шеры, что эти претензии вы бы и настоящему художнику предъявляли.
"Глаза не те, обводка не такая, цвета не корректные". Но художник бы на пятом-шестом разе на фиг послал. Нейросеть терпеливая, фиг ли машина ж неразумная.

Вроде бы нейросеть генерирует базу - а остальное надо ручками доделывать. Ну или вообще с нуля создавать, без использования нейросетей.

Если хочешь что-то хорошо - сделай это сам.

Но люди с упертостью, достойной лучшего, мучают сетки промтами раз за разом. А потом умники будут удивляться, чего это нейросети деградируют.

 

Что-то не особо помогает. Ручками оказалось эффективнее.

Ну это печально. Это как-то деморализует, что хороший результат можно получить только случайно.

Кстати, хочу извиниться, возможно слово "бред" было слишком грубым. Я ругал результат работы нейросети, а не вас. К вам никакого негатива.

А насчет того, почему это плохо я уже писал до этого. Как минимум нейросеть часто лепит не туда бантик, который на талии, он должен быть смещен в левую сторону, ну то есть в правую, если смотреть на картинку. На тех вложениях еще и лишний слой у платья.

А еще косячит в некоторых других мелких элементах типа бантиков на руках. И не может нарисовать нормально скрипичный ключ, хотя это для нейросети непосильная задача, как и сделать нормальный текст. И это мы еще делаем самую простую композицию, где она просто стоит прямо, прямо повернутая к зрителю. Я уже пробовал, если делать какие-то более сложные ракурсы, то от платья часто вообще почти ничего не остается.

В принципе, мне сейчас пришла в голову такая идея, что можно в negative prompt добавить "bow, treble clef", тогда может она сгенерирует вообще без всяких бантиков, а их уже можно будет потом добавить вручную.

Не понял. Добавить с каждой стороны пустого места, чтобы картинки стали квадратные?

Вот уж нет. Если бы художник смотрел ПриПару, он бы точно таких ошибок не наделал. Да даже если бы не смотрел, живому художнику достаточно показать официальные арты\хороший фанарт, чтобы он понял, как правильно рисовать. Главное, чтобы у него руки из правильного места росли.

Ну смотря что и сколько дорисовывать. Если что-то по мелочи - еще ладно. Вот я уже выше приводил пример, как вручную перерисовал глаза. Кстати, после перерисовки глаз картинка даже стала не так уж и походить на нейросетевую. Но если там будут нужны какие-то обширные переделки - тогда ой.

Не получится у меня такое. А еще, это ужасно геморно и муторно. Были у меня когда-то потуги в рисование. Но это был такой гемор. При этом, нейросеть по многим вещам превосходит то, что я рисовал когда-то сам. Правда не может того, что бы вполне плучилось у меня. Ну и результаты работы нейросети все равно пока имеют характерный "нейросетевой" вид.

Еще интересно, а как через Inpaint удалть какой-либо объект с картинки? Стобы дорисовать понятно - выделить область, в запрос написать, что там должно быть. А что нужно писать, чтобы наоборот, убрать выделенный объъект?