Нейросети и прочие ИИ

Абсолютно одинаковые запросы, с лорой на персонажа и без.
Во втором варианте получилось нечто похожее только из-за вспомогательных слов в запросе, так-то модель этого персонажа вообще не знает.

 

Да, я тоже так сначала подумал, но почитал описание и понял, что кажется это что-то для сокращения количества шагов.

А я попробовал. 20 шагов. Ворде показалось, что с этой LoRA как-то лучше получается, даже если делать больше восьми, поэтому сегодня все делал с ней. Правда проверял на модели stuffyMixXL_v10 SDXL1.0, может там это просто так хорошо совпало. Возможно на других моделях это не помогало и даже мешало. А то на AutismMix_confetti была иногда некоторая фигня.

А вы терпеливый человек . Я вот думаю, а если так же как я арендовать машину для обучения, это будет сильно невыгодно?

А можно ссылку на ваш профиль на Civitai? Просто любопытно посмотреть, какие картинки вы выкладываете.

По идее, имитирует стиль рисовки из игры Dohna Dohna.

Почему-то думал, что достаточно добавить в запрос "<lora:ALICESOFT_Dohna_Dohna_Game_Artstyle_Revised_PonyXL:1>".

Ну просто просматривал картинки, которые представляют модели - не увидел ничего такого, что бы привлекло (в том числе и LoRA). Эти AutismMix тоже в их числе. На самом деле, там очень много этих моделей, наверно может и попасться что-то интересное, я просто устал крутить список.

"БМП" - что это?

Попробовал еще погенерировать аниме при помощи Toonify - что-то все равно как-то криво получается. Наверно она просто не расчитана на аниме? Или нужно просто какие-то еще параметры подобрать именно под нее?

Я имел в виду - мощная видеокарта генерирует за считаные секунды, но немало времени уходит и на работу с самим веб-интерфейсом. А это по сути простой видеокарты, по сути, это время будет слишком дорого стоить. Но с другой стороны - генерации на Tesla P100 нужно ждать, за это время можно бы было уже сделать что-либо другое, например подредактировать параметры.

Да, это бы было максимально удобно.

20 шагов - где-то минута, чуть меньше (что-то около 45-55 сек). 40 шагов - чуть меньше двух минут. Цифры не точные.

Насчет белого IP - если бы IP был белым, то наверно можно бы было открыть WebUI на своем компьютере, введя адрес удаленного в браузере. У меня не открывалось. Хотя сейчас подумал, наверно там брандмауэр, возможно нужно было добавить порт, который использует WebUI в исключения.

Кстати, там WireGuard предустановлен.

Нет, вы не поняли, про что я спрашивал. negative prompt убран в файлах с "no_negative" в имени, где просто "negative" без "no" там он оставлен. При этом картинка все равно изменилась по сравнению с оригиналом.

Тут даже не хобби, а (попытка) достижения поставленной цели.

Знаю я про LoRa, но как уже писал выше, пока не могу найти что-то подходящее.

 

Нет)). Впрочем, вычислить меня при желании несложно.

Если знать, что делать, наверное, это будет выгодно. Но где же этому научиться)

Для некоторых этого достаточно, но большинство работает по определенным словам в запросе.

BeMyPony

Ну как бэ да.

Ну такое себе. Кроме видеопамяти ей нечего предложить, в общем. Стоит она кстати недорого, как RTX 3060 на 12 гигов в свое время.

 

А надо было прочитать и понять, что именно для 2, 4, 8 шагов.
Опять гвозди забиваем чем попало.

По умолчанию, все эти вебгуи биндятся на локалхост, поэтому и не откроются. Плюс - никакой авторизации, что явно не хорошо.
Сделайте проще - задайте вопрос суппорту.

К суппорту, зачем он там предустановлен.

Да, но - совершенно незначительно.
Добавление деталей и общий refine в основном происходит на этапе hires.fix.
Да, если хочется повторить именно эту картинку (зачем? разве что хочется именно её, но большего размера), то надо 1:1, но если не хочется тратить своё время, то весь хлам из запроса (и позитив и негатив) надо выкидывать и тюнить.

Ну так стоп, в чём задача?
Если именно Laala делать - то чекпоинт, естественно, проще брать из тех, кто натаскан на аниме (Autism, Pony, BMP, Confeti и т.д.), т.к. данный набор будет гораздо лучше, чем ЧП натасканный на генерацию реалистичных изображений. И ЛоРай доводить до того, чего хочется.

Блин, хотел ещё матрицу сдлеать для примера, но у меня сервер с видюхами решил гакнуться.
Если оживёт - сделаю.

--- добавлено 28 июл 2024, предыдущее сообщение размещено: 28 июл 2024 ---

Собсно.
Условия те же, один промт, разные чекпойнты, добавочная лора, апскейл.
Как видно - банально от уровня CFG меняется "насыщенность" картинки, и для разных чекпойнтов - по разному. В первую очередь, потому что тут везде - 20 шагов.
Некоторым противопоказано больше ~5, eg: animagine.

Ну если нужно генерить вот этого персонажа - уже всё есть. Надо просто выбрать наиболее подходящую модель (ну или парочку, не более) и методично вкидывать токены, подбирая результат.

--- добавлено 28 июл 2024 ---

Оригиналы тут DropMeFiles – бесплатный файлообменник без регистрации

--- добавлено 28 июл 2024 ---

Ну и собсно иллюстрация к тому, что я писал про пачку левых токенов в negative prompt
Из всей мешанины что там есть (включая, цитирую: "low quality lowres pedophile"), "работающим" оказался... один вот этот токен.
Смеха ради добавляю вариант с monochrome в позитив промт, просто потому что я его случайно сделал, тем не менее - он отлично дополняет выше сказанное.

 

Кстати, в предыдущем сообщении совсем забыл это процитировать. Случайно речь идет не про те настройки, про которые было написано в этом сообщении?

Я бы так не сказал. Во всех вариантах бантик на талии съехал на середину. А он должен быть немного на боку. На многих вариантах отсутствует бантик на груди. Ну то есть может быть в запросе все это лишнее, но нам же важен конечный результат, а не способ, которым это получено.

Просто не могу понять, что за такие "волшебные" настройки у автора, что у него все получилось так идеально.

У вас на Stuffy Mix XL брак. Скорее всего, где-то настройки неправильные.

Я про стиль рисовки говорил. Пока ничего не могу подобрать с рисовкой, которая бы устраивала. В принципе, я уже пробовал генерировать на AutismMix_confetti - рисовка оказалась симпатичнее, чем я ожидал, симпатичнее, чем обычно видел на картинках с Civitai. Пожет быть, эта LoRA как-то еще на рисовку влияет, а не только всопроизводит дизайн персонажа. Но все равно, рисовка не совсем то, что бы хотелось.

Кстати, что-то не могу понять, а в Forge по умолчанию есть поддержка LyCORIS? Если да, то как пользоваться? Почитал в интернете, пишут, что сейчас это устарело и LyCORIS "приравнены" к LoRA. А в итоге, как использовать? Просто положить в папку "Lora"?

И еще, где можно почитать про img2img? что там можно делать? Поддерживается ли там LoRA? Ну то есть можно ли при помощи LoRA перерисовать одного персонажа в другого через img2img? Вроде бы там можно сделать т.н. "uncrop", то есть расширить картинку за ее границы.

 

Не брак, а CFG/Steps/Scheduler не подходят для Stuffy Mix.
Я ручками там не собираюсь тюнить, я просто сделал XYZ matrix, и мне, для доказательства чего угодно - уже достаточно.
Но, это подтверждает ранее мною сказаное - для каждой комбинации ЧП и семплера - нужны свои настройки, нет "гарантированно рабочих".

Да в том и дело, что "волшебных" настроек нет, есть цепочка случайностей: кривой vae, куча negative которые ничего не делают, кроме НЕКОТОРЫХ, случайно туда попавших - их все автор картинки тупо копипастил откуда придётся, и, что в англоязычные называют - что-то прилипло.

Ну вот выше я дал разбивку по основным, самым популярным ЧП. Я не верю, что из этого всё - полная несуразица и не подходит. Поверю, что "не идеально, надо дорабатывать".
Про "дорабатывать" уже говорил - ключевые детали в исходной картинке - добавлены на этапе hires.fix, а не начальной генерации картинки.

Повторюсь - база уже есть: любой анимешный чекпоинт и лора на Лаалу, всё - дальше надо ковырять токены, т.е. понять что хочется нарисовать - а уж дальше можно будет играться.
Как бы можно сделать свою, самую лучшую ЛоРу, но толку, если изначально запрос убог и не даёт то, что надо?

--- добавлено 29 июл 2024, предыдущее сообщение размещено: 29 июл 2024 ---

Ещё раз проакцентирую внимание на этом пункте, вместе с:

Нет, получилось идеально не потому что автор умеет, а потому что натыкал в небо достаточно, чтобы попасть в нужные.

"Сочности" его картинке добавила не ЛоРа и не огромный негатив промт, а наличие monochrome в negative. Всё остальное - просто удачно отвлекало ЧП от работы.

 

Там только про страницу генерации сказано. Еще есть отдельная вкладка с настройками и параметры запуска.

Настройки: + на вкладке Sampler parameters включить Always discard next-to-last sigma.
Token merging ratio почему-то вообще ни на что не влияет, мб в форже он включен принудительно.
Параметры запуска из webui-user.bat: set COMMANDLINE_ARGS=--unet-in-fp8-e5m2 --vae-in-fp16 --clip-in-fp8-e5m2
Можно не прописывать, но без них у меня не хватало VRAM даже на одну картинку, сейчас хватает на 6 одновременно.
Так же нужно обязательно скачать sdxl-vae-fp16-fix, иначе кроме черных квадратов мы ничего не получим.

Касаемо моделей - крайне не рекомендую всякие AAAAutism, Confetti Comrade Mix и прочие попытки улучшить AutismMix, скрестив их с другими моделями, я их тестил и во всех случаях они проигрывали оригиналу как в креативности, так и в количестве брака.

Из действительно интересных моделей за последнее время я нашел Tunix, рекомендую всем попробовать.

В ближайшее время еще попробую SDXL Lightning лору и модели, о результатах отпишусь.)

 

Нет, так не должно быть. У меня с первого раза тоже так получалось, пока не нашел косяк, в итоге цвет пришел в норму.

Тут не то, что "несуразица", я пытаюсь объяснить, что стиль все-таки немного "не то". Вот мне в плане стиля понравилось то, что выдает Toonify, посмотрите две картинки в конце этого сообщения. Но на этой модели получается в основном слишком криво. Зато там и цвета нормальные, а то на всяких AutismMix цвета получаются больно блеклые и волосы серые. Конечно можно по идее в графическом редакторе подтянуть цвета, но там скорее всего для более качественного результата нужно будет выделять отдельные цветовые области а это немного муторно. Лучше, чтобы сразу цвета были нормальные.

Не совсем понял, что вы имели в виду. Вы хотите сказать, что нет каких-то "правильных" настроек, "правильного" запроса, нужно просто упорно генерировать по новой, пока не получится нормального результата? При этом пытаясь наугад подкручивать настройки?

Тут даже не о "сочности" идет речь (хотя ее тоже не хватает), а о СТИЛИСТИКЕ. Может быть есть какая-нибудь LoRA, которая могла бы "подтянуть" стиль рисовки даже на всяких AutismMix, но пока не могу найти.

Кстати, во вложении "prompt_matrix_jpg85.jpg" не совсем понял, зачем вы делали тег "laced shoes"? По моему, он тут совсем не в тему.

Это повысит качество результата?

sdxl-vae-fp16-fix нужен только, если прописать такие параметры запуска? Или он нужен и для тех настроек, которые были описаны в предыдущей цитате? А какой именно из файлов нужен? Там их несколько.

А "Просто" AutismMix_confetti годная?

Пока не знаю, куда такое применить. Судя по картинкам на Civitai она скорее для какой-то западной стилистики и скорее закос под 3D.

 

В общем, тестим лайтнинги, сравнение:

1. 
   
2. 
   
3. 
4. 

1. AutismMix_confetti, CFG 7, 20 шагов
2. AutismMix_confetti, CFG 7, 10 шагов
3. SDXL_Lightning_8step_lora, CFG 4, 8 шагов
4. AutismMix_Lightning_8step, CFG 3, 8 шагов

Сэмплеры для обычной модели: Euler, Euler a, DPM++ 2M Karras, Euler Karras, Euler a Karras
Сэмплеры для лайтнингов: Euler SGMUniform, Euler a SGMUniform, DPM++ 2M SGMUniform
С лайтингами не работает опция для улучшения детализации "Discard penultimate sigma"

Поскольку SDXL Lightning требует низкий CFG Scale (1-4), малое количество шагов (8) и другой планировщик (SGMUniform), его невозможно объективно сравнить с обычным SDXL, я лишь попытался выдать наилучший результат для него (не подыграл, а дал фору).

Какие выводы хочется сделать по итогу

1. Euler a лайтнинги не вывозит
   
2. Лора, ожидаемо, - полная хрень
3. Euler лучше DPM++ 2M ?

На мой взгляд, лучше не страдать фигней и юзать обычную модель + Euler a.
Позже докину еще лайтнинг-моделей SmoothCuts и Tunix, раз уж скачал их.

Да.

Он нужен для --vae-in-fp16, иначе на выходе будет черный квадрат.

sdxl_vae.safetensors или sdxl.vae.safetensors (для тех, кто не умеет переименовывать файлы), они идентичны.

Одна из лучших моделей на данный момент.

Я тоже сначала подумал, что это модель для фентези, пока не попробовал ее.

 

*тяжко вздыхает*

Я не генерировал ручками каждую картинку отдельно, подгоняя результат.
Я просто сделал XYZ grid с вариацией по чекпоинтам и CFG Scale.
На выбранных мной sampler/scheduler/steps, одинаковых для всех сгенерённых картинок, результат для этого ЧП - плохой.

Что ещё раз подтверждает, что для каждой комбинации ЧП/семплер нужно искать свои подходящие значения, тупо копипастить - будет ерунда выходить.

Ну так телепатического модуля нет ни у меня, ни у ЧП, ни у пользователей Цивитай, иначе кто-либо уже дал тренированную ЛоРу.

Цвета надо подготонять потом. Это как машину выбирать сначала по цвету кузова, а потом уже по требованиям.
Опять-таки, я вам даже пример дал, простое добавление monochrome в negative prompt уже даёт менее блеклые цвета, т.к. исключаются более блеклые "связи", коих предостаточно было в исходном датасете.
Вам нужно сначала добиться адекватной рисовки персонажа в нужных позах и прочем, а потом уже играться с CFG, негатив промт и апскейлером.

Я говорю, что огромная простыня в negative prompt у автора того изображения - нон рубина когорта, абослютно не имеет смысла кроме monochrome и может ещё одного токена. Там просто бездумно насыпано и на результат оно влияет оооочень мало.

Так кроме автора той ЛоРы и вас - никому это не интересно, поэтому стилистики PriPara от просто общего ЧП вы не добъётесь в принципе.
Собсно поэтому ЛоРы и были сделаны, чтобы не тренить с нуля весь ЧП, а доводить уже рабочие результаты к нужному стилю.

Да я *** что там в тему? В инете полно картинок с этой Лаалой в кружевах, я просто добавил это как пример, как тюнить промт и как идёт изменение генерации в зависимости от комбинации токенов.

Для сравнения ЧП не стоит использовать 'a' семплеры из-за недетерменированности.

Это просто работа для диплома. Но за счёт малого количества итераций может быть полезна владельцам очень слабеньких машин, которым хочется в большой Stable Diffusion.

 

Заделал по быстрому, в 20 шагов делать не стал, но уверен, что опять же это лучший вариант, а здесь так, баловство.

1. 
2. 
3. 

Tunix / Tunix Lightning / Smoothcuts Lightning, сэмплеры те же

Удолил лайтнинги, в общем. Лучше подожду на 75% дольше, зато риск брака будет намного меньше.

 

И ради таких нереалистичных изображений скачивать себе исходники нейросетки и память напрягать на компе?

Вот мне Кандинский выдал за пару минут:


И не надо ничего напрягать.

 

@Ogr 2, Да я прикалываюсь. Уж и пошутить нельзя. Чего все такие серьезные.

Тут другой вопрос: какая нейросеть с картинками нормально понимает запрос "Золотое руно"?

Кандинский не понимает. Рисует мне золотых баранов-мутантов с огромными рогами и о шести ногах. Какой бы запрос не вводи. Ни "руно", ни "шкура барана", ни "шерсть овцы".

 

В графическом редакторе? Ну как я уже говорил, это может быть немного муторно, так как для более хорошего результата там нужно будет работать с каждой цветовой областью отдельно, нужно будет их точно выделить.

Вот это пока не очень удается.

Тут снова непонимание. Я выше в сообщении написал, что пока не очень удается добиться адекватной рисовки персонажа. Не могу понять почему у автора той картинки получилось, а у меня - нет. И я понимаю, что эта не заслуга negative prompt.

По идее, чтобы повторить стиль рисовки из PriPara нужно просто обучить LoRA на официальных артах по ПриПаре. Правда не знаю, насколько это хорошо получится сделать, так как трудновато найти эти арты в нормальном разрешении\качестве.

Но я даже не о копировании официального стиля рисовки. Художники, рисующие фанарты тоже могут отходить от официального стиля рисовки. Да что там, даже чаще по своему и рисуют. Я говорю о том, что мне в принципе не нравится стиль, в котором рисует этот AutismMix. Stuffy Mix XL тоже не сильно лучше, можно сказать, они даже равноуныло выглядят. Также писал, что понравился стиль, который выдает Toonify пример в конце этого сообщения, посмотрите. Но получается слишком криво. Чисто в теории, можно найти LoRA, которая бы сделала нужную рисовку хоть на AutismMix, но опять же писал, поискал на Civitai - в первом приближении ничего похожего не вижу. И даже такого, что бы просто приглянулось.

frilled legwear, thighhighs, так как должны быть еще и чулки.

 

@GreenEyesMan, попробуй "золотой мутон"

 

Вопрос в топике глупый, вам вообще не кажется ли, что речь идет не о работе, а об том самом, над чем думает мировое закулисье: народу че-то многовато. Перенаселение ето проблема.

 

Приветствую!
Возникли вопросы.
Появилась идея убрать немного рутины в работе. Нужна нейросетка, желательно локальная, для клонирования голоса (своего). Потом скормить ей текст и пусть озвучит (нет времени и места для записи очно). Пользовался ли кто таким? Что посоветуете? Какая видеокарта для этого нужна (объём памяти?)? Спасибо.

 

@DJKrolik Я тебя полюбил, я тебя научу.
Нейросети и искусственный интеллект были созданы чтобы прогрессивные ванильные мальчики делали кавайные и всякие ништячные картинки.
Всё.

 

@Dar_Morar, Есть такая нейросеть.

И не одна. Вот список с обзором:
Нейросети для клонирования и перевода голоса. Сравнение: Бесплатный XTTS против HeyGen — НейроProfit на vc.ru

То что слышал сам - весьма неплохо. Но нельзя сказать, что передает голос на все сто процентов.

---
@DJKrolik, Такие заявления пахнут теорией заговора.

Физический труд нейросети не заменят. А когда у тебя на одну шахтерскую вакансию три сотни человек - им даже лопаты не надо выдавать. Сами все голыми руками выкопают. Шутка.