Bing Edwards / Apple
В сряда базиран в Сан Франциско разработчик на име Liu Liu стартира Draw Things: The AI Generationбезплатно приложение, достъпно в App Store, което позволява на собствениците на iPhone да стартират приложения стабилно разпространение AI генератор на изображения. Въведете описание и приложението ще генерира изображение в рамките на няколко минути. Това е забележителна стъпка към предоставянето на фотосинтеза на по-широка аудитория – с добавената поверителност на възпроизвеждането му на вашите собствени устройства.
Представен през август, Stable Diffusion (SD) е модел за генериране на изображения с изкуствен интелект, който създава нови изображения от текстови описания (наречени „искове“). Хората обикновено управляват SD чрез реклами DreamStudio Услуга на отдалечено облачно устройство с наето време за акаунт, или локално на компютър Използване на специално приложение с отворен код. Когато работи локално, SD изисква доста мощен графичен процесор за бързо създаване на изображения, но някои разработчици благодетелят Моделът, който работи на по-стари графични процесори с намалена VRAM (ако нямате нищо против да изчакате по-дълго, за да видите резултатите).
По същата линия Liu Liu успя да подобри Stable Diffusion, за да работи на iPhone, което е доста труден процес, който разработчикът е направил. Описано в публикация в блог. „Основното предизвикателство е да накарате приложението да работи на iPhone 6 GB RAM устройства“, пише Liu Liu. „6 GB звучи много, но iOS ще започне да убива приложението ви, ако използвате повече от 2,8 GB на устройство с 6 GB и повече от 2 GB на устройство с 4 GB.“
Когато за първи път стартирате Draw Things, приложението изтегля няколко необходими файла — включително шаблона Stable Diffusion 1.4 — на вашия iPhone. За да го използвате, въведете подкана в горната част на екрана, след което щракнете върху Създаване. Между създаването на изображение докоснете числото в горната централна част на екрана, за да рандомизирате семето, число, което частично ръководи създаването на изображение.
Бинг Едуардс
На моя iPhone 11 Pro ми отне малко повече от две минути, за да създам снимка с размери 384 x 384. По-бързо е на iPhone 14 Pro, според Liu Liu, със снимка, създадена за около минута. Така или иначе, SD изисква много изчисления. След последователни поколения нашият iPhone стана забележително топъл на допир.
Струва си да се отбележи, че при използване на стабилна дифузия изображенията 384 x 384 често дават лоши резултати и са с относително ниска детайлност, тъй като създателите на SD са обучили модела с изображение 512 x 512. Когато се опитвате да генерирате изображение 512 x 512 на нашия iPhone 11 Pro, получихме предупреждение и въпреки това проследихме, но приложението се срина до черен екран.
В допълнение към редовните задължения за създаване на снимки, Draw Things също поддържа чертане, което ви позволява да замените част от изображение с генерирани от AI изображения и да качите допълнителни шаблони за фотомонтаж, като например неоторизираниМодерният Дисни се разпространява„Поддържа се модел (който генерира герои, подобни на Дисни) и анимационен филм“Разпространение на Waifu(Тествахме го и е възможно да генерираме NSFW неща с приложението, така че бъдете внимателни.) Включването на тази възможност означава, че Draw Things може да не остане дълго в App Store, ако стане популярно, тъй като съдържанието, което генерира, може да наруши условията на Apple на обслужване.
Каквато и да е съдбата му, Draw Things изглежда като значително доказателство за концепцията, показващо, че Stable Diffusion може да работи естествено на iPhone, дори и да е бавно. Ако приложението продължава – може би с някои филтри или настройки – Liu Liu описва място за потенциални бъдещи подобрения, които могат да ускорят нещата: „Може би съм оставил 50% производителност на масата.“
Това не е първият път, когато Stable Diffusion се играе на iPhone. През септември разработчикът Мат Уолър избяга Stable Diffusion първоначално на неговия iPhone XS, но не предостави приложението App Store, което позволява на другите да повторят това постижение. Вероятно ще видим повече оригинален AI синтез на изображения на смартфони, тъй като мощността на изчислителния хардуер продължава да нараства.