Lord RZ

О нейросетях наверняка лучше всего написали бы сами нейросети. И это не шутка. Но поскольку я все же не хочу пока платить за них, придется трудиться самому. Итак, что мы можем использовать сейчас и что ждет геймдев и моддинг в будущем в эпоху AI? Предисловие от автора: это вторая часть статьи, в первой мы разбирали моды и визуальную часть (графику и видео), а сейчас продолжим говорить о других направлениях: программировании, музыке и звуках, нарративе и текстах. Названий будет много, ссылок мало, если вас что-то заинтересовало, найдется оно легко. Будет много видео. Приятного чтения! P.S: А еще готовьтесь играть с нейросетью в TES! нейросети и программирование Животрепещущий вопрос: как писать код к игре, если ты очень хочешь, но не учился этому последние 10 лет? На волне моды на нейросети, разумеется, взгляд обращается к ним. Что же могут сети, которые пишут программы? Если обратиться с этим вопросом в Google, на первых страницах будут стенания кодеров, которые почувствовали угрозу своим теплым местечкам и хорошим зарплатам. А что насчет кода, который можно использовать в играх? ChatGPT, построенный на GPT3.5, делает колосальные успехи в понимании человеческого языка и кода. В прошлой части вы могли посмотреть ролик, где попытке авторов создать игру с нуля он играл роль программиста и пока справился с ней так себе. Но справился, ведь итог с некоторой коррекцией получился рабочим. Результат мог быть лучше, если бы человек умел что-то кодировать, и использовал другие сети на базе GPT разных версий, которые специализированы, встраиваются в среды и дописали бы за него половину кода. Например, DoesNotExist, поддерживающий языки С и С++. DeepMind AlphaCode, вышедшая год назад, умеет работать с ресурсами GitHub, а в соревнованиях программистов оставила позади 45% кодеров уровней джуниор и миддл. Программирует она на python и C++, а последнее открывает нам дорожку к Unreal Engine. Microsoft Copylot подсказывает код на языках JavaScript, Python, TypeScript, Ruby, Go, C#, C++.  Очень неплохой набор, согласитесь, особенно приятно, что встраивается в среду разработки от JetBrains, а у них весьма достойные решения, сильно облегчающие кодерам жизнь (попробовано). Это. разумеется, лишь самые известные и мощные проекты, и результаты их работы не безупречны и все еще требуют квалифицированного человеческого вмешательства. Тем временем, сети обучаются, эволюционируют, и вскоре смогут делать гораздо больше. Так что, полагаю, результаты улучшатся быстро, очень быстро. (Может быть, кто-нибудь подкинет сетям и Papyrus, кто знает. А то пока выйдет TES VI, Скайрим будет длиться вечность). Примут ли на работу нейросеть? Недолго музыка играла... Положим, нам удалось нахимичить себе нейрографику и нейрокод, а что насчет музыки? Ну, кажется, тут все еще веселее. Музыка, между прочим, не проще языков программирования, достаточно погрузиться хотя бы ненадолго в музтеорию, но что такое изучить новый "код", когда у тебя океан информации, а есть, спать и думать о бывшей ты не хочешь? Вот и сети о ней не думают. Они пишут и обрабатывают музыку, аудиотекст (озвучку), звуки. Проба пера от Ваганыча AudioLM от Google генерирует сказанное вами при помощи других голосов (привет, озвучка!), и делает еще много интересного. Вот примеры. Не знаю, поддерживается ли русский, или только английский. Так же Google тестирует сеть MusicLM, которая по идее должна будет генерировать музыку по запросу. Riffusion на основе уже нам известной StableDiffusion генерирует музыку по запросу. Сначала это выглядит, как спектрограмма, а затем преобразуется в звучание. Дерзайте! AIVA считается подходящей для генерации саундтреков. Можно скачать, как приложение. Правда, она совсем не бесплатная - бесплатно можно создать только 3 трека в месяц. Amper - облачная платформа, которая упрощает процесс создания саундтреков к фильмам и видеоиграм, а также создает саунддизайн в формате copyright-free. Solaris Virtual Vocalist генерирует идею вокала к вашему произведению, которую можно использовать, как референс. Это лишь несколько интересных проектов, на деле их гораздо больше, AI встраивается в разные программы и приложения, используется направо и налево для аналитической работы, так что даже если вы совсем не музыкант, получить мелодию в нужной обработке все таки можно, хотя с непривычки придется постараться. Удивитесь вместе с блогером нейросети и нарратив А что же насчет текста? Мы же должны создать сценарий, расписать его, да и вообще как-то создать множество и множество диалогов, записок, книг, помогите, спасите! Но и тут найдутся роботы, которые не прочь подумать за вас. Разве что результат может быть не лучше знаменитых корованов. Сейчас считается, что сети не могут создать осмысленное произведение большого объема, и заниматься чем-то лучше копирайтинга, сухого и трескучего. Но прогресс стоять на месте долго не будет. Ведь сеть вполне может заменить миллионы обезьян, которые, по поверью, просто долбая по клавишам, однажды напишут "Войну и мир". Посмотрим, что интересного сети могут нам предложить. Вот парочка примеров: ruGPT3 в соавторстве с писателем Павлом Пепперштейном написал сборник рассказов. Нейросеть училась на произведениях русских классиков и самого автора, тем не менее, стиль оказался не похож. Читателю самому предлагается угадать, какие рассказы писал человек, а какие - сеть. RYTR пишет на 36 языках, включая русский. В основе опять же GPT3. Пара слов, и абзац для рассылки или статьи готов. С виду. Балабоба от Яндекс пытается в соавторство, продолжая ваш текст. Сказочка про пса и кота, которую я получил в ответ на запрос "Жили-были кот и пёс" вышла вполне разумной. Пока что это самое слабое место роботов: осмысленная литература вряд ли когда-то обойдется без автора-человека. Впрочем, это тема для отдельного рассуждения. А пока сотрудничество робота GPT3 и авторов достигло апогея, когда чат был встроен в игру Mount and Blade: Bannerlord, и NPC внезапно поумнели и научились болтать, выходя за рамки скриптовых диалогов. Вот это было круто и вполне имеет право на жизнь в будущем.  Нейросеть училась на произведениях русской литературы и Павла Пепперштейна Подробнее на РБК: https://trends.rbc.ru/trends/industry/628e17919a79473e6b96d582 ruGPT-3 Подробнее на РБК: https://trends.rbc.ru/trends/industry/628e17919a79473e6b96d582 ruGPT-3 Подробнее на РБК: https://trends.rbc.ru/trends/industry/628e17919a79473e6b96d582 GPT3 в игре играем с нейросетью в tes и не только Дополнение про нарратив и крутая новость из отдельного мира текстовых ролевок. Один умный человек с ником @Cooliobro скормил лор вселенной Elder Scrolls нейросети Character AI, и теперь вы можете поиграть с ней в текстовую ролевую игру, на ходу получая задания, придумывая сюжет и реакции. Ваш покорный слуга опробовал эту замечательную игру. Я нарочно проверил, как этот AI понимает перевод прямиком из GoogleTranslate, чтобы любой из вас мог играть, не тревожась. Замечательно понимает, у него есть мозги. Вот такая история стартовала у меня с роботом: Часть 1 Часть 2 Если коротко, я по условиям бота прочухался на дороге рядом с Фолкритом, раздетый и ограбленный. Неподалеку обнаружился некий человек, который не проявлял враждебности. Я окликнул его, и он мне посочувствовал, спросил, что случилось. Ну конечно, меня раздела ведьма, что бы это еще могло быть. Добрый AI предложил свою помощь, я предложил награду, и мы уже друзьями отправились на поиски ведьмы. Вот сейчас кто-то огребет! Финал вступления. Вы понимаете, в чем дело? На ходу нейросеть создает и предлагает вам приключение, сценарий, выступая как гейммастер! Хотите мини-сюжет для квеста, а дело не идет? Так вот же он! Как раз такие небольшие шаги роботы освоили уже прилично. На самом сайте нейросети множество текстовых проектов. Робот понимает русский язык, но отвечает все равно по-английски, однако если использовать браузерные переводчики, все будет выглядеть супер. Чтобы все сохранялось, зарегистрируйтесь. ИГРАТЬ! подводя итоги Краткое резюме: работу роботы пока что ни у кого не отберут, соавторами и помощниками могут быть прямо сейчас, искусственный интеллект силен, но пока еще глуповат, однако, учится, и в будущем будет отличным подспорьем в личном творчестве, включая геймдев. Остро стоят вопросы конкуренции и главное - авторских прав, ведь ИИ пока заимствует все у людей. Но главное, что AI снижает порог вхождения в ту сферу, что мы считаем сложной и непостижимой - творчество, искусство, так что в итоге любой сможет найти средство выражения своих мыслей, идей и чувств в той форме, которая его устроит даже при отстуствии не то что такой выдумки, как талант, но и вероятных склонностей. Придумывайте свои игры, корованщики, скоро вы сможете их написать. Это мое казуальное мнение, а вот мнение более профессионального товарища. О развитии ИИ P.S: Захватят мир роботы или нет? Что думаете, кожаные мешки?

О нейросетях наверняка лучше всего написали бы сами нейросети. И это не шутка. Но поскольку я все же не хочу пока платить за них, придется трудиться самому. Итак, что мы можем использовать сейчас и что ждет геймдев и моддинг в будущем в эпоху AI? Предисловие от автора: названий будет много, ссылок мало, если вас что-то заинтересовало, найдется оно легко. Очень не хочется забивать текст горой линков, да и проверять, какие из них доступны сейчас у нас, а какие нет. Прошу прощения так же, что не разжевываю элементарного, текст длинный, разбавлять его водой в духе "что такое нейросеть" не хочется. Будет много видео. Приятного чтения! нейромоддинг на марше Начну с нашей любимой темы: собственно, моддинга. Ведь мы, можно сказать, собрались тут изначально ради модов. А для них нейросеть ElevenLabs AI успешно пишет озвучку: Озвучка Драконорожденного для Skyrim SE (англ.) Квест о Бабе Яге с генерированной озвучкой (текст русский, озвучка англ.) Озвучка Дагот Ура для Morrowind (англ.) На самом деле это вовсе не первая попытка использовать в моддинге силу искусственного интеллекта. Мод Morrowind Enchanced Texures был сделан при помощи самообучающейся системы ESRGAN и получил звание лучшего графического мода еще в 2018 году. Это только то, что касается модов для нашей горячо любимой TES, остальные игры так же улучшали при помощи AI, это, например, неофициальный ремастер Max Payne, Doom 2 и Resident Evil 4. Использовались инструменты Nvidia Gameworks и AI Gigapixel от Topaz Lab. Алгоритм CycleGAN был использован для преобразования стиля одной игры в другую при помощи машинного обучения. Автор, работающий для DeepGamingAI, считает, что подобная технология очень полезна для будущего моддинга. Нейросеть в реальном времени стилизует игру под другую игру Сами разработчики не отстают: ремастер Mass Effect Legendary Edition был сделан при помощи апскейлинга текстур, произведенного AI. Более тридцати тысяч текстур увеличены примерно в четыре раза по сравнению с исходниками. Разумеется, не без вмешательства людей: некоторые шейдеры AI обработать не мог из-за слишком плохого качества в начале, и их пришлось переписывать. Дело было в 21 году, а сейчас мир захлестнут волной нейросетей, и я предлагаю вам подумать вот о чем: а далеко ли до момента, когда AI начнет самостоятельно делать вполне качественные и крепкие игры (и моды. конечно)? Не без помощи людей, разумеется, ведь сети отвечают на запросы "кожаных мешков", и самостоятельно подобных желаний не проявляют. Пока. может ли ai создать игру? Никто, думаю, не удивится, что попытки создать игру, нажав на кнопочку "создать игру", будут сопровождать эксплуатацию нейросетей, пока у них не начнет получаться. И разумеется, такие попытки уже были. Финн Юсси-Петтери Кемппайнен пытается сделать видеоигру, используя нейросети Midjourney и Stable Diffusion. Они генерируют изображения по текстовому описанию. База для игры создается при помощи Blender и Unity, а вот концепты, локации, текстуры и даже изображения персонажей генерирует AI. Для удобства такого сотрудничества Кемппайнен выбрал формат 2,5D. Плоды совместного творчества. Но у финна опыт в создании игр порядка 20 лет. Вопрос, что будет, если корованы погонять захочет простой юзер или человек с небольшим опытом? Что же, вот видео на русском языке, где автор пытается создать минимальнейшую игрушку на Roblox, используя мощный интеллект сети ChatGPT. Этой сети чуть ли не прочат судьбу убийцы Google, так как она выдает в результате поиска нормальную информацию, а не искусственно поднятые алгоритмами вверх бессмысленные сотни рекламных сайтов и копирайтерских текстов. Иными словами, найти, как именно написать скрипт, она, по идее, должна. Но пока что результат не очень. Робот, сделай мне игру! Уверен, рано или поздно сделать игру запросто будет делом недолгой возни. Но пока что рано говорить, что нейросети оставят всех без работы. Предлагаю пока что рассмотреть, что же мы можем сделать для игр в нейросетях? нейросети работают с графикой (2D, 3D, видео) Не умеете рисовать, моделировать и делать видео? Какая ерунда, скоро везде появятся знаменитые кнопочки "сделайте мне красиво", предмет стеба преподов графики над новичками. Стеб закончен! Кроме полезнейших профессиональных инструментов от NVIDIA и TopazLab, сетей множество, самую известную из них, Midjorney, я уже упомянул выше. Ее щупают и разработчики. Эрик Беллефьюлл - арт-директор Ubisoft Montréal - побаловался с сетью, чтобы получить изображения кораблей в стиле стимпанк, и вот что у него вышло: Пока этот чертеж лишь концепт Но концепт уже неплохой Пока с этими чертежами ничего не сделаешь, они больше напоминают бессмысленное нагромождение деталей, но в этом есть какая-то чуждая красота. Главное для нейросетей - их способность обучаться с накоплением опыта. Быть может, однажды Эрик получит в результате роскошные и достойные чертежи. С момента создания DALL-E в 2021 году (а я напомню, что это одна из первых сетей, генерирующих изображение по описанию), AI расплодился как грибы после дождя. Нейросети: делают из портретов людей персонажа аниме: QQ Small World, скажем. рисуют картины, которые вы можете использовать, как арт: StarreAI, Pixray, Hotpot, ruDALL-E на основе самого первого генератора, обученного русскому языку,  совсем уж чудящий абстрактный Dream на базе сетей Google и так далее. генерируют несуществующих людей, портреты, которые можно без опаски использовать в качестве референсов для персонажей: This Person Does Not Exist, (использующий разработанный компанией Nvidia алгоритм StyleGAN), Artbreeder (на базе StyleGAN и BigGAN) и т.п. генерируют фотореалистичное изображение из наброска: GauGAN от Nvidia. улучшают изображение: SuperResolution. делают из фотографий портреты: Lensa на основе Stable Diffusion. выделяют и удаляют объекты на фото: Instance segmentation, а еще смешной AI Replace My Ex, заменяющий бывшего на старом фото каким-нибудь левым объектом. преобразуют и стилизуют изображение: Style Transfer, Pix to Pix, Image-to-image, алгоритм CycleGAN Это лишь несколько примеров. Разработчики игр и программ могут применять графические таланты нейросетей достаточно широко. Компания Adobe уже встроила сетку в Photoshop и Substance, улучшая алгоритмы обработки и выделения объектов, работы с тенями и текстурами. Куда же без нее Пощупайте и подружку Далеко шагнули и видеотехнологии: от Deepfake, позволяющей имитировать на видео реальных людей (вы можете, скажем, понаблюдать за приключениями президентов в таких роликах на YouTube), до умения исправлять старые ролики, как это делают сети на основе уже упомянутой технологии GAN, например, DeepHD от Яндекса. Яндекс так же научился переводить видео с английского и генерировать субтитры, так что вы наконец можете расшифровать англоязычное видео, которое не очень понимаете, да еще услышать его в русской озвучке. Проверял лично, очень здорово было смотреть старые ролики заново. Сейчас добавлена и возможность синхронного перевода для стримов. Нужен Яндекс.Браузер. Сеть Waifu2x в десктопной версии увеличит разрешение. подавит шум и улучшит резкость видео. Доступна в России. Так же можно упомянуть куда более продвинутые Wisecut, Pixop, SuperSloMo, DVDFab Enlarger AI. Но самое интересное - генерация видео по описанию. Это должна суметь находящаяся в разработке у Meta (запрещена в РФ) сеть Make A Video, которая пока что выдает нечто не очень внятное. Пока что китайская CogVideo справляется куда лучше с реалистичностью, но генерирует коротенькие маленькие ролики.  И есть надежда на Imagen Video от комании Google, которая изо всех сил старается не отстать в разработке от остальных. Немного подождем, и генерировать видео для игр собственной разработки будет уже намного проще. GDFLab video upscaler увеличивает разрешение и размер видео И конечно же, сети помогают в генерации 3D-моделей. Эти модели суть сетка, координаты точек, описывающие форму объекта, так что проблем с этим не должно было возникнуть - и не возникло. Как были программы-генераторы моделей, так и остались, зачем же тогда сети? Конечно же, для генерации по описанию или плоской картинке. Те же авторы DALL-E создали сеть POINT-E, которая сначала генерирует изображение по описанию, а потом преобразует в трехмерный объект. Nvidia в соавторстве со Стэнфордом разработали сеть EG3D, генерирующую точные модели с двухмерного изображения, как и PiFUHD, Dream Fusion AI и так далее, список пополняется. Именно здесь никаких особых проблем я не жду, разве что на первых порах все придется доделывать за тупыми роботами. Но ведь это дело времени. Есть и сети, которые помогают моделлерам по-другому. Скажем, занятная PoseNet анализирует движение человека, его суставы, скелет и ключевые точки, облегчая задачу этого анализа аниматорам. Сеть Vibe при этом еще генерирует точный силуэт. PRNet выполняет построение модели лица после сканирования. А нейронная сеть Occupancy Network не только генерирует объекты, но и улучшает существующие модели (правда, пока что простые). Как уже стало ясно из этого материала, с графикой не будет особых заморочек. Если вы пожелаете делать концепты для игры - вы их сделаете. Портреты реалистичных персонажей не будут вызывать стеб, как над BioWare, где взяли первое попавшееся лицо из Google для проекта Andromeda. Текстуры, модели - все это в недалеком будущем почти перестанет вызывать заторы в работе. Но это еще не все, что нужно для игры. Так что продолжение следует: в следующей части мы разберемся с музыкой, текстами и программированием! Поделитесь своим опытом столкновения с AI и нейросетями. Удалось сделать что-нибудь интересное?

Две из самых ожидаемых игр 2023 года уже доступны! Hogwarts Legacy захватывает мир, а моддинг к ней уже стартовал! Atomic Heart за дни до релиза утекла в сеть, а сегодня официальный день ее выхода. Hogwarts Legacy Хогвартс. Наследие (под этим названием официально она издается в СНГ) вышла 10 февраля 2023 года, и спустя время можно с уверенностью сказать, что успех проекта можно назвать оглушительным. Напомним, это игра по вселенной Гарри Поттера, действие игры происходит в конце XIX века и повествует о студентах Хогвартса, школы магов. Жанр игры - однопользовательская экшн-РПГ. Несколько миллионов копий расхватали как горячие пирожки, при этом видеоигра понравилась 95% пользователей. Несмотря на то, что игра недоступна в России, это никого не останавливает: народ находит способы обойти запреты и на YouTube полно обзоров игры на русском языке. Куда большим барьером, чем эти санкции, становятся системные требования к этому чуду. Даже минимальные требования включают процессор не ниже Intel Core i5-6600 (3,3 ГГц) или AMD Ryzen 5 1400 (3,2 ГГц) и 16 гб оперативной памяти. Этого следовало ожидать, увы и ах, чем дальше, тем выше будут требования, тем более, что прогресс в технологиях вдохновляет создателей игр на усложнение своих творений. Пока пираты без всякого стеснения щупают (и кажется, небезуспешно) защиту игры, на Nexus выкладывают первые моды. Не без небольшой драмы - одним из самых популярных модов стала возможность сделать кожу персонажа светлее, чем самый светлый оригинальный вариант. Это вызвало было возмущение, но оно стихло: тем же модом стало возможно сделать и самую темную кожу еще темнее. Многие моды содержат фиксы различных багов. Что касается русского языка, студия GamesVoice, специализация которой — профессиональная локализация компьютерных игр, собрала необходимые средства для локализации и озвучки игры. Официальная обложка игры atomic heart Сегодня, 21 февраля, состоялся выход ожидаемой игры в сеттинге футуристического СССР - Атомное сердце. Игра сочетает шанры шутера и экшн-РПГ. Разработана российским подразделением кипрской студии Mundfish. Играть вы будете за Сергея Нечаева — майора, который прибыл на «Предприятие № 3826».  Там восстали роботы, которые, разумеется, хотят уничтожить кожаных ублюдков, желательно всех, и прибрать планету к железным рукам. Придется вам разгребать все проблемы с чудесами советской инженерной мысли. Системные требования этой игры на минимуме гораздо скромнее, чем HL: всего 8 Гб оперативки, процессоры Intel Core i5-2500 или AMD Ryzen 3 1200, и видеокарта GeForce GTX 960 или Radeon R9 380. Интересный факт: на канале студии вы можете познакомиться с навыками игры, рассказы о них сделаны в виде мультфильмов. Эта видеоигра понравилась 91% пользователей. Приобрести ее можно в Steam, а в России вы можете купить игру в VK Play Трейлер к выходу игры Несмотря на противоречивые оценки, в момент выхода в Steam игра быстро вышла на первое место по продажам, обогнав даже Гарри Поттера. Оценка, правда, на текущий момент, так что достижение невеликое. Но все же. Будет интересно посмотреть на итоговые результаты через недельку. Что же касается модов, то уже сегодня вы можете найти на страницах обсуждения Steam кое-какие наметки. 

Боянчик, но такой милый