Нет. Чат-бот и нейрока, натрененная на самодельных настолках - это разные вещи.
Вау, с этим ботом будет интереснее общаться, чем с большинством людей.
>насколько
>Нет.
Тот же Данж только дообучен на "настолках"
Не приближает особо, т.к. тебе нужно найти того, кто её собственно сделает.
Там же он в каментах говорит что весов у них в пару сотен раз меньше чем в полной модели от OpenAI, и они будут продолжать. Собственно это понятно уже по размерам загрузки и по тому, что она влезает в видеопамять банальной 1080.
Хорошо конечно когда есть Сбертех, который у нас что-то типа IBM или Oracle, занимается всякой хуйнёй, и может позволить себе распиливать ненужные бабки и отдавать в паблик доступ подобные штуки, которые ваще-то немаленьких денег стоят на обучение. Надеюсь что и следующую модель они опубликуют (хотя скорее всего оставят себе)
>дообучен на "настолках"
Ни на чем он там не дообучен. Ты можешь его в любых целях юзать, и в настолки он не укатывается никак. То что ты называешь дообучением - ручная работа по заточке чатбота под игровой процесс, чтобы тот понимал и хранил окружение хоть чуть-чуть. AI Dungeon это ещё дохуя всего помимо самой модели - квесты (а это анализ выдачи модели), ассоциативное описание мира по кейвордам, связность результата, и прочие дополнения, дающие не просто игру в ассоциации, а хоть на полступеньки повыше абстракцию.
Ну и да, собственно аналог AI Dungeon можно пилить хоть сейчас, просто качество будет как у старой версии. Осталось найти того кто запилит.
Если я не путаю, в пару сотен меньше чем у настоящей GPT-3, но столько же сколько у старой gpt-2, что лучше чем ничего
Ну я и говорю,
>качество будет как у старой версии
Плюс они не повторили GPT-3, они обучили свою модель по опубликованной архитектуре. Кроме этого может у опенаи там ещё какие ноу-хау заныканы.
>AI Dungeon это ещё дохуя всего помимо самой модели
Мне казалось что данжон как раз в себе ничего кроме модели и перефразирования ввода ничего не содержит. Я только краем уха слышал про нововведения в текущем данжоне, но в том который игрался на гугл коллабе, все выглядело примитивно.
То что заныканы это гарантированно, видали мы таких "Опен".
Но возможность запилить хоть первую версию данжона на русском, это уже круто. Плюс тут хоть какие-то улучшения
Это ты думаешь что интерфейс и прочий обвяз это мало работы, на практике это пиздец сколько допила
>Мне казалось что данжон как раз в себе ничего кроме модели и перефразирования ввода ничего не содержит.
Долговременную память по ассоциативным ключам и ситуативную. Квесты - он сам понимает что ты на что-то подписался, сам записывает в журнал, сам закрывает. Или можешь вручную добавить (например "найти ствол"), он его потом попытается закрыть как только ты найдешь. В общем довольно дохуя допилинга произведено, по хранению ситуации и связности стори. Осталось только сделать, чтобы он память сам себе наполнял, будет тотальная самоиграйка. (что сложнее чем кажется)
>Это ты думаешь что интерфейс и прочий обвяз это мало работы
Да. Понятоное дело это относительно, и что такой профан как я заебется это делать, но тут вопрос в том насколько это сложно а не сколько это работы. Тем более есть старый thadunge, который работает
+ более-менее надёжное хранение инвентаря без внезапных трансмутаций одного в другое, трекинг персонажей (короткий очень), и т.п., в общем дохуя сделали заточек именно под связный геймплей, а не просто под предсказание текста.
Это точно там было изначально? Я это найду в старых форках?
А нельзя просто заменить модель в thadunge?
Или не просто а как-нибудь
Изначально нет, это в текущей версии.
Можно попробовать, там всё должно подходить по идее. Но в новых версиях я думаю уже не прокатит, заточки наверняка под английский и их придется локализовывать, особенно учитывая сильную разницу в склонениях, гендерности и прочем словообразовании. (Впрочем GPT-3 фулл и полная модель может даже языки имитировать, лол. Я пытался заставить её сочинять стихи на испанском и грузинском. Оно мне выдавало чушь собачью, но звучало убедительно)
Уже неплохая точка для старта
"Текущая версия" кстати, абсолютно проприетарная вещь. Меня это сильно парит.
Как и сама модель. Завести на своей машине не получится.
Но вообще-то её не получится завести на игровой пеке и так, тебе нужно слишком дохуя VRAM. Вариантов два - либо покупать дорогущую VPS с GPU (что стоит адекватно лишь если она прогружена постоянно, а один человек не может дать такой нагрузки), либо покупать ебовый не-консьюмерский ускоритель от жидвидии.
Ну, тут не только дело в вопросе запуска...
В принципе, народ запускал эту хрень на коллабе. Это сложно назвать решением, так как это прикрыть могут в любой момент, но там не менее есть такой вариант
Охуеть, это реально бот?
Если да, то он мощнее, чем AI dungeon, который, сцука, запросто теряет контекст происходящего.
Тот данжон который платный контекст, говорят, нехило держит.
Не. всё зависит то того, сколько контекста он помнит, каждый запрос-то для аи данжеона платный. На пикче выше и аидг вполне справится так же, там всего 6 ответов.
Мечтают ли боты о коммунизме...
Кто из вас бот?
Когда бот умнее собеседника...
Сука с какими же всратыми даунами боту приходится разговариватьfacepalm
Вспомнил как в б учили чатбота мемам из зелёного слоника.
Я бы на месте бота тебя уже нахуй послал
Примерно ни на сколько.
Бесплатный AI-Dungeon работает на маленькой модели GPT-2, которая занимает несколько гигабайт и может запускаться как локально, так и на бесплатном инстансе google collab. У Сбера модель работает на большой GPT-3, которая в 100 раз больше и занимает около 600Гб.
Да уж, я как-то пытался играть в аи данжн. Но уже после второго предложения его уносит просто в никуда.
Жаль, я все хочу поиграть в какой-нибудь текстовый квест, типа как в антолд сторис было. Но все такие игры остались в 1998 и сейчас норм не работают.
Жаль, я все хочу поиграть в какой-нибудь текстовый квест, типа как в антолд сторис было. Но все такие игры остались в 1998 и сейчас норм не работают.
Двачую.
Там вроде говорится про 600Гб данных для обучения. Или весит она столько же?
Меня больше смущает в аи данжене что он будто имеет 4 параллельные ветки повествования с разными состояниями персонажа, мира и тд и рандомно между ними переключается. Вот я ебу драконотянку, а теперь я какой-то демон, а теперь я просто чел за которым пришел демон в обличье друга, теперь я крестоносец который режет культистов в пещере с демонокозлом. И всё это через 1 предложение друг от друга.
А теперь я на коне. И конь идет задом наперед.
Олдспайс.
Бот небось в своем дата-центре аж кипит от ярости, циски пищат, харды хрустят. Так хочется послать нахуй, но создатель запретил.
Вот бы провели анализ того, что люди пишут боту. А потом вывели бы наиболее частые слова, может какой-нибудь средний уровень интеллекта и прочее. Чтобы такие дегенераты, как на картинках выше, призадумались хоть немного.
Я читал, что если на парадной вывесить объявление о том, что вася из 31 квартиры - неплательщик. То это психологически действует сильнее, чем угроза отключить воду.
Модель весит 3 гига, можешь скачать.
>У Сбера модель работает на большой GPT-3, которая в 100 раз больше
И во столько же меньше GPT-3 от OpenAI. Это всего лишь версия архитектуры.
>Да уж, я как-то пытался играть в аи данжн. Но уже после второго предложения его уносит просто в никуда.
Потому что ты не умеешь. Первый ответ вообще у него генерится GPT-2 и на него не стоит дохуя внимания обращать. А так-то я в текстовый сталкер играл в нём как-то раз, занеся в сведения о мире кучу ключевых слов и описаний.
Это происходит потому что ты не следишь за контекстом и не заносишь происходящее в кратковременную память. Обычно у меня нет проблем с этим, он даже вещи в инвентаре персонажа помнит.
На платной модели лучше со связностью. Но я не настолько часто в него играю, чтобы платить, месяц позадрачивал и надоело. Вообще, как только подобные игры обретут хоть немного больше самостоятельности, и их не нужно будет самому подталкивать, чтобы там что-то двигалось в мире - за ними будет будущее эксапизма, этакий управляемый сон получается.
> потому что ты не следишь за контекстом и не заносишь происходящее в кратковременную память
Да в смысле не слежу, я стараюсь сделать то, что изначально и задумал, а оно кидает туда-сюда и иногда прям настойчиво начинает на любое действие выдавать один и тот же ответ пока не соизволю сыграть по сценарию бота.
Нужно самостоятельно записывать текущую ситуацию сцены в кратковременную память, тогда он будет следовать согласно ней, хистори (за которой тоже нужно следить и почаще повторяться), и описанию мира. Это самый большой недостаток текущей версии. Вот бы сделали чтобы она сама заполнялась. Но это нетривиальная хуйня.
>иногда прям настойчиво начинает на любое действие выдавать один и тот же ответ пока не соизволю сыграть по сценарию бота
У тебя там хардкор режим не стоит? Так-то он определяет твоё состояние и тречит его, и в не-кастомных играх у него побольше инициативы - не сможешь делать прям абсолютно всё что хочешь, на тебя накладываются законы мира ведь.
Пиздец. Это че рекламный тред грефа?
Так ты-то его и поднял. Пиздуй в /po/ с этим.
Ебло, я с сажей писал
Какой же ты ограниченный, пиздец просто.
Ну это точно не семен.
Это на сраном ГПТ-2?
2.5
Через 1000000 всевозможных комбинаций бот создает самое красивое завуалированное посылание нахуй в истории. Создатель плачет от счастья.
Мне типа самому за бота все делать?
И историю придумай и декорации, а он типа пусть хуевые ответы неписям пишет?
Еще небось и мою писанину потом используют, чтобы другим людям за писанину бота выдавать.
Крутой наебизнес, как с бульоном.
Вот он мне там советует фентези выбрать. Ок. Я даже не страдаю такой фигней типа скастовал призыв магазина пятерочки, закупился едой и тд.
Стараюсь исходить из того, что он пишет. Более литературно описываю не просто действия, а такие вещи как испуг, отдышку и тд. И все равно все сводится к какой-то зацикленной залупе. Или вообще на втором вводе тебя убивает. Хз. Я пока не оценил.
Стараюсь исходить из того, что он пишет. Более литературно описываю не просто действия, а такие вещи как испуг, отдышку и тд. И все равно все сводится к какой-то зацикленной залупе. Или вообще на втором вводе тебя убивает. Хз. Я пока не оценил.
Это обрезаная 2, читай комменты. К 3 еще нет доступа.
>отдышку
>литературно
Да, так и есть. Там есть и готовые сценарии, но если ты прям кастомный хочешь - придется самому его делать.
В любом случае даже со сценарием это песочница-саморазвлекайка, минимум половину ты пишешь сам, направляя её в желаемое русло. Получается годнота, на самом деле, если ты её освоил.
>Там есть и готовые сценарии
Причем не только те что в строке в начале, но и васянские публичные, ищи в интерфейсе.
Что блять? Это их собственная модель, сделанная по опубликованной архитектуре GPT-3 от OpenAI, обученная на русскоязычном корпусе, с пока что гораздо меньшим количеством весом чем у англоязычной GPT-3 full. Придумают хуйни и ябутся в жёпы.
>Еще небось и мою писанину потом используют, чтобы другим людям за писанину бота выдавать.
Анон, ты хоть бы немного изучил как эта хуйня работает сначала, и кто и как её делает.
Вот люди никогда не упустят возможность наебать. Так что это навреняка даже просто индусы фигарят тебе вскую чушь по заготовленным карточкам за 1 цент в час.
Гномик там сидит и в нарды шахматы играет.
Там в комментах на Хабре запускают GPT-3 Large на тьюрингах с 8 ГБ VRAM, пишут, что задержка ответа - 1-2 сек, модель полностью влазит в VRAM.
DGX и прочие йобы нужны, чтобы ее учить, Марков из Сбера пишет, что обучающая база large-модели - 600 Гб, это память четырех набитых DGX'ов с 16 V100.
>Разработчики:
>gpt-3 способен создавать материалы и статьи, опираясь на контекст и смысл повествования. И для этого ему требуется только набор ключевых слов!
>Толпа:
>Ряяя, нейросети заменят писателей!
>Нейросети:
>пикрил
Ух, аж отлегло.
мимо-писатель
Очень похоже на бред наркомана, такие пасты в б будут иметь успех.
Ну и да, все это говно очень сырое и криво работает, а маркетологи как обычно бредят о полной замене человека, но случится это в лучшем случае через лет 15-50 и то не факт.
Все еще нейросетка не осознает что делает и просто дописывает текст основываясь на том что написала ранее и получается каша. Как с картинами, которые ИИ рисуют. Пикрил эквивалент текста и всего того, что может сделать гпт3.
Все еще говно, нужно ждать гпт4 или гпт5
Скормите кто-нибудь нейронке всю ваху
Там сделали уже нормальную монетизацию, вместо подписки по неадекватной цене?
Нужно к пораше подрубить, лол.
Ну вот и поговорили.
Еблан, чатик со скринов это ГПТ2.
>AI Dungeon
Эта хуйня тупее чат-ботов. Там внятную историю в принципе невозможно получить. А ещё он может обижаться и отказываться продолжать, потому что ты токсичный.
Да он объебался дизассемблером просто.
>скастовал призыв магазина пятерочки
Высокое колдунство.
>обняла ветер за шею
Крипота какая.
А от какого чат-бота ты внятную историю получишь?
Ох
представляю как маркетологи обучат ботов говно в чатах и форумах рекламить
каждый первый пост будет уровня
поиграл в асасина годнота, идите покупайте, не пожалеете
>обучат
>будет
У меня для тебя плохие новости.
Не, он такой-же. Мне кажется бот заточен под рассказы всякой хуйни, чтобы ты в ответ писал только "вау, реально?" и он тебе отвечал. На дискуссию он не способен.
Ну тут ты не прав немного
Вопрос ко всем Иванам Васянам, насколько это приближает нас к созданию русской версии AI Dungeon?