24 декабря Архивач восстановлен после серьёзной аварии. К сожалению, значительная часть сохранённых изображений и видео была потеряна. Подробности случившегося. Мы призываем всех неравнодушных помочь нам с восстановлением утраченного контента!
Сортировка: за
Сохранен
59
17 мая 13:22
Сохранен
211
14 мая 19:01
Сохранен
48
6 мая 20:05
Сохранен
61
16 мая 11:58
Активный
36
Главный прорыв десятилетия! — Пару дней назад учёные из MIT представили революционную архитектуру глубокого обучения KAN, которая произвела фурор среди исследователей, став настоящей сенсацией. Говорят, что возможно это самый грандиозный прорыв в ИИ за последние 50 лет. Многие его окрестили, как Deep Learning 2.0 В основе всех архитектур, к которым мы привыкли, лежит многослойный перцептрон (MLP). У него есть веса и нейроны, в которых расположены функции активации. Этой парадигмой ученые пользуются с 1957 года, когда ее предложил Фрэнк Розенблатт. А что, если мы переместим функции активации на веса и сделаем из обучаемыми? Звучит как бред, но yes, we KAN. KAN (Kolmogorov-Arnold Networks) - новая парадигма, в которой исследователи реализовали перемещение активаций на «ребра» сети. Кажется, что решение взято из ниоткуда, но на самом деле тут зашита глубокая связь с математикой: в частности, с теоремами универсальной аппроксимации и аппроксимации Колмогорова-Арнольда. KAN работает намного точнее, чем MLP гораздо большего размера, и к тому же лучше интерпретируется. Авторы KAN доказали, что ему требуется во много раз меньше нейронов, чтобы достичь точности MLP. Также KAN гораздо лучше генерализует данные и лучше справляется с аппроксимацией сложных математических функций (мы увидели это на примерах), у него, можно сказать, "технический склад ума". В статье исследователи также показали, как KAN помогает решать дифференциальные уравнения и (пере)открывает законы физики и математики. Единственный минус: из-за обучаемых активаций тренится все это дело в разы дольше, чем MLP. Но это не точно, так как исследователи пока даже не пытались провести оптимизацию скорости обучения. Возможно сегодня мы наблюдаем рождение Deep Learning 2.0. Ведь такой подход меняет вообще все, от LSTM до трансформеров. Эпоха AGI теперь становится куда ближе. Тут подробнее простыми словами: https://datasecrets.ru/articles/9 Ссылка на препринт: https://arxiv.org/abs/2404.19756 Код тут: https://github.com/KindXiaoming/pykan
вчера 14:58
Сохранен
162
17 мая 14:52
Сохранен
459
23 мая 15:41
Сохранен
404
21 мая 6:54
Сохранен
47
18 мая 13:11
Сохранен
117
6 мая 14:17
Сохранен
4
4 мая 15:06
Сохранен
13
В сети завирусилась история про спасение котиков: она сведет вас с ума — Социальные сети и медиа-сервисы продолжают наполняться ИИ-контентом самого непредсказуемого содержания: новый всплеск популярности переживают видео-истории про жизнь котиков. Смотрим и оцениваем новый шедевр. Первоначально подобный контент может вызвать стойкое чувство отторжения, тем не менее, спустя всего несколько минут просмотра в тривиальный видеоряд погружаешься с головой. Каждое видео посвящено какой-то абсурдной ситуации, в которой полностью раскрывается скрытый «талант» генеративных моделей искусственного интеллекта. Вполне вероятно, что на отрисовку подобных сцен не хватило бы терпения ни одного из художников, в то время как ИИ легко переваривает любые задачи. Видеоряд представляет собой небольшое слайд-шоу, зачастую не длиннее минуты, сопровождающееся примитивным аккомпанементом, состоящим из «мяу» на все лады. На некоторых каналах истории про ИИ-котиков выходят каждый день. Интересно, что такой фантасмагорический контент пришелся по нраву пользователям — многие оставляют под видео положительные комментарии и делятся ими в социальных сетях. Так или иначе, нельзя однозначно сказать, для кого именно создаются подобные видео, ведь на неокрепшей детской психике фантазии нейросетей могут оставить непредсказуемый след, в то время как для взрослых эти произведения искусства интересны не будут. https://hi-tech.mail.ru/news/109854-na-youtube-zavirusilas-istoriya-pro-spasenie-kotik/
14 мая 17:23
Сохранен
533
30 мая 10:05

Отзывы и предложения