2 голосов
The Experience Machine
Прямо такой поиск на лету, чистая импровизация, как будто пробует какой-то ход, бросает, пробует новый. Поэтому каша на выходе.
Нам как слушателям это не оч. А музыкантам удобно. Можно черпать идеи, вдохновляться, развивать во что гораздо большее и уникальное, или дополнять свои готовые идеи. Может, будет бум новых альбомов) Я бы тоже так делал, но успел выпустить альбом за год до появления Suno, а сейчас времени нет на музыку.
Сообщение изменено: terminalX (11 июля 2024 - 05:30)
The Experience Machine
Эксклюзив: OpenAI работает над новой технологией рассуждений под кодовым названием ‘Strawberry’
12 июля - Производитель ChatGPT OpenAI работает над новым подходом к своим моделям искусственного интеллекта в проекте под кодовым названием “Strawberry”, по словам человека, знакомого с этим вопросом, и внутренней документации, с которой ознакомилось Reuters.Проект, подробности которого ранее не сообщались, представляет собой гонку стартапов, поддерживаемых Microsoft, чтобы показать, что предлагаемые модели способны предоставлять расширенные возможности рассуждений.Команды внутри OpenAI работают над Strawberry, согласно копии недавнего внутреннего документа OpenAI, с которым Reuters ознакомилось в мае. Reuters не смогло установить точную дату выхода документа, в котором подробно описывается план того, как OpenAI намеревается использовать Strawberry для проведения исследований. Источник сообщил Reuters, что план находится в стадии разработки. Информационное агентство не смогло установить, насколько Strawberry близка к тому, чтобы стать общедоступной.Как работает Strawberry, строго держится в секрете даже внутри OpenAI, сказал источник.В документе описывается проект, в котором используются модели Strawberry с целью позволить ИИ компании не просто генерировать ответы на запросы, но планировать достаточно заранее, чтобы автономно и надежно перемещаться в Интернете для выполнения того, что OpenAI называет “глубокими исследованиями”, согласно источнику.Это то, что до настоящего времени ускользало от моделей искусственного интеллекта, согласно интервью с более чем дюжиной исследователей искусственного интеллекта.
Отвечая на вопрос о Strawberry и деталях, о которых сообщается в этой статье, представитель компании OpenAI заявил в своем заявлении: “Мы хотим, чтобы наши модели искусственного интеллекта видели и понимали мир так же, как мы. Непрерывные исследования новых возможностей искусственного интеллекта - обычная практика в отрасли, и мы разделяем уверенность в том, что со временем эти системы будут совершенствовать свои рассуждения ”.Пресс-секретарь напрямую не отвечал на вопросы о Strawberry.Проект Strawberry, ранее известный как Q *, о котором Reuters сообщило в прошлом году, уже был расценен внутри компании как прорыв.Два источника рассказали о просмотре ранее в этом году демонстрационных материалов, которые, по словам сотрудников OpenAI, были Q*, способных отвечать на сложные научные и математические вопросы, недоступные современным коммерчески доступным моделям.Во вторник на внутреннем общем собрании OpenAI провела демонстрацию исследовательского проекта, который, по ее утверждению, обладает новыми навыками рассуждения, подобными человеческим, согласно Bloomberg. Представитель OpenAI подтвердил встречу, но отказался сообщить подробности о содержании. Reuters не смог определить, был ли продемонстрированный проект Strawberry.OpenAI надеется, что инновация значительно улучшит возможности рассуждений ее моделей искусственного интеллекта, сказал человек, знакомый с ней, добавив, что Strawberry использует специализированный способ обработки модели искусственного интеллекта после того, как она была предварительно обучена на очень больших наборах данных.Исследователи, опрошенные Reuters, говорят, что рассуждения являются ключом к достижению ИИ интеллекта человеческого или сверхчеловеческого уровня.В то время как большие языковые модели уже могут обобщать объемные тексты и сочинять элегантную прозу гораздо быстрее, чем любой человек, технология часто не справляется с проблемами здравого смысла, решения которых людям кажутся интуитивно понятными, такими как распознавание логических ошибок и игра в крестики-нолики. Когда модель сталкивается с такого рода проблемами, она часто “галлюцинирует” поддельной информацией.Исследователи искусственного интеллекта, опрошенные Reuters, в целом согласны с тем, что рассуждения в контексте искусственного интеллекта предполагают формирование модели, которая позволяет ИИ планировать заранее, отражать, как функционирует физический мир, и надежно решать сложные многоступенчатые задачи.Улучшение рассуждений в моделях искусственного интеллекта рассматривается как ключ к раскрытию способности моделей делать все - от совершения крупных научных открытий до планирования и создания новых программных приложений.Генеральный директор OpenAI Сэм Альтман заявил ранее в этом году, что в ИИ “наиболее важные области прогресса будут связаны со способностью рассуждать”.Другие компании, такие как Google и Microsoft, также экспериментируют с различными методами улучшения рассуждений в моделях искусственного интеллекта, как и большинство академических лабораторий, проводящих исследования в области искусственного интеллекта. Однако исследователи расходятся во мнениях относительно того, способны ли большие языковые модели (LLM) включать идеи и долгосрочное планирование в процесс прогнозирования. Например, один из пионеров современного искусственного интеллекта Ян Лекун, часто говорил, что LLM не способны рассуждать по-человечески.
ПРОБЛЕМЫ ИИStrawberry является ключевым компонентом плана OpenAI по преодолению этих проблем, сказал источник, знакомый с ситуацией. В документе, который увидел Reuters, описывается, что Strawberry стремится сделать возможным, но не описывется, как именно.В последние месяцы компания в частном порядке давала понять разработчикам и другим сторонним организациям, что находится на пороге выпуска технологии со значительно более продвинутыми возможностями рассуждений, по словам четырех человек, которые слышали заявления компании. Они отказались назвать свои имена, поскольку не уполномочены говорить о личных делах.Strawberry включает в себя специализированный способ того, что известно как “постобучение” генеративных моделей искусственного интеллекта OpenAI, или адаптацию базовых моделей для оттачивания их производительности определенными способами после того, как они уже были “обучены” на массивах обобщенных данных, сказал один из источников.Этап разработки модели после обучения включает в себя такие методы, как “тонкая настройка”, процесс, используемый сегодня почти во всех языковых моделях и имеющий множество разновидностей, например, когда люди дают обратную связь модели на основе ее ответов и снабжают ее примерами хороших и плохих ответов.Strawberry имеет сходство с методом, разработанным в Стэнфорде в 2022 году под названием "Рассуждающий-самоучка” или “STaR”, сообщил один из осведомленных источников.STaR позволяет моделям искусственного интеллекта “самонастраиваться” на более высокие уровни интеллекта посредством итеративного создания собственных обучающих данных и теоретически может быть использована для того, чтобы языковые модели превзошли уровень интеллекта человека, сообщил Reuters один из ее создателей, профессор Стэнфорда Ноа Гудман.“Я думаю, что это одновременно захватывающе и пугающе ... если дела продолжат развиваться в этом направлении, нам, людям, есть о чем серьезно подумать”, - сказал Гудман. Гудман не связан с OpenAI и не знаком с Strawberry.Среди возможностей, на которые OpenAI нацеливает Strawberry, - выполнение долгосрочных задач (LHT), говорится в документе, имея в виду сложные задачи, которые требуют от модели заблаговременного планирования и выполнения серии действий в течение длительного периода времени, пояснил первый источник.Для этого OpenAI создает, обучает и оценивает модели на основе того, что компания называет набором данных “глубокого исследования”, согласно внутренней документации OpenAI. Агентство Reuters не смогло определить, что содержится в этом наборе данных и насколько длительный период будет означать.OpenAI специально хочет, чтобы ее модели использовали эти возможности для проведения исследований путем автономного просмотра веб-страниц с помощью ”CUA", или агента, использующего компьютер, который может предпринимать действия на основе своих выводов, согласно документу и одному из источников. OpenAI также планирует протестировать свои возможности при выполнении работы инженерами по программному обеспечению и машинному обучению.
Сообщение изменено: terminalX (13 июля 2024 - 09:56)
The Experience Machine
Обновление к статье, которая в предыдущем посте.
Два источника рассказали, что в начале этого года они посмотрели, по словам сотрудников OpenAI, демонстрационные версии Q*, способные отвечать на сложные научные и математические вопросы, недоступные сегодняшним коммерчески доступным моделям.Другой источник, проинформированный по этому вопросу, сообщил, что OpenAI провел внутреннее тестирование ИИ, которое набрало более 90% на наборе данных MATH, эталоне математических задач чемпионата. Reuters не смог определить, был ли это проект «Strawberry».
Тем временем в поисковой системе, над которой работает OpenAI появилась модель Scallion со "strawberry" в строке. Значит, инфа не на пустом месте.
The Experience Machine
Когда в GPT-4o заканчивался бесплатный лимит запросов (10-20 каждые 3 часа), он автоматически переключался на GPT-3.5. Но с сегодняшнего дня GPT-3.5 не будет. Вместо него теперь переключается на GPT-4o Mini — новая экономная модель. Такая же быстрая, как GPT-3.5, но намного умнее и мультимодальная, хотя пока не все функции доступны. По основным тестам превосходит изначальную GPT-4, а в математике почти на топовом уровне. Короче, можно считать, что ChatGPT на данный момент стал почти полностью бесплатным.
The Experience Machine
The Experience Machine
А вот этот зверский тест не проходит. Но его через раз проходят даже самые топовые модели вроде нового Клода. Видимо, из-за токенизации текста. Они проходят правильно, если попросить решить пошагово - тогда они используют Python или просто расписывают буквы по пунктам.
Через час.
Сообщение изменено: terminalX (19 июля 2024 - 12:03)
The Experience Machine
Во как !
Семён, в телеграме вообще непонятно, что используют. Сомневаюсь, что они покупают API. Обычно подключают каких-то совсем бесплатных ботов и называют ChatGPT. Есть же оф. сайт. https://chatgpt.com Вам даже VРN не нужен. Хотя если нужна память, придётся через VРN, она пока доступна только для Штатов, насколько знаю.
Сообщение изменено: terminalX (19 июля 2024 - 11:29)
The Experience Machine
В рейтинге Lmsys GPT-4o mini обошел Клода 3 Опуса. И вышел на 4 место.
Как быстро всё движется. Еще 4 месяца назад я радовался, что наконец могу пользоваться крутейшей моделью (Опусом). А сейчас его обошла Mini, которую сделали в качестве бесплатного дополнения к ChatGPT.
Но нужно подождать, что покажут другие тесты. У Lmsys есть свои недостатки.
Сообщение изменено: terminalX (19 июля 2024 - 05:49)
Злостный ПРОВОКАТОР!
К крипоте Мёртвого Интернета.
Ну это скорее "к чему"... а вот "куда" вопрос сложнее и интереснее, на мой взгляд.
Сообщение изменено: Kaчок (19 июля 2024 - 08:23)
The Experience Machine
а вот "куда" вопрос сложнее и интереснее, на мой взгляд.
Я скорее шутканул, так как не знаю, стоит ли всерьёз рассуждать по этому вопросу хотя бы в среднесрочной перспективе. Это ж будут сплошные спекуляции.
Сообщение изменено: terminalX (19 июля 2024 - 08:46)
The Experience Machine
Научники из OpenAI так представляют себе следующие этапы.
1. Чатботы с хорошими языковыми способностями. Текущий уровень.
2. Рассуждающий ИИ, решающий проблемы на человеческом уровне. Способный "глубоко исследовать" по интернету. Утверждают, что уже подобрались к этому уровню. Видимо, "Strawberry" об этом.
3. Агенты. ИИ, выполняющий за человека сложную и многоэтапную последовательность действий.
4. Инноваторы. Помогающие изобретать новое.
5. ИИ, способный выполнять работу целой организации. Видимо это и есть уровень AGI или что-то близкое.
Сообщение изменено: terminalX (19 июля 2024 - 09:19)
Злостный ПРОВОКАТОР!
A-I-llusion is a project created and produced by A.I.. The band's music combines the high-energy, fast-paced elements of power metal with the grandiose, cinematic aspects of symphonic metal. His compositions feature epic narratives, often inspired by mythology, fantasy and science fiction, and provide an immersive listening experience.
Сообщение изменено: Kaчок (21 июля 2024 - 01:56)
The Experience Machine
OpenAI начали публиковать результаты своего эксперимента по выплате ББД (безусловного базового дохода) малоимущим людям. В течение трех лет платили 1000 человекам по 1000 долларов в месяц. А также была контрольная группа из 2000 человек, которым платили по 50 долларов за участие. Это самый большой эксперимент по ББД из всех, что уже проводились.
https://www.openrese...ab.org/findings
Если вкратце, ничего плохого с ними не случилось. Стали меньше пить и меньше употреблять обезболивающих. Стали работать немного меньше — в среднем на 1,5 часа в неделю меньше. Немного улучшилось психическое здоровья из-за снижения стресса, но пишут, что постепенно этот эффект снизился. Стали чуть больше покупать продуктов и тратить денег на здравоохранение и стоматологию. Увеличился горизонт планирования — многие захотели получить высшее образование, заняться бизнесом, сменить дом. После эксперимента с участниками проводили интервью — довольны. Говорят, мышление начало меняться в лучшую сторону, стали больше заботиться о себе и окружающих. Но делается оговорка, что это может быть предвзятостью выборки, так как интервью проводили не рандомно, а только с согласившимися на интервью, так что ответы могут не отображать реальную статистику по участникам. Впрочем, интервью — лишь небольшое дополнение к исследованию, выводы делались не по нему.
Сообщение изменено: terminalX (22 июля 2024 - 09:25)
The Experience Machine
Сообщение изменено: terminalX (26 июля 2024 - 11:25)
The Experience Machine
Так года за 3 получим ИИ, которому можно доверять (конечно, не в абсолютном смысле, но, возможно, в лучшем из доступных рядовому интернет-пользователю).
Может, случится гораздо раньше, чем через 3 года.
Google DeepMind утверждает, что у них новые прорывные модели - AlphaProof and AlphaGeometry 2. Демис Хассабис сказал, что в ближайшее время они будут встроены в Gemini.
Революционные модели AlphaProof и AlphaGeometry 2 решают сложные математические задачи
Искусственный общий интеллект (AGI) с продвинутыми математическими рассуждениями имеет потенциал для открытия новых горизонтов в науке и технике.Мы достигли большого прогресса в создании систем ИИ, которые помогают математикам открывать новые идеи, новые алгоритмы и ответы на открытые проблемы. Но текущие системы ИИ все еще испытывают трудности с решением общих математических задач из-за ограничений в навыках рассуждения и обучающих данных.Сегодня мы представляем AlphaProof, новую систему обучения с подкреплением для формального математического рассуждения, и AlphaGeometry 2, улучшенную версию нашей системы решения геометрии. Вместе эти системы решили четыре из шести задач Международной математической олимпиады этого года (IMO), впервые достигнув того же уровня, что и серебряный призер конкурса.
The Experience Machine
Вкратце так. Strawberry более медленный и дорогой. Но он генерирует качественные синтетические данные, на которых они начали обучать свою новую модель — Orion (возможно это и будет GPT-5 или выше). Выкатить полную Strawberry сейчас они видимо не хотят, потому что конкуренты на её данных начнут обучать свои модели, а они хотят воспользоваться этими преимуществами первыми. Но лёгкую версию Strawberry хотят встроить в ChatGPT уже этой осенью. Но тут есть нюанс — OpenAI уже делали обещания, которые не выполнили в срок, так что рассчитывать на осень не стоит.
Сообщение изменено: terminalX (31 августа 2024 - 08:21)
body_by_mma
Я бы 4 и 5 поменял местами.
Работу пенсионного фонда можно и без ИИ делать одной программой, например
Странная манера "диалога". Такое впечатление, что собеседник хочет от вас взаимопонимания (и он действительно этого хочет, как нормальный собеседник) – а вы вместо взаимопонимания ищете взаимоНЕпонимание. И отсюда делаете такие бредовые ремарки.
Поясню, что на картинке:
На картинке изображены этапы "от простого – к сложному".
Чатбот > Резонёр > Агент > Инноватор > Организация (представляющая функцию Супер-инноватора) -- то есть инноватор, разрабатывающий целое научное направление.
Всё же вроде элементарно.
Как и почему в голове может возникнуть какой-то там бредовый "Пенсионный фонд"??? Разве про это идёт речь?
Как можно пытаться переставить уровни 4 и 5 местами???
Сообщение изменено: Михалы4 (31 августа 2024 - 08:28)
The Experience Machine
Опенсорсная сеточка, с которой можно поговорить на английском. Не шибко умная, зато отвечает мгновенно и выводится текст на экран. Пока ждем мультимодалку от OpenAI, можно попрактиковать разговорный инглиш.
Вот еще одна, явно поумнее. Уже тянет на нормального собеседника. В начале диалога сказал ей своё имя, и она его не забыла до конца разговора. Попросил говорить медленнее — стала говорить медленнее. Даже может на русском, но очень плохо и почти сразу переходит обратно на английский.
0 пользователей, 0 гостей, 0 скрытых
Вход
Регистрация
Наверх
