Компанія xAI Ілона Маска, яка займається розробкою штучного інтелекту, анонсувала запуск Grok 3 у понеділок, 17 лютого. За даними компанії, , ця остання версія чат-бота, якого Маск описує як «страшенно розумний», є значним кроком вперед, покращуючи міркування, обчислювальну потужність та адаптивність.
xAI повідомляє, що розробка Grok 3 була прискореною завдяки суперкомп’ютеру Colossus, який був побудований всього за вісім місяців. Система, що працює на 100 000 графічних процесорів Nvidia H100, надала 200 млн GPU-годин для навчання — в десять разів більше, ніж її попередник, Grok 2. Цей значний приріст обчислювальних ресурсів допоміг Grok 3 ефективніше обробляти великі набори даних, скоротивши час навчання та підвищивши точність.
Окрім збільшення обчислювальних потужностей, xAI скоригувала свій підхід до навчання, щоб покращити можливості Grok 3. Тепер модель використовує синтетичні набори даних, механізми самокорекції та навчання з підкріпленням, щоб підвищити її продуктивність:
- Синтетичні набори даних — це штучно створені набори даних, а не зібрані з реальних джерел. Вони використовуються для навчання моделей ШІ шляхом моделювання різних сценаріїв, забезпечуючи різноманітний і контрольований набір даних. Це допомагає підвищити ефективність навчання та вирішити проблеми конфіденційності даних.
- Механізми самокорекції — це методи ШІ, які дозволяють моделі виявляти і виправляти власні помилки. Оцінюючи свої результати і порівнюючи їх з відомими правильними відповідями, модель може вдосконалювати свої відповіді з часом, зменшуючи кількість помилок і підвищуючи точність.
- Навчання з підкріпленням — тип машинного навчання, коли модель ШІ навчається, отримуючи винагороду або покарання за свої дії. Система навчається максимізувати позитивні результати шляхом спроб і помилок, покращуючи свої можливості прийняття рішень.
За словами Маска, ці вдосконалення дозволять зменшити кількість неправильних відповідей — відомих як галюцинації — завдяки використанню декількох етапів перевірки, підвищити логічну точність шляхом перевірки інформації з надійних джерел, а також ефективніше адаптуватися завдяки постійній самооцінці та навчанню.
xAI також повідомляє, що для забезпечення більш природних і точних відповідей були впроваджені петлі зворотного зв’язку і контекстне навчання.
Цикл зворотного зв’язку з людиною — це метод навчання, коли моделі ШІ отримують прямий зворотний зв’язок від людей-рецензентів, щоб удосконалити свої відповіді.
Люди оцінюють точність, релевантність і корисність створеного АІ контенту, допомагаючи моделі вдосконалюватися з часом.
Контекстне навчання полягає в тому, щоб навчити ШІ розуміти і адаптувати свої відповіді в залежності від контексту. Це означає врахування попередніх взаємодій, намірів користувача та навколишньої інформації для генерування більш точних і релевантних відповідей.
За даними xAI, модель була розроблена для генерування глибоких і несподіваних рішень, що робить її більш ефективним інструментом для вирішення проблем — і попередні тести показують, що Grok 3 перевершує своїх конкурентів, включаючи ChatGPT від OpenAI і DeepMind Gemini від Google, у складних завданнях на міркування.
У відеоінтерв’ю на Всесвітньому саміті урядів, що проходив у Дубаї з 11 по 13 лютого, Маск заявив, що «це, можливо, останній раз, коли штучний інтелект виявився кращим за Grok». Окрім цього, Маск припустив, що до випуску продукту ще «тиждень або два», і що він не хоче «поспішати», щоб забезпечити найкращий користувацький досвід.
Але, схоже, він вирішив випустити реліз раніше, написавши на X, що буде «відточувати продукт з командою всі вихідні» і що він буде «офлайн до тих пір».
За його словами, бот був навчений на синтетичних даних і міг переглядати їх для досягнення логічної послідовності. «Тож, якщо він має помилкові дані, він проаналізує їх і видалить невірні дані», — сказав він. — Його базові міркування дуже хороші».
Нагадаємо, токени Grok (GROK) зросли на 54% в неділю, коли Ілон Маск підтвердив, що Grok 3 від його стартапу xAI AI буде запущений в понеділок. Поточна ринкова вартість токенів GROK становить $0,005305, а загальна ринкова капіталізація досягає $33,6 млн.
Про Grok
Запуск нового чат-боту Grok Ілон Маск анонсував на початку листопада 2023 року. Тоді планувалось, що розмовний чат-бот стане доступним для всіх «передплатників X Premium+» після завершення «ранньої бета-версії».
Бот є першою інновацією AI-стартапа Маска, xAI, про який він оголосив ще в липні. Маск дав команду компанії, яка складається лише з 12 людей, амбітну місію «зрозуміти справжню природу Всесвіту».
Бета-версія Grok-2 і Grok-2 mini побачила світ у середині серпня 2024 року, Тоді в xAI планували розгорнути чат-боти у функціоналі X (Twitter) для поліпшених можливостей пошуку, аналітики постів та функції відповіді. Це може означати, що в X можуть з’явитися відповіді на основі штучного інтелекту.
Перші дослідники Grok-ів повідомляли, що вона може генерувати реалістичні зображення та практично немає фільтрів та обмежень.
Вже 8 грудня 2024 року соціальна мережа X (екс-Twitter) відкрила безкоштовний доступ до фірмового чат-бота Grok AI для всіх користувачів. Наступного дня AI-експерт Олексій Мінаков протестував Grok, поділився своїми враженнями від чат-боту, а також фішками та різницею Grok від ChatGPT, Gemini та Claude.
В січні 2025 року xAI випустила застосунок Grok — автономну версію ШІ-бота, який до того був вбудований у X.