Cosmos World Foundation, або скорочено Cosmos WFM
Cosmos WFM — платформа, яка містить найсучасніші базові моделі генеративного світу, токенізатори та конвеєра обробки відео для прискорення розробки фізичного ШІ в лабораторіях робототехніки та AV. Cosmos створений спеціально для фізичного ШІ.
Моделі, які можна точно налаштувати для конкретних застосувань, доступні в каталогах API та NGC Nvidia, на GitHub і платформі для розробки ШІ Hugging Face, пише TechCrunch.
«Nvidia робить доступною першу хвилю WFM-моделей Cosmos для фізичного моделювання та генерації синтетичних даних, — написала компанія в блозі. — Дослідники та розробники, незалежно від розміру компанії, можуть вільно використовувати моделі Cosmos за ліцензією Nvidia на відкриті моделі, яка дозволяє комерційне використання».
У сімействі Cosmos WFM є кілька моделей, розділених на три категорії:
- Nano для додатків з низькою затримкою і в режимі реального часу;
- Super для «високопродуктивних базових моделей»;
- Ultra для максимальної якості й точності вихідних даних.
Моделі варіюються від 4 до 14 мільярдів параметрів, причому Nano є найменшою, а Ultra — найбільшою.
Ці, а також інші моделі Cosmos WFM були навчені на 9000 трильйонів токенів із 20 мільйонів годин реальних людських взаємодій, даних про навколишнє середовище, промисловість, робототехніку та водіння, повідомляє Nvidia. (В ШІ «токени» являють собою біти необроблених даних — в цьому випадку, відеоматеріали).
Nvidia заявила, що такі компанії, як Waabi, Wayve, Fortellix і Uber, уже взяли на себе зобов’язання пілотувати Cosmos WFM для різних варіантів використання, від пошуку та контролю відео до створення моделей AI для самокерованих транспортних засобів.
Графічний процесор RTX 5090 за $2 000
Nvidia представила нове сімейство графічних процесорів RTX Blackwell. Центральним елементом лінійки є RTX 5090. Карта напрочуд схожа на свою попередницю, але тепер має 92 млрд транзисторів, 4000 AT TOPS, 380 TFLOPS із трасуванням променів і пропускну здатність 1,8 ТБ/с.
Під час презентації RTX 5090 продемонстрував глибоко деталізовану графіку зі складними текстурами та повною трасуванням променів. Nvidia стверджує, що новий преміальний графічний процесор здатен перевершити 4090 у 2 рази.
RTX 5090 коштує колосальні $2,000. RTX 8050, 5070 Ti й 5070, тим часом коштують $999, $749 і $549 відповідно. Дійсно, з’являться ноутбуки на 5070, які будуть коштувати в сотні разів дешевше, ніж автономний 5090.
Компанія додає, що серія 50 «забезпечує прорив у рендерингу на основі штучного інтелекту, включаючи нейронні шейдери, цифрові людські технології, геометрію й освітлення».
Ноутбуки з графічними процесорами 5090, 5080 і 5070 Ti будуть доступні з березня. Ноутбуки з RTX 5070 з’являться наступного місяця.
Mega — менеджер парку складських роботів
Nvidia продовжує свою експансію на ринку програмного забезпечення для робототехніки з Mega Omniverse Blueprint, розробленим спеціально для управління робототехнічним парком у великих масштабах.
«Mega пропонує підприємствам архітектуру прискорених обчислень Nvidia, технології штучного інтелекту, Nvidia Isaac і Nvidia Omniverse для розробки й тестування цифрових двійників для тестування мозку роботів на основі штучного інтелекту, який керує роботами, агентів штучного інтелекту для відеоаналітики, обладнання та багато іншого для роботи з роботами величезної складності й масштабу», — зазначає компанія. «Новий фреймворк надає програмно визначені можливості фізичним об’єктам, забезпечуючи безперервну розробку, тестування, оптимізацію та розгортання».
Mega розробляє цифрових двійників роботизованих систем і налаштувань, щоб визначити оптимальні маршрути й робочі процеси для робототехнічних систем. Німецька компанія Kion Group, що займається ланцюгами постачання, першою офіційно впровадила Mega у свої робочі процеси.
Nvidia допомагає людиноподібним роботам навчатися за допомогою інструкції Apple Vision Pro
Генеральний директор Дженсен Хуанг представив ще один важливий аспект GR00T: Blueprint. Нова модальність заснована на імітаційному навчанні — фундаментальному аспекті навчання роботів новим навичкам. Це подвійно важливо у світі гуманоїдів, дизайн яких базується на тому, хто навчає.
Імітаційне навчання — ось як це звучить. Людина виконує дію, а робот наслідує її. Це ефективний метод навчання систем, призначених для автоматизації наявних завдань, наприклад, на заводах і складах, де розгортаються перші партії гуманоїдів.
Телеоперація відіграє фундаментальну роль у всьому цьому. Її можна використовувати для дистанційного навчання роботів, миттєво оцифровуючи їхні дії через наближення до реального середовища.
Телеоперації відіграють фундаментальну роль у всьому цьому. Її можна використовувати для дистанційного навчання роботів, миттєво оцифровуючи дії людини за допомогою наближення до реального середовища.
З GR00T Blueprint користувачі можуть створювати ці дії за допомогою програми Vision Pro від Apple. Процес фіксується у вигляді цифрового двійника, який робот потім може повторювати в симуляції.
Project Digits — персональний суперкомп’ютер зі штучним інтелектом
Project Digits — «персональний суперкомп’ютер зі штучним інтелектом», який надає доступ до апаратної платформи Grace Blackwell у компактній формі.
«[Project Digits] запускає весь стек штучного інтелекту Nvidia — все програмне забезпечення Nvidia працює на ньому», — сказав генеральний директор Nvidia Дженсен Хуанг. «Це хмарна обчислювальна платформа, яка стоїть на вашому столі… Це навіть робоча станція, якщо ви хочете, щоб так було».
Розроблений для дослідників ШІ, аналітиків даних та студентів, Project Digits містить новий суперчип Nvidia GB10 Grace Blackwell, який забезпечує обчислювальну продуктивність до петафлопа для створення прототипів, тонкого налаштування та запуску моделей штучного інтелекту.
Nvidia стверджує, що один блок Project Digits може запускати моделі розміром до 200 млрд параметрів. Параметри приблизно відповідають навичкам моделі вирішувати проблеми, і моделі з більшою кількістю параметрів, як правило, працюють краще, ніж моделі з меншою кількістю параметрів.
GB10, розроблений у партнерстві з MediaTek, оснащений графічним процесором Nvidia Blackwell, підключеним до 20-ядерного процесора Nvidia Grace. Усередині корпусу Project Digits чіпи підключені до пулу пам’яті об’ємом 128 ГБ і флешпам’яті об’ємом до 4 ТБ.
Nvidia каже, що дві машини Project Digits можна з’єднати разом для запуску моделей із 405 млрд параметрів, якщо цього вимагає робота. Project Digits може забезпечити автономний досвід, як згадувалося раніше, або підключитися до основного ПК з Windows або Mac.
Але це недешево. Машини Project Digits, на яких працює ОС DGX від Nvidia на базі Linux, будуть доступні з травня у «провідних партнерів» за $3000, повідомила компанія.