Израильские инженеры разработали платформу для обучения роботов ориентации в реальном мире
Разработчики израильской компании Lightricks создают масштабируемую базовую модель для обучения робототехники. Платформа обучает роботов не только на видео, но и на целом наборе физических параметров среды.
Израильский стартап Lightricks завершает процесс разделения бизнеса и выделяет подразделение искусственного интеллекта в независимую структуру LTX. Главной задачей новой платформы станет разработка так называемой "модели мира" – базовой системы, спроектированной для обучения физического ИИ и автономной робототехники.
Проект опирается на единую обработку информации от физических датчиков и видеопотока. Для точной ориентации в пространстве и управления манипуляторами робот должен считывать не только картинку с камер, но и динамику физических параметров: температуру, давление и тактильный контакт. Инженеры сводят эти разнородные данные к единому пространственному коду. Показания каждого отдельного датчика конвертируются в пиксели определенной яркости и цвета, создавая специальный "сенсорный кадр". Этот поток объединяется со стандартным видео с камер, формируя целостную визуальную матрицу всего окружающего мира.
На таком гибридном материале и обучается базовая модель. Обрабатывая последовательность кадров, алгоритм учится предсказывать не просто следующую картинку, а комплексное развитие событий. Получив на входе весь комплекс информации робот учится делать прогноз: как изменится картинка, как отреагируют его физические датчики на то или иное микродвижение. Модель фактически прогнозирует физику реальности, оценивая последствия любого действия.
Создание такой платформы требует больших объемов информации и вычислительных мощностей. "Самая дорогая часть – это обучение на всех данных, на огромных массивах видео из интернета. Мы тратим на это около 50 миллионов долларов в год, – цитирует экономическое издание Globes руководителя LTX Зеева Фарбмана. – Но если у вас есть система, которая принимает кадр и умеет угадывать, как будут выглядеть следующие кадры, ее можно использовать в робототехнике".
По мере развертывания LTX многие команды инженеров смогут использовать готовый фундамент и адаптировать его под собственные типы роботов, не тратя бюджеты на первичное машинное обучение.
newsru.co.il
Читайте также
Все материалы рубрики
ТехнологииГлава Национального управления по искусственному интеллекту: Израилю нужна собственная ИИ-инфраструктура16:00, 9 ноября
ТехнологииИзраиль и Германия продлили соглашение о сотрудничестве в сфере энергетики11:00, 6 ноября
ТехнологииВ Израиле планируют построить первую геотермальную электростанцию на Голанских высотах15:00, 4 ноябряМиллиардер Билл Экман создает институт исследования и реабилитации мозга, чтобы помочь пережившей инсульт дочери
Миллиардер и основатель хедж-фонда Pershing Square Билл Экман объявил о создании нового исследовательского института в Нью-Йорке, который займется изучением мозга, реабилитацией после черепно-мозговых травм, интерфейсами мозг-компьютер, оптимизацией человеческих возможностей и увеличением продолжительности жизни.
Институт, получивший название Ackman Oxman Institute, был создан после тяжелого инсульта, перенесенного в начале года его 26-летней дочерью Люси. Экман пожертвовал на него акции Pershing Square на 400 миллионов долларов и планирует дополнительное пожертвование.
В развернутом посте в соцсети X Экман рассказал, что в феврале Люси нашли без сознания в ее квартире в Уильямсбурге после массивного кровоизлияния в мозг. Ее доставили в больницу Элмхерст, где она перенесла экстренную операцию для снижения внутричерепного давления и удаления образовавшейся крови.
"Каждый день она немного продвигается вперед, и этот ежедневный прогресс накапливается", – написал он. По его словам, сегодня она понимает происходящее вокруг, способна ходить с поддержкой и постепенно восстанавливает способность издавать звуки и говорить, хотя пока не видит. "Мы сохраняем оптимизм в том, что Люси вернется к обычной жизни, – написал Экман. – Вероятно, на это уйдут годы, но я верю, что это лишь вопрос времени, тяжелой работы и технологического прогресса".
Лечение Люси привело Экмана к выводу о необходимости ускорить исследования и разработки в сфере реабилитации после травм мозга. По его словам, он с семьей решил сделать накопленный за время лечения опыт доступным для других.
Для этого фонд Pershing Square приобрел новое биотехнологическое здание площадью около 400 тысяч квадратных футов в западном Манхэттене. Кроме того, Экман планирует приобрести соседнее здание площадью около 130 тысяч квадратных футов, которое сейчас используется как съемочная площадка шоу "Saturday Night Live". По его словам, высокие потолки и большие пространства без колонн позволят превратить его в реабилитационные помещения.
Экман намерен расширить комплекс, который в итоге может занять около 680 тысяч квадратных футов. Цель – создать центр, охватывающий широкий спектр направлений: от нейрохирургии и нейронаук до питания, реабилитации, испытаний на людях, разработки устройств и интерфейсов мозг-компьютер, а также гипербарической оксигенации.
По его словам, институт не будет работать по традиционной академической модели с упором на научные публикации. "Мы полностью сосредоточимся на лечении, терапии, устройствах, реабилитации и тренировочном оборудовании", – написал он, добавив, что цель – "радикально сократить путь от идеи до инновации, от инновации до производства и от производства до помощи пациенту".
У AOI также будет инвестиционное подразделение, которое позволит развивать технологии и создавать коммерческие компании. Экман подчеркнул, что институт будет некоммерческим, но при этом обладать "сильными коммерческими инстинктами".
В совет директоров института вошли, среди прочих, Дин Кеймен, Джордж Янкопулос, лауреат Нобелевской премии Джеймс Ротман, нейробиолог Бернардо Сабатини, нейрохирург Крис Келлнер, гендиректор Pershing Square Foundation Оливия Плато, Нери Оксман и сам Экман.