• Українська
    • English
    Facebook X (Twitter) Instagram
    В тренді:
    • Українцям розповіли, до якого курсу готуватись: що буде з доларом після 1 червня
    • Більше ніяких бусиків: ТЦК зобов’язали проводити мобілізацію за новими правилами
    • Клієнти Monobank втрачають гроші при поповненні: на картку не надходять
    • КНДР швидко модернізує свою застарілу армію, мир на півострові під загрозою, – NYT
    • Яку роботу українцям можна знайти в сільському господарстві Польщі
    • ПСЖ розгромив “Інтер” і здобув перший в історії трофей Ліги чемпіонів
    • Повний провал реформи: українців шокували даними про куріння серед підлітків
    • Дорогі, але безвідмовні: названо автомобілі, які практично не ламаються
    • Українська
    • English
    Facebook X (Twitter) Instagram
    Експерт
    Підтримати нас
    • Всі новини
    • Україна
    • Політика
    • Економіка
    • Світ
    • Стиль життя
    • Авто
    • Технології
    • Суспільство
    • Здоров’я
    Експерт
    Головна сторінка » Вчені створили застосунок для керування роботами з гарнітури Apple Vision Pro

    Вчені створили застосунок для керування роботами з гарнітури Apple Vision Pro

    Ольга СтепановаОльга Степанова18 Березня 2024, 00:363 хвилини на читання Новини технологій
    Поділитись
    Facebook Twitter Telegram

    Вчені Массачусетського технологічного інституту розробили застосунок для гарнітури змішаної реальності Apple Vision Pro, який дозволяє користувачам керувати роботами лише за допомогою жестів голови та рук.

    Про це повідомив розробник програми, докторант Янгхьо Парк у соціальній мережі X (колишній Twitter).

    Застосунок під назвою Tracking Streamer можна використовувати для віддаленого керування машинами в різних сценаріях — від жартів до навігації в зоні лиха та для інших небезпечних маніпуляцій у рятувальних або наукових цілях. Програма відстежує рухи людини, — зокрема те, як рухаються голова, зап’ястя та пальці — і передає ці дані через з’єднання Wi-Fi до робота, який знаходиться у тій самій мережі. Під’єднаний робот перетворює дані у відповідні рухи.

    “Ця програма тепер офіційно в VisionOS App Store! Ви можете знайти Tracking Streamer в App Store і встановити програму, — повідомляють розробники.

    Дослідники оприлюднили свою роботу в короткій статті, опублікованій на Github — сховищі проєктів з відкритим кодом. Система відстежує 26 точок на руках та зап’ястях, а також окремі точки на голові. Програма дозволяє зчитувати просторові дані, висоту та інші параметри.

    🥽 Want to use your new Apple Vision Pro to control your robot? Want to record how you navigate / manipulate the world to train a policy?

    I developed an app for VisionOS that can stream your head / wrist / finger movements over WiFi, which you can subscribe on any machines using… pic.twitter.com/l5CbeINWWf

    — Younghyo Park (@younghyo_park) March 9, 2024

    Янгхьо Парк на відео демонструє систему в дії. Співавтор дослідження Гейб Марголіс, аспірант Массачусетського технологічного інституту, керує чотирилапим роботом за допомогою рук та рухів тіла. Марголіс жестами наказує роботу підійти до зачинених дверей, повернути ручку, взятися за неї та увійти. Також він жестом наказує роботу взяти пластикову кришку відра для сміття та кинути її у смітник. У якийсь момент він нахиляється, що змушує робота імітувати його рухи.

    “Приємною особливістю Vision Pro є те, що вона відстежує все в глобальному кадрі: програма постійно локалізує пристрій, з якого запущено додаток. Це відкриває захопливі можливості для знімання людських рухів у більш масштабному середовищі”, — зазначає Парк.

    Apple випустила гарнітуру Vision Pro у лютому 2024 року. Сайт Live Sciense зазначає, що незадовго до запуску вчені опублікували роботу, у який досліджували, як гарнітури віртуальної реальності можна використовувати у повсякденному житті. зазвичай ці пристрої мають затримку, відсікають периферійний зір та викликають візуальні просторові спотворення.

    “Ці пристрої можуть стати перспективним джерелом даних для навчання базової моделі робототехніки!” — підсумовує Парк

    Парк та Марголіс припустили у своїй статті, що деякі користувачі можуть носити Apple Vision Pro весь час, як окуляри, і що тривала експлуатація дасть більше даних, які можна використовувати для навчання роботів, як люди рухаються.

    З гарнітурою Apple Vision Pro варто поводитися обачно. Раніше повідомлялося, що прогулянки у гарнітурі віртуальної реальності приховують небезпеки, а зловмисники можуть почати використовувати це у власних цілях. Користувачі гарнітури Apple Vision Pro можуть зіткнутися з віртуальними перепонами, які перекривають поле зору та можуть несподівано налякати, бо раптово з’являються у неочікуваних місцях.

    Apple Vision Pro вчені роботы

    Читайте також

    Цукерберг розроблятиме пристрої доповненої реальності для армії США: що відомо про проєкт

    “Ваші дані у небезпеці”: Apple зробила попередження 1,8 млрд користувачів iPhone

    Секрети пошуковика Google, про які мало хто знає: це значно спростить життя

    Останні новини
    Сьогодні

    Українцям розповіли, до якого курсу готуватись: що буде з доларом після 1 червня

    00:40

    Більше ніяких бусиків: ТЦК зобов’язали проводити мобілізацію за новими правилами

    00:32

    Клієнти Monobank втрачають гроші при поповненні: на картку не надходять

    00:30

    КНДР швидко модернізує свою застарілу армію, мир на півострові під загрозою, – NYT

    00:21

    Яку роботу українцям можна знайти в сільському господарстві Польщі

    00:16

    ПСЖ розгромив “Інтер” і здобув перший в історії трофей Ліги чемпіонів

    00:12
    31 Травня

    Повний провал реформи: українців шокували даними про куріння серед підлітків

    23:04

    Дорогі, але безвідмовні: названо автомобілі, які практично не ламаються

    22:51

    900 мільярдів в “тіні” : Гетманцев назвав масштаби втрат для бюджету

    22:47

    Чи можна розігрівати та зберігати їжу у пластикових контейнерах

    22:42
    Дивитись ще
    Категорії новин
    • Всі новини
    • Україна
    • Політика
    • Економіка
    • Світ
    • Стиль життя
    • Авто
    • Технології
    • Суспільство
    • Здоров’я
    Інформація
    • Про проект
    • Автори
    • Редакційна політика і стандарти
    • Політика конфіденційності
    • Правила коментування
    • Контакти
    expert.in.ua © 2025 Всі права захищено.

    Введіть вище запит та натисніть Enter для пошуку. Натисніть Esc, щоб скасувати.