Танго (платформа)

Мобильная платформа компьютерного зрения для Android, разработанная Google
Танго
Оригинальный автор(ы)Google
Разработчик(и)Google
Первоначальный выпуск5 июня 2014 г. ; 10 лет назад ( 2014-06-05 )
Платформаандроид
Доступно вАнглийский
ТипКомпьютерное зрение
Веб-сайтразработчики.google.com/tango/

Tango (называемый Project Tango во время тестирования) была вычислительной платформой дополненной реальности , разработанной и созданной Advanced Technology and Projects (ATAP), подразделением skunkworks компании Google . Она использовала компьютерное зрение , чтобы позволить мобильным устройствам , таким как смартфоны и планшеты , определять свое положение относительно окружающего мира без использования GPS или других внешних сигналов. Это позволило разработчикам приложений создавать пользовательский опыт, включающий навигацию в помещениях , 3D- картографирование, измерение физического пространства, распознавание окружающей среды, дополненную реальность и окна в виртуальный мир .

Первый продукт, появившийся в ATAP, [1] Tango был разработан командой под руководством компьютерного ученого Джонни Ли , основного разработчика Kinect от Microsoft . В интервью в июне 2015 года Ли сказал: «Мы разрабатываем аппаратные и программные технологии, чтобы помочь всему и каждому точно понимать, где они находятся и где бы они ни находились». [2]

Google выпустила два устройства для демонстрации технологии Tango: телефон Peanut и 7-дюймовый планшет Yellowstone. По состоянию на июнь 2015 года было продано более 3000 таких устройств, [3] в основном исследователям и разработчикам программного обеспечения, заинтересованным в создании приложений для платформы. Летом 2015 года Qualcomm и Intel объявили, что они разрабатывают эталонные устройства Tango в качестве моделей для производителей устройств, использующих их мобильные чипсеты . [4] [5]

На выставке CES в январе 2016 года Google объявила о партнерстве с Lenovo с целью выпуска потребительского смартфона летом 2016 года с технологией Tango, ориентированной на потребителей, отметив цену менее 500 долларов и небольшой форм-фактор менее 6,5 дюймов. В то же время обе компании также объявили о создании инкубатора приложений для разработки приложений для запуска устройства.

15 декабря 2017 года Google объявила, что с 1 марта 2018 года прекратит поддержку Tango в пользу ARCore . [6]

Обзор

Tango отличался от других современных продуктов компьютерного зрения с 3D-сенсорным сканированием тем, что был разработан для работы на автономном мобильном телефоне или планшете и был в основном связан с определением положения и ориентации устройства в окружающей среде.

Программное обеспечение работало путем интеграции трех типов функциональности:

  • Отслеживание движения : использование визуальных характеристик окружающей среды в сочетании с данными акселерометра и гироскопа для точного отслеживания перемещений устройства в пространстве.
  • Изучение местности: сохранение данных об окружающей среде на карте, которую можно использовать повторно в дальнейшем, передавать другим устройствам Tango и дополнять метаданными, такими как заметки, инструкции или точки интереса.
  • Восприятие глубины : определение расстояний, размеров и поверхностей в окружающей среде

Вместе они генерируют данные об устройстве в « шести степенях свободы » (3 оси ориентации плюс 3 оси положения) и подробную трехмерную информацию об окружающей среде .

Проект Tango также был первым проектом, вышедшим из Google X в 2012 году [7]

Приложения на мобильных устройствах используют API Tango C и Java для доступа к этим данным в реальном времени. Кроме того, был также предоставлен API для интеграции Tango с игровым движком Unity ; это позволило преобразовать или создать игры, которые позволяют пользователю взаимодействовать и перемещаться в игровом пространстве, перемещая и вращая устройство Tango в реальном пространстве. Эти API были задокументированы на веб-сайте разработчиков Google. [8]

Приложения

Tango позволяет приложениям отслеживать положение и ориентацию устройства в подробной 3D-среде и распознавать известные среды. Это позволило создать такие приложения, как навигация в магазине, визуальные измерительные и картографические утилиты, инструменты для презентаций и дизайна [9] и множество захватывающих игр. На выставке Augmented World Expo 2015 [10] Джонни Ли продемонстрировал строительную игру, которая создает виртуальную структуру в реальном пространстве, приложение для шоурума AR , которое позволяет пользователям просматривать полноразмерный виртуальный автомобиль и настраивать его функции, гибридный пистолет Nerf с установленным экраном Tango для уклонения и стрельбы по монстрам AR, наложенным на реальность, и многопользовательское приложение VR , которое позволяет нескольким игрокам общаться в виртуальном пространстве, где движения их аватара соответствуют их реальным движениям. [11]

Приложения Tango распространяются через Play . Google поощряет разработку большего количества приложений с помощью хакатонов , конкурсов приложений и рекламных скидок на планшет для разработки. [12]

Устройства

В качестве платформы для разработчиков программного обеспечения и модели для производителей устройств компания Google создала два устройства Tango.

Арахисовый телефон

«Peanut» был первым серийным устройством Tango, выпущенным в первом квартале 2014 года. Это был небольшой телефон Android с четырехъядерным процессором Qualcomm MSM8974 и дополнительным специальным оборудованием, включая камеру движения «рыбий глаз» , камеру «RGB-IR» для цветного изображения и инфракрасного определения глубины, а также процессорные блоки Movidius Vision . Высокопроизводительный акселерометр и гироскоп были добавлены после тестирования нескольких конкурирующих моделей в лаборатории MARS в Университете Миннесоты .

Несколько сотен устройств Peanut были распространены среди партнеров раннего доступа, включая университетских исследователей в области компьютерного зрения и робототехники , а также разработчиков приложений и технологических стартапов . Google прекратил поддержку устройства Peanut в сентябре 2015 года, поскольку к тому времени программный стек Tango вышел за рамки версий Android, работающих на устройстве.

Йеллоустонская табличка

Планшет Project Tango от Google, 2014 г.

«Yellowstone» был 7-дюймовым планшетом с полной функциональностью Tango, выпущенным в июне 2014 года и продававшимся как Project Tango Tablet Development Kit. [13] Он имел четырехъядерный процессор Nvidia Tegra K1 с тактовой частотой 2,3 ГГц, флэш-память объемом 128 ГБ, сенсорный экран с разрешением 1920x1200 пикселей, цветную камеру 4 МП, камеру с объективом «рыбий глаз » (отслеживание движения), ИК-проектор с камерой RGB-IR для интегрированного определения глубины и подключение 4G LTE . [14] [15] По состоянию на 27 мая 2017 года планшет Tango считается официально неподдерживаемым Google. [16]

Тестирование НАСА

В мае 2014 года два телефона Peanut были доставлены на Международную космическую станцию , чтобы стать частью проекта NASA по разработке автономных роботов, которые перемещаются в различных средах, включая открытый космос. 18-гранные многогранные роботы SPHERES размером с футбольный мяч были разработаны в исследовательском центре NASA Ames , рядом с кампусом Google в Маунтин-Вью, Калифорния . Андрес Мартинес, менеджер SPHERES в NASA, сказал: «Мы изучаем, насколько эффективны навигационные возможности [Tango] на основе зрения для выполнения локализации и навигации мобильного свободного летающего аппарата на МКС. [17]

Смартфон Intel RealSense

Анонсирован на форуме разработчиков Intel в августе 2015 года [18] и предлагается публике через комплект разработчика с января 2016 года. [19] Он включает в себя камеру RealSense ZR300 [20] , которая имеет оптические функции, необходимые для Tango, такие как камера «рыбий глаз». [21]

Lenovo Phab 2 Pro

Lenovo Phab 2 Pro был первым коммерческим смартфоном с технологией Tango, устройство было анонсировано в начале 2016 года, запущено в августе и доступно для покупки в США в ноябре. Phab 2 Pro имел 6,4-дюймовый экран, процессор Snapdragon 652 и 64 ГБ встроенной памяти, с задней 16-мегапиксельной камерой и 8-мегапиксельной фронтальной камерой.

Asus Zenfone AR

Asus Zenfone AR, анонсированный на выставке CES 2017, [22] стал вторым коммерческим смартфоном с технологией Tango. Он работал под управлением Tango AR и Daydream VR на базе Snapdragon 821 , с 6 ГБ или 8 ГБ оперативной памяти и 128 или 256 ГБ встроенной памяти в зависимости от конфигурации.

Смотрите также

Ссылки

  1. Объявление на сайте ATAP Google+, 30 января 2015 г.
  2. ^ «Будущие телефоны поймут и увидят мир». 3 июня 2015 г. Получено 4 ноября 2015 г.
  3. ^ «Slamdance: внутри странной виртуальной реальности проекта Google Tango». 29 мая 2015 г.
  4. ^ Qualcomm поддерживает платформу разработки нового поколения Tango, 29.05.2015
  5. ^ IDF 2015: Intel объединяется с Google для внедрения RealSense в Project Tango, 2015-08-18
  6. ^ "Проект Tango от Google закрывается, потому что ARCore уже здесь". The Verge . Получено 16.12.2017 .
  7. ^ «10 смелых проектов Google X, нацеленных на технологические прорывы».
  8. ^ https://developers.google.com/project-tango/ Сайт разработчиков Google.
  9. ^ Инструмент дополненной реальности для обнаружения несоответствий в дизайне: сравнительный тест с традиционными методами . Международная конференция по дополненной реальности, виртуальной реальности и компьютерной графике. 2019. doi :10.1007/978-3-030-25999-0_9.
  10. ^ http://augmentedworldexpo.com/ Дополненная всемирная выставка Expo 2015
  11. ^ AWE 2015, «Мобильное 3D-отслеживание и восприятие»
  12. ^ Google утверждает, что это лучшие приложения для Project Tango, 2 ноября 2015 г.
  13. Анонс продукта на странице ATAP Google+, 5 июня 2014 г. , получено 4 ноября 2015 г.
  14. Характеристики на официальном сайте , получены 4 ноября 2015 г.
  15. ^ "Руководство пользователя Tango Tablet Development Kit | Tango | Google Developers". Google Developers . Получено 2016-09-11 .
  16. ^ «Выпуск Lenovo Phab 2 Pro стал важной вехой для Tango, ознаменовав ...» Получено 15 июля 2017 г.
  17. Проект Tango компании Google направляется на Международную космическую станцию, 20 марта 2014 г.
  18. ^ «Google и Intel внедряют RealSense на телефоны с помощью комплекта разработчика Project Tango».
  19. ^ «Телефон Intel RealSense с Project Tango доступен для предварительного заказа».
  20. ^ «Комплект разработчика смартфонов RealSense от Intel теперь доступен для предварительного заказа за 399 долларов». 7 января 2016 г.
  21. ^ Технические характеристики продукта Intel Realsense ZR300
  22. ^ Анонс ASUS на выставке CES 2017 -YouTube
  • Официальный сайт
  • Сайт разработчиков проекта Tango (API и документация).
  • Сообщество разработчиков проекта Tango.
  • Страница платформы разработки смартфонов Project Tango на сайте Qualcomm.
  • «Intel расширяет возможности разработчиков по мере проникновения вычислений во все сферы жизни людей». Форум разработчиков Intel. 20 августа 2015 г.
  • «Google и Intel внедряют RealSense на телефоны с помощью комплекта разработчика Project Tango». Engadget. 18 августа 2015 г.
  • «Google I/O 2015 — Проект Tango — Мобильное 3D-отслеживание и восприятие». Джонни Ли, Google I/O 2015. YouTube. 29 мая 2015 г.
  • «Project Tango Concepts». Джонни Ли, YouTube. 21 апреля 2015 г.
  • «Разборка планшета Project Tango». iFixit. 15 августа 2014 г.
Взято с "https://en.wikipedia.org/w/index.php?title=Tango_(platform)&oldid=1232795300"