PrimeSense — израильская компания 3D-сенсоров со штаб-квартирой в Тель-Авиве . У PrimeSense были офисы в Израиле , Северной Америке, Японии, Сингапуре , Корее , Китае и Тайване . PrimeSense была куплена Apple Inc. за 360 миллионов долларов 24 ноября 2013 года.
Технология PrimeSense изначально применялась в играх, но позже была применена и в других областях. [1] PrimeSense была наиболее известна лицензированием аппаратного дизайна и чипа, используемых в системе обнаружения движения Kinect от Microsoft для Xbox 360 в 2010 году. [2] Компания была основана в 2005 году для исследования камер с датчиками глубины, которые они продемонстрировали разработчикам на конференции разработчиков игр 2006 года . Microsoft самостоятельно искала применение технологии 3D-камер в своей линейке консолей Xbox и после конференции сотрудничала с PrimeSense, чтобы помочь определить направление, в котором должна развиваться технология, чтобы попасть в продукты потребительского класса, в то время как Microsoft улучшила дополнительные программные аспекты и внедрила машинное обучение для помощи в обнаружении движения. [3]
24 ноября 2013 года Apple Inc. подтвердила покупку PrimeSense за 360 миллионов долларов. [4]
Технологии
Технология светового кодирования
Получение глубины PrimeSense стало возможным благодаря технологии «кодирования света». Процесс кодировал сцену с помощью ближнего ИК-света, который возвращается искаженным в зависимости от того, где находятся предметы ( структурированный свет ). Затем решение использовало стандартный готовый датчик изображения CMOS для считывания кодированного света со сцены с использованием различных алгоритмов для триангуляции и извлечения 3D-данных. Продукт анализировал обстановку в 3 измерениях с помощью программного обеспечения, чтобы устройства могли взаимодействовать с пользователями. [5] [6]
Продукция
Система PrimeSense на кристалле (SoC)
Датчик изображения CMOS работал с датчиком видимого видео, чтобы обеспечить возможность объединения карты глубины , предоставленной PrimeSense SoC Carmine (PS1080) и Capri (PS1200), с цветным изображением. SoC выполнили процесс регистрации, чтобы информация о цветном изображении (RGB) и глубине (D) была правильно выровнена. [7] Инфракрасные шаблоны кодирования света были расшифрованы для создания изображения глубины сцены размером VGA . Он передавал видимую видео, глубину и аудио информацию синхронизированным образом через интерфейс USB 2.0. SoC имел минимальные требования к процессору, поскольку все алгоритмы получения глубины работали на самом SoC.
Датчики PrimeSense
Кармин 1,08
Кармин 1,09 (ближняя дистанция)
Капри 1.25 (встроенный)
PrimeSense внедрила свою технологию в собственные датчики Carmine 1.08 и Carmine 1.09. Capri 1.25, рекламируемый компанией как самый маленький в мире 3D-датчик, дебютировал на международной выставке CES 2013. [8]
Промежуточное программное обеспечение PrimeSense
PrimeSense разработала промежуточное программное обеспечение NiTE , которое анализировало данные с оборудования и модулей для OpenNI, обеспечивая отслеживание жестов и скелета. Они были выпущены только в виде двоичных файлов. [9] Согласно странице NiTE в LinkedIn: «Включая алгоритмы компьютерного зрения, NiTE идентифицирует пользователей и отслеживает их движения, а также предоставляет фреймворк API для реализации элементов управления пользовательского интерфейса с естественным взаимодействием на основе жестов». [10] Затем система могла интерпретировать определенные жесты, делая реальностью полностью бесконтактное управление электронными устройствами. [1] Включая:
Распознавание людей по свойствам их тела, движениям и жестам
Классификация объектов, таких как мебель
Расположение стен и пола [6]
Рынки
Первоначально компания PrimeSense сосредоточилась на игровом и гостином рынках [11] , но затем расширила сферу деятельности и включила в нее:
Телевидение
Kinect от Microsoft был создан на основе технологии PrimeSense, которая позволяла геймерам использовать все свое тело для управления игрой, действиями и движениями своих персонажей на экране.
ПК и мобильные устройства
WAVI Xtion для ПК от ASUS использовала базовое решение 3D-сенсоров PrimeSense, разработанное в первую очередь для просмотра мультимедийного контента, доступа к веб-сайтам и социальным сетям, когда ПК был подключен к телевизору в гостиной. [12]
[Датчик структуры] Мобильный 3D-датчик Occipital использовал специальный чип на основе решения PrimeSense для 3D-сенсоров. Сам датчик был разработан для легкого подключения к широкому спектру устройств, включая Apple iPad, планшеты Android и настольные платформы, такие как Windows, OS X и Linux. [13]
Интерактивные дисплеи
Firecube SMART от Firecube Public Multimedia: интерактивное мультимедийное решение для игр, презентаций и аттракционов в общественных местах. [14]
EyePlay от Eyeclick — интерактивная видеоигровая система с возможностями интерактивной 3D-проекции. [15]
ViiMotion от Covii: интерактивное программное устройство, созданное для предоставления общих или пользовательских интерактивных приложений с помощью компьютерного зрения. [16]
Интерактивный проектор от Ayotle : интерактивное решение, использующее датчик глубины, чтобы заставить любую реальную или воображаемую поверхность действовать как тактильное или бесконтактное интерактивное устройство. [17]
Finger Tracking MW от 3Gear Systems: точная система отслеживания, которая использует алгоритмы компьютерной графики для реконструкции точного положения рук пользователя с 3D-камер [18]
Розничная торговля
SmartFit от Styku: многоканальная розничная платформа для прогнозирования и визуализации посадки
Модуль Bodymetrics от Bodymetrics: полноценный 3D-сканер тела, разработанный для расчета измерений, которые затем анализируются и используются для подбора подходящей одежды. [19]
Matterport Pro 3D Camera от Matterport : потребительская 3D-камера, которая создает захватывающие панорамные туры с базовой 3D-сеткой. [20]
Робототехника
SAMI от Criif: Датчики PrimeSense позволяют гуманоидному роботу быть полностью автономным в доме или определенной среде. [21]
Здравоохранение
Ava от iRobot: автономная мобильная робототехническая платформа [22]
ASUS — единственный оставшийся источник датчиков на основе технологии PrimeSense
PrimeSense был одним из основателей OpenNI , отраслевой некоммерческой организации, созданной для сертификации и продвижения совместимости и взаимодействия устройств, приложений и промежуточного программного обеспечения Natural Interaction (NI). Первоначальный проект OpenNI был закрыт Apple , когда они купили программное обеспечение с открытым исходным кодом, но Occipital сохранила форкнутую версию OpenNI 2 активной в качестве программного обеспечения с открытым исходным кодом для SDK для их Structure Product. [ необходима цитата ]
Компания предоставила технологию 3D-сенсоров для первого Kinect , ранее известного как Project Natal . [25] [26]
Награды
Компания была выбрана журналом MIT Technology Review как одна из 50 самых инновационных компаний мира 2011 года. [27]
PrimeSense победила в номинации «Команда дизайнеров года» по версии журнала EE Times за 2011 год в номинации «Креатив в электронике» (ACE) [28]
^ ab "PrimeSense - MIT Technology Review". 2.technologyreview.com . Получено 3 августа 2018 г. .
^ «Помимо Kinect, PrimeSense хочет внедрить 3D-сенсорику в более повседневные потребительские устройства». Venturebeat.com . 20 января 2013 г. Получено 3 августа 2018 г.
↑ Хестер, Блейк (14 января 2020 г.). «Все деньги мира не смогли бы сделать Kinect реальностью». Polygon . Получено 16 января 2020 г.
^ "Apple подтверждает приобретение стартапа PrimeSense, занимающегося 3-D-датчиками". Allthingsd.com . Получено 3 августа 2018 г.
^ "PrimeSense: управление движением за пределами Kinect". Forwardthinking.pcmag.com . Получено 3 августа 2018 г. .
^ ab "Технология - PrimeSense". Архивировано из оригинала 2013-11-02 . Получено 2013-02-26 .
^ «Как на самом деле работает Kinect на базе PrimeSense от Microsoft». Electronicdesign.com . 16 марта 2011 г. Получено 3 августа 2018 г.
^ "PrimeSense демонстрирует крошечный датчик Capri, жаждет будущего 3D-датчиков (практический опыт)". Engadget.com . Получено 3 августа 2018 г.
^ "PrimeSenseNite - Debian Wiki". Wiki.debian.org . Получено 3 августа 2018 г. .
^ "NiTE Middleware | LinkedIn". Архивировано из оригинала 2013-04-08.
^ Перлрот, Николь. «Для PrimeSense Kinect от Microsoft — это только начало». Forbes.com . Получено 3 августа 2018 г. .
^ "Asus, PrimeSense представляет датчики движения для ПК". Tomshardware.com . 3 января 2011 г. Получено 3 августа 2018 г.
^ "Официальный магазин датчиков структуры — дайте вашему iPad 3D-зрение". structure.io . Получено 3 августа 2018 г. .
^ www.firecube-multimedia.com/lang/en Архивировано 08.01.2015 на Wayback Machine
^ "BEAM By EyeClick - Интерактивная игровая проекционная система". BEAM By EyeClick . Получено 3 августа 2018 г.
^ "ViiMotion - Интерактивное программное устройство от Covii". Vimeo . Получено 3 августа 2018 г.
^ "Новый сенсорный экран Ayotle AnyTouch 3D Tactile - 3D Visualization World". Архивировано из оригинала 2016-03-07 . Получено 2013-02-26 .
^ "Точное отслеживание жестов рук с точностью до пальца - Remote Presence Magazine". Remotepresence.org . 18 октября 2012 г. Получено 3 августа 2018 г.
^ "Bodymetrics pods сканируют тела клиентов, чтобы получить мерки их одежды". Gizmag.com . 26 октября 2011 г. Получено 3 августа 2018 г.
^ "Matterport". Angel.co . Получено 3 августа 2018 г. .
^ "iRobot реорганизуется, формирует новое подразделение, ориентированное на Ava и другие новые технологии". Engadget.com . Получено 3 августа 2018 г.
^ "Microsoft называет израильскую PrimeSense партнером проекта Natal - Globes". Globes . 31 марта 2010 г. Получено 3 августа 2018 г.
↑ Такахаши, Дин (13 января 2011 г.). «PrimeSense поднимает раунд для чипов управления движением». Reuters.com . Получено 3 августа 2018 г. .
↑ Gohring, Nancy (29 июля 2010 г.). «Mundie: Microsoft's Research Depth Enabled Kinect». PC World . Получено 2 августа 2010 г.
^ Corp., Microsoft (10 марта 2010 г.). «PrimeSense поставляет технологию 3D-датчиков для «Project Natal» для Xbox 360». Microsoft . Получено 2 августа 2010 г.
^ "50 самых умных компаний 2017 года могут оказаться не тем, что вы думаете". Technologyreview.com . Получено 3 августа 2018 г.
^ "EE Times чествует победителей премии ACE Award 2011". Архивировано из оригинала 2012-10-14 . Получено 2013-02-26 .
^ "Пионеры технологий 2013". Reports.weforum.org . Получено 3 августа 2018 г. .
Внешние ссылки
PrimeSense: за пределами Натала
Kinect: компания, стоящая за технологией, объясняет, как она работает