Kinect — это снятая с производства линейка устройств ввода с датчиками движения , производимых Microsoft и впервые выпущенных в 2010 году. Устройства обычно содержат RGB- камеры, а также инфракрасные проекторы и детекторы, которые отображают глубину с помощью структурированного света или расчетов времени пролета , которые, в свою очередь, могут использоваться для выполнения распознавания жестов в реальном времени и обнаружения скелета тела, среди прочих возможностей. Они также содержат микрофоны, которые могут использоваться для распознавания речи и голосового управления .
Kinect изначально разрабатывался как периферийный контроллер движения для игровых консолей Xbox , отличавшийся от конкурентов (таких как Wii Remote от Nintendo и PlayStation Move от Sony ) тем, что не требовал физических контроллеров. Первое поколение Kinect было основано на технологии израильской компании PrimeSense и представлено на E3 2009 как периферийное устройство для Xbox 360 под кодовым названием « Project Natal ». Впервые он был выпущен 4 ноября 2010 года и был продан тиражом в восемь миллионов единиц за первые 60 дней доступности. Большинство игр, разработанных для Kinect, были казуальными , ориентированными на семью, что помогло привлечь новую аудиторию к Xbox 360, но не привело к широкому принятию существующей общей пользовательской базой консоли.
В рамках презентации в 2013 году преемника Xbox 360, Xbox One , Microsoft представила версию Kinect второго поколения с улучшенными возможностями отслеживания. Microsoft также объявила, что Kinect станет обязательным компонентом консоли и что он не будет работать, если не подключено периферийное устройство. Требование оказалось спорным среди пользователей и критиков из-за проблем с конфиденциальностью, что побудило Microsoft отказаться от решения. Тем не менее, Microsoft все еще включала новый Kinect в консоли Xbox One после их запуска в ноябре 2013 года. Рынок игр на основе Kinect все еще не появился после запуска Xbox One; позже Microsoft предложила комплекты оборудования Xbox One без включенного Kinect, а более поздние версии консоли удалили выделенные порты, используемые для его подключения (вместо этого требовался USB-адаптер с питанием). Microsoft прекратила производство Kinect для Xbox One в октябре 2017 года.
Kinect также использовался как часть неигровых приложений в академических и коммерческих средах, поскольку он был дешевле и надежнее других технологий определения глубины в то время. Хотя Microsoft изначально возражала против таких приложений, позже она выпустила комплекты средств разработки программного обеспечения (SDK) для разработки приложений Microsoft Windows , использующих Kinect. В 2020 году Microsoft выпустила Azure Kinect как продолжение технологии, интегрированной с платформой облачных вычислений Microsoft Azure . Часть технологии Kinect также использовалась в проекте Microsoft HoloLens . Microsoft прекратила выпуск комплектов средств разработки Azure Kinect в октябре 2023 года. [12] [13]
Истоки Kinect появились около 2005 года, когда поставщики технологий начали разрабатывать камеры с датчиками глубины . Microsoft ранее интересовались 3D-камерой для линейки Xbox, но поскольку технология не была доработана, поместили ее в «Boneyard», коллекцию возможных технологий, над которыми они не могли немедленно работать. [14]
В 2005 году компания PrimeSense была основана технически подкованными математиками и инженерами из Израиля для разработки «следующей большой вещи» для видеоигр, включающей камеры, которые могли бы отображать человеческое тело перед ними и распознавать движения рук. Они продемонстрировали свою систему на конференции разработчиков игр 2006 года, где Алекс Кипман из Microsoft , генеральный менеджер по аппаратной инкубации, увидел потенциал в технологии PrimeSense для системы Xbox. Microsoft начала обсуждать с PrimeSense то, что необходимо сделать, чтобы сделать их продукт более удобным для потребителя: требовались не только улучшения возможностей камер с датчиками глубины, но и уменьшение размера и стоимости, а также средства для производства устройств в масштабе. PrimeSense провела следующие несколько лет, работая над этими улучшениями. [14]
Nintendo выпустила Wii в ноябре 2006 года. Центральной особенностью Wii был Wii Remote , портативное устройство, которое обнаруживалось Wii через сенсорную панель движения, установленную на экране телевизора, чтобы включить игры с управлением движением . Microsoft чувствовала давление со стороны Wii и начала более подробно изучать глубинное зондирование с помощью оборудования PrimeSense, но не смогла достичь желаемого уровня отслеживания движения. Хотя они могли определять жесты рук и чувствовать общую форму тела, они не могли отслеживать скелет. Отдельный путь в Microsoft рассматривал создание эквивалента Wii Remote, учитывая, что этот тип устройства может стать стандартизированным, подобно тому, как контроллеры с двумя джойстиками стали стандартной функцией. [14] Однако в конечном итоге целью Microsoft по-прежнему было удаление любого устройства между игроком и Xbox. [14]
Кудо Цунода и Даррен Беннетт присоединились к Microsoft в 2008 году и начали работать с Кипманом над новым подходом к измерению глубины с помощью машинного обучения для улучшения отслеживания скелета. Они продемонстрировали это внутри компании и установили, где, по их мнению, технология может быть через несколько лет, что привело к сильному интересу к финансированию дальнейшего развития технологии; это также произошло в то время, когда руководители Microsoft хотели отказаться от подхода к отслеживанию движения, подобного Wii, и отдали предпочтение решению по измерению глубины, чтобы представить продукт, который выходит за рамки возможностей Wii. Проект получил зеленый свет к концу 2008 года, а работа началась в 2009 году. [14]
Проект получил кодовое название « Project Natal » в честь бразильского города Натал , где родился Кипман. Кроме того, Кипман узнал латинское происхождение слова «natal», означающего «родиться», что отражало новые типы аудитории, которые они надеялись привлечь с помощью этой технологии. [15] Большая часть первоначальной работы была связана с этнографическими исследованиями, чтобы увидеть, как были распланированы, освещены домашние среды игроков в видеоигры и как владельцы Wiis использовали систему для планирования того, как будут использоваться устройства Kinect. Команда Microsoft обнаружила в ходе этого исследования, что угол наклона камеры, измеряющей глубину, нужно было бы либо регулировать вручную, либо для автоматического перемещения требовался бы дорогой двигатель. Высшее руководство Microsoft решило включить двигатель, несмотря на возросшую стоимость, чтобы не нарушать погружение в игру. Работа над проектом Kinect также включала упаковку системы для массового производства и оптимизацию ее производительности. Разработка оборудования заняла около 22 месяцев. [14]
Во время разработки оборудования Microsoft сотрудничала с разработчиками программного обеспечения для использования Kinect. Microsoft хотела создать игры, в которые могли бы играть семьи, поскольку Kinect мог ощущать несколько тел перед собой. Одной из первых внутренних игр, разработанных для устройства, была игра Kinect Adventures , разработанная Good Science Studio, которая была частью Microsoft Studios . Одним из игровых режимов Kinect Adventures был «Reflex Ridge», основанный на японской игре Brain Wall , где игроки пытаются за короткое время искривить свои тела, чтобы соответствовать фигурам стены, движущейся на них. Этот тип игры был ключевым примером типа интерактивности, который они хотели получить от Kinect, и его разработка помогла внести вклад в усовершенствования оборудования. [14]
Ближе к запланированному выпуску возникла проблема с широким тестированием Kinect в различных типах помещений и у разных людей, учитывая возраст, пол и расу среди других факторов, при этом сохраняя конфиденциальность деталей устройства. Microsoft участвовала в общекорпоративной программе, предлагающей сотрудникам брать домой устройства Kinect для их тестирования. Microsoft также привлекла другие неигровые подразделения, включая свои команды Microsoft Research , Microsoft Windows и Bing , чтобы помочь завершить систему. Microsoft создала собственное крупномасштабное производственное предприятие для массового производства устройств Kinect и их тестирования. [14]
.jpg/1280px-Steven_Spielberg_-_E3_2009_(3587914362).jpg)
Kinect был впервые представлен публике как «Project Natal» 1 июня 2009 года во время пресс-конференции Microsoft на E3 2009 ; режиссер Стивен Спилберг присоединился к Дону Мэттрику из Microsoft , чтобы представить технологию и ее потенциал. [14] [16] Во время конференции были представлены три демонстрации — Ricochet and Paint Party от Microsoft и Milo & Kate от Lionhead Studios, созданная Питером Молинье , — в то время как версия Burnout Paradise от Criterion Games с поддержкой Project Natal была показана во время выставки на E3. [17] [18] К E3 2009 технология скелетного картирования была способна одновременно отслеживать четырех человек, [19] [20] [21] [22] с извлечением признаков 48 скелетных точек на теле человека с частотой 30 Гц. [22] [23] Microsoft не объявила дату выпуска Project Natal на E3 2009, но подтвердила, что это произойдет после 2009 года, а скорее всего, в 2010 году, чтобы оставаться конкурентоспособной с Wii и PlayStation Move ( собственная система распознавания движения Sony Interactive Entertainment, использующая портативные устройства). [24]
В течение нескольких месяцев после E3 2009 появились слухи о том, что появилась новая консоль Xbox 360, связанная с Project Natal, либо в розничной конфигурации , включающей периферийное устройство, [25] [26] либо как аппаратная ревизия или обновление для поддержки периферийного устройства. [27] [28] Microsoft публично опровергла эти сообщения и неоднократно подчеркивала, что Project Natal будет полностью совместим со всеми консолями Xbox 360. Microsoft указала, что компания считает Project Natal важной инициативой, такой же фундаментальной для бренда Xbox, как Xbox Live , [24] и с запланированным запуском, схожим с запуском новой платформы консоли Xbox. [29] Вице-президент Microsoft Шейн Ким сказал, что компания не ожидает, что Project Natal продлит ожидаемый срок службы Xbox 360, который был запланирован на десять лет до 2015 года, и не задержит запуск преемника Xbox 360. [20] [30]
После выставки E3 2009 и в течение 2010 года члены команды Project Natal экспериментально адаптировали многочисленные игры к схемам управления на основе Kinect, чтобы помочь оценить удобство использования. Среди этих игр были Beautiful Katamari и Space Invaders Extreme , которые были продемонстрированы на Tokyo Game Show в сентябре 2009 года. [31] По словам Цуноды, добавление управления на основе Project Natal к уже существующим играм подразумевало значительные изменения кода и делало маловероятным, что существующие игры можно было бы исправить с помощью обновлений программного обеспечения для поддержки устройства. [32] Microsoft также расширила свое привлечение сторонних разработчиков, чтобы побудить их разрабатывать игры Project Natal. Такие компании, как Harmonix и Double Fine, быстро взялись за Project Natal, увидели в нем потенциал и взялись за разработку игр для устройства, таких как стартовая игра Dance Central от Harmonix. [14]
Хотя изначально планировалось, что его сенсорный блок будет содержать микропроцессор, который будет выполнять такие операции, как скелетное отображение системы, Microsoft сообщила в январе 2010 года, что сенсор больше не будет иметь выделенного процессора. Вместо этого обработка будет осуществляться одним из процессорных ядер Xenon CPU Xbox 360. [33] Примерно в это же время Кипмен подсчитал, что Kinect будет потреблять всего около 10–15 % вычислительной мощности Xbox 360. [34] Хотя это была небольшая часть возможностей Xbox 360, отраслевые обозреватели считали, что это еще больше указывает на трудности в адаптации уже существующих игр для использования Kinect, поскольку отслеживание движения увеличит высокую вычислительную нагрузку игры и превысит возможности Xbox 360. Эти обозреватели считали, что вместо этого отрасль будет разрабатывать игры, специфичные для функций Kinect. [33]
.jpg/1280px-DSC0311_(4704866551).jpg)
Во время пресс-конференции Microsoft на E3 2010 было объявлено, что Project Natal будет официально называться Kinect и будет выпущен в Северной Америке 4 ноября 2010 года. [35] Директор Xbox Live Стивен Тулуз заявил, что название представляет собой сочетание слов «kinetic» и «connection», ключевых аспектов инициативы Kinect. [36] [37] Microsoft и сторонние студии представили совместимые с Kinect игры во время выставки E3. [38] Также была представлена новая тонкая версия Xbox 360 , совпавшая с запуском Kinect, в которой был добавлен специальный порт для подключения периферийного устройства; [39] Kinect будет продаваться на запуске как отдельный аксессуар для существующих владельцев Xbox 360, а также как часть комплектов с новой тонкой Xbox 360. Все устройства включали Kinect Adventures в качестве игры в комплекте . [40] [41]
Microsoft продолжала совершенствовать технологию Kinect в течение нескольких месяцев, предшествовавших запуску Kinect в ноябре 2010 года. К запуску Кипман сообщил, что им удалось сократить использование Kinect процессора Xbox 360 с 10 до 15%, как сообщалось в январе 2010 года, до «однозначного процента». [42]
Директор по продуктам Xbox Аарон Гринберг заявил, что маркетинговая кампания Microsoft для Kinect будет иметь схожий масштаб с запуском консоли; [41] сообщалось, что компания выделила 500 миллионов долларов на рекламу периферийного устройства, такую как телевизионная и печатная реклама, кампании с Burger King [43] и Pepsi [ 44] и презентацию на Таймс-сквер в Нью-Йорке 3 ноября с выступлением Ne-Yo [ 45] Kinect был запущен в Северной Америке 4 ноября 2010 года; [2] в Европе 10 ноября 2010 года; [1] в Австралии, Новой Зеландии и Сингапуре 18 ноября 2010 года; [4] [46] [47] и в Японии 20 ноября 2010 года. [48]
По оценкам, за первые шестьдесят дней с момента выпуска было продано восемь миллионов устройств Kinect для Xbox 360, что позволило устройству попасть в Книгу рекордов Гиннесса как «Самое быстро продаваемое устройство потребительской электроники». [14] К марту 2011 года было продано более 10 миллионов. [14] Несмотря на кажущийся успех, его стартовые названия были в основном ориентированными на семью играми (которые могли быть разработаны с учетом функциональности и ограничений Kinect), которые могли привлечь новую аудиторию, но не имели такой же силы продаж, как крупные франшизы, такие как Battlefield и Call of Duty , которые были в первую очередь разработаны для контроллера Xbox 360. По оценкам, только 20% из 55 миллионов владельцев Xbox 360 приобрели Kinect. [14] Команда Kinect осознала некоторые недостатки более традиционных игр и Kinect и продолжила постоянную разработку устройства, которое будет выпущено как устройство второго поколения, например, сокращение задержки обнаружения движения и улучшение распознавания речи. Microsoft предоставила новости об этих изменениях сторонним разработчикам, чтобы помочь им предвидеть, как улучшения могут быть интегрированы в игры. [14]
Одновременно с улучшениями Kinect команда Microsoft по аппаратному обеспечению Xbox начала планировать Xbox One примерно в середине 2011 года. Частью ранних спецификаций Xbox One было то, что новое аппаратное обеспечение Kinect будет автоматически включено в консоль, чтобы разработчики знали, что аппаратное обеспечение Kinect будет доступно для любого Xbox One, и надеялись побудить разработчиков воспользоваться этим. [14] Xbox One был впервые официально анонсирован 23 мая 2013 года и показан более подробно на E3 2013 в июне. Microsoft заявила на этих мероприятиях, что Xbox One будет включать обновленное аппаратное обеспечение Kinect, и оно будет необходимо, чтобы быть подключенным в любое время для работы Xbox One. Это вызвало обеспокоенность в игровых СМИ: защитники конфиденциальности утверждали, что данные датчика Kinect могут быть использованы для целевой рекламы и для осуществления несанкционированного наблюдения за пользователями. В ответ на эти заявления Microsoft повторила, что пользователи могут отключить распознавание голоса и отслеживание движений Kinect, что данные Kinect не могут использоваться для рекламы в соответствии с ее политикой конфиденциальности , и что консоль не будет распространять пользовательский контент без разрешения. [49] [50] [51] [52] [53] [54] Также возникло несколько других проблем с исходным набором функций Xbox One, таких как требование постоянного подключения к Интернету, что вызвало волну негативной реакции потребителей на Microsoft. [14]
В августе 2013 года Microsoft объявила, что в ответ на негативную реакцию они внесли несколько изменений в запланированный выпуск Xbox One. Среди них было то, что система больше не будет требовать подключения устройства Kinect для работы, хотя все еще планировалось упаковывать Kinect со всеми системами Xbox One. Однако это также потребовало от Microsoft установить цену в 500 долларов США для системы Xbox One/Kinect при ее запуске в ноябре 2013 года, что на 100 долларов США больше, чем у конкурирующей PlayStation 4 , выпущенной в тот же период времени, которая не включала никакого оборудования для обнаружения движения. [14] Через несколько месяцев после выпуска Xbox One Microsoft решила выпустить систему Xbox One без Kinect в марте 2014 года по той же цене, что и PlayStation 4, посчитав, что Kinect для Xbox One не получил поддержки разработчиков, а продажи Xbox One отставали из-за более высокой цены системы, поставляемой в комплекте с Kinect. Ричард Ирвинг, менеджер программной группы, курировавший Kinect, сказал, что Microsoft посчитала более важным предоставить разработчикам и потребителям возможность разработки или покупки Kinect, а не навязывать им это устройство. [14]
Удаление Kinect из розничной упаковки Xbox One стало началом быстрого упадка и постепенного отказа от этого устройства в Microsoft. Разработчики, такие как Harmonix, которые изначально ориентировались на игры для использования Xbox One, отложили эти игры до тех пор, пока не узнали, что есть достаточная база установок Kinect, чтобы оправдать выпуск, что привело к отсутствию игр для Kinect и снижению любого потребительского желания покупать отдельное устройство. [14] Microsoft стала медвежьей в отношении Kinect, не упомянув об устройстве на E3 2015 и объявив на E3 2016 , что грядущая аппаратная версия Xbox One, Xbox One S , не будет иметь выделенного порта Kinect; Microsoft предложила USB-адаптер для Kinect, предоставленный бесплатно в течение начального рекламного периода после запуска консоли. [55] Более мощный Xbox One X также не имел порта Kinect и требовал этого адаптера. [56] Несмотря на то, что разработчики все еще выпускали игры с поддержкой Kinect для Xbox One, отсутствие заявлений Microsoft относительно Kinect в этот период привело к утверждениям о том, что Kinect был мертвым проектом Microsoft. [57] [58]
Microsoft официально объявила, что прекратит производство Kinect для Xbox One 25 октября 2017 года. [10] Microsoft в конечном итоге прекратила выпуск адаптера в январе 2018 года, заявив, что они переключаются на производство других аксессуаров для Xbox One и персональных компьютеров, которые были более востребованы. СМИ считают, что именно в этот момент Microsoft прекратила работу над Kinect для платформы Xbox. [14] [56]
В то время как Kinect для платформы Xbox иссяк, Kinect использовался в академических и других приложениях примерно с 2011 года. Функциональность устройства вместе с его низкой стоимостью в 150 долларов США рассматривалась как недорогое средство для добавления глубинного зондирования к существующим приложениям, компенсируя высокую стоимость и ненадежность других вариантов 3D-камер в то время. В робототехнике глубинное зондирование Kinect позволило бы роботам определять форму и приблизительное расстояние до препятствий и маневрировать вокруг них. [59] В области медицины Kinect можно было бы использовать для контроля формы и осанки тела количественным образом, чтобы обеспечить принятие более совершенных решений в области здравоохранения. [60]
Примерно в ноябре 2010 года, после запуска Kinect, учёные, инженеры и любители смогли взломать Kinect, чтобы определить, какое оборудование и внутреннее программное обеспечение он использовал, что привело к тому, что пользователи узнали, как подключить и управлять Kinect с Microsoft Windows и OS X через USB, который имеет незащищённые данные с различных элементов камеры, которые можно было считать. Это в дальнейшем привело к прототипным демонстрациям других возможных приложений, таких как основанный на жестах пользовательский интерфейс для операционной системы, похожий на тот, что показан в фильме « Особое мнение» , а также порнографические приложения. [61] [62] Это отразило похожую работу по взлому Wii Remote несколькими годами ранее, чтобы использовать его недорогое оборудование для более продвинутых приложений, выходящих за рамки игрового процесса. [63]
Компания Adafruit Industries , предвидя некоторые из возможных применений Kinect за пределами игр, выпустила конкурс безопасности, связанный с Kinect, предлагая призовые деньги за успешную разработку комплекта разработки программного обеспечения с открытым исходным кодом (SDK) и аппаратных драйверов для Kinect, который стал известен как Open Kinect. [64] Компания Adafruit назвала победителя, Гектора Мартина , 10 ноября 2010 года, [65] [66] который создал драйвер Linux , позволяющий использовать как RGB-камеру, так и функции чувствительности к глубине устройства. [67] [68] Позже было обнаружено, что Джонни Ли , основной член команды разработчиков Kinect от Microsoft, тайно обратился к Adafruit с идеей конкурса по разработке драйверов и лично финансировал его. [69] Ли сказал об усилиях по открытию Kinect, что «Это показывает нам будущее... Это происходит сегодня, и это происходит завтра». и привлек Adafruit к участию в конкурсе, поскольку он был разочарован попытками убедить руководителей Microsoft изучить неигровое направление для Kinect. [70]
Microsoft изначально не согласилась с тем, что пользователи взламывают Kinect, заявив, что они включат дополнительные меры безопасности в будущие версии устройства, чтобы предотвратить такие взломы. [61] Однако к концу ноября 2010 года Microsoft изменила свою первоначальную позицию и поддержала внешние усилия по разработке SDK. [71] Кипман в интервью NPR сказал:
Первое, о чем стоит поговорить, это то, что Kinect на самом деле не был взломан. Взлом означает, что кто-то добрался до наших алгоритмов, которые находятся внутри Xbox, и смог фактически использовать их, чего не произошло. Или это означает, что вы поместили устройство между сенсором и Xbox для обмана, чего также не произошло. Это то, что мы называем взломом, и это то, во что мы вложили массу труда и усилий, чтобы убедиться, что это на самом деле не происходит. Произошло то, что кто-то написал драйвер с открытым исходным кодом для ПК, который по сути открывает USB-соединение, которое мы не защитили по замыслу, и считывает входные данные с сенсора. Сенсор, опять же, как я уже говорил ранее, имеет глаза и уши, и это целый набор шума, который кто-то должен взять и превратить в сигнал.
— Алекс Кипман , официально выступая в программе Science Friday на NPR [72] [71]
PrimeSense вместе с робототехнической фирмой Willow Garage и разработчиком игр Side-Kick запустили OpenNI , некоммерческую группу по разработке портативных драйверов для Kinect и других устройств с естественным интерфейсом (NI), в ноябре 2010 года. Первый набор драйверов под названием NITE был выпущен в декабре 2010 года. [73] [74] PrimeSense также работала с Asus над разработкой устройства обнаружения движения, которое конкурирует с Kinect для персональных компьютеров. Полученный продукт, Wavi Xtion, был выпущен в Китае в октябре 2011 года. [75] [76]
В феврале 2011 года Microsoft объявила, что планирует выпустить собственный SDK для Kinect в течение нескольких месяцев, и он был официально выпущен 16 июня 2011 года, но был ограничен некоммерческим использованием. [77] [78] SDK позволял пользователям получать доступ к системе распознавания скелетных движений для двух человек и массиву микрофонов Kinect, функциям, которые не были частью предыдущего Open Kinect SDK. [79] Коммерческий интерес к Kinect все еще был силен, и Дэвид Деннис, менеджер по продуктам в Microsoft, заявил: «Есть сотни организаций, с которыми мы работаем, чтобы помочь им определить, что возможно с этой технологией». [80] Microsoft запустила свою программу Kinect для Windows 31 октября 2011 года, выпустив новый SDK для небольшого числа компаний, включая Toyota , Houghton Mifflin и Razorfish, чтобы исследовать, что возможно. [80] На выставке потребительской электроники 2012 года в январе Microsoft объявила, что выпустит специализированное устройство Kinect для Windows вместе с коммерческим SDK 1 февраля 2012 года. Устройство включало некоторые аппаратные улучшения, включая поддержку «ближнего режима» для распознавания объектов на расстоянии около 50 сантиметров (20 дюймов) перед камерами. Устройство Kinect для Windows было выставлено на продажу по цене 250 долларов США , что на 100 долларов США больше, чем оригинальный Kinect, поскольку Microsoft посчитала, что Xbox 360 Kinect субсидируется за счет покупок игр, подписок Xbox Live и других расходов. [70] На запуске Microsoft заявила, что более 300 компаний из более чем 25 стран работают над приложениями, готовыми к Kinect, с новым устройством. [81]
С первоначальным анонсом пересмотренного Kinect для Xbox One в 2013 году Microsoft также подтвердила, что у нее будет второе поколение Kinect для Windows на основе обновленной технологии Kinect к 2014 году. [82] Новый Kinect 2 для Windows был выпущен 15 июля 2014 года по цене 200 долларов США . [83] Microsoft решила прекратить выпуск оригинального Kinect для Windows к концу 2014 года. [84] Однако в апреле 2015 года Microsoft объявила, что они также прекращают выпуск Kinect 2 для Windows и вместо этого направляют коммерческих пользователей на использование Kinect для Xbox One, который, по словам Microsoft, «работает идентично». Microsoft заявила, что спрос на Kinect 2 для Windows высок и его трудно удовлетворить, одновременно выполняя заказы на Kinect для Xbox One, и что они обнаружили, что коммерческие разработчики успешно используют Kinect для Xbox One в своих приложениях без проблем. [85]
В связи с ослаблением внимания Microsoft к Kinect, в 2013 году PrimeSense была куплена Apple, Inc. , которая включила части технологии в свою систему Face ID для устройств iOS . [86] [87]
Хотя Kinect был отменен, его идеи помогли подтолкнуть Microsoft к более глубокому изучению доступности для Xbox и его игр. По словам Фила Спенсера , главы Xbox в Microsoft, они получили положительные отзывы от родителей детей с ограниченными возможностями и детей с нарушениями, которые были рады, что Kinect позволил их детям играть в видеоигры. Эти усилия привели к разработке Xbox Adaptive Controller , выпущенного в 2018 году, как одного из усилий Microsoft в этой области. [88]
Microsoft отказалась от идеи Kinect для видеоигр, но все еще исследовала потенциал Kinect за пределами этого. Директор по коммуникациям Microsoft Грег Салливан заявил в 2018 году, что «я думаю, что одна из вещей, которую начинают понимать, заключается в том, что Kinect никогда не был просто игровым периферийным устройством... Он всегда был чем-то большим». [89] Часть технологии Kinect была интегрирована в HoloLens от Microsoft , впервые выпущенный в 2016 году. [90]
Microsoft объявила, что работает над новой версией аппаратной модели Kinect для неигровых приложений, которая будет интегрирована с их облачными вычислительными службами Azure в мае 2018 года. Использование облачных вычислений для разгрузки части вычислительной работы с Kinect, а также более мощные функции, предоставляемые Azure, такие как искусственный интеллект, улучшат точность определения глубины и снизят энергопотребление, а также приведут к созданию более компактных устройств, как предполагала Microsoft. [91] Устройство Azure Kinect было выпущено 27 июня 2019 года по цене 400 долларов США , в то время как SDK для устройства был выпущен в феврале 2019 года. [92]
Sky UK анонсировала новую линейку телевизионных устройств Sky Glass, которая будет запущена в 2022 году и в которой будет реализована технология Kinect в партнерстве с Microsoft. Используя функции Kinect, зритель сможет управлять телевизором с помощью элементов управления движением и аудиокоманд, а также поддерживает социальные функции, такие как социальный просмотр . [93]
Microsoft объявила, что комплект оборудования Azure Kinect будет прекращен в октябре 2023 года, и будет направлять пользователей к сторонним поставщикам для приобретения запасных частей. [94]
Технология определения глубины и движения, лежащая в основе Kinect, реализуется посредством его определения глубины. Оригинальный Kinect для Xbox 360 использовал для этого структурированный свет : устройство использовало ближний инфракрасный рисунок, проецируемый на пространство перед Kinect, в то время как инфракрасный датчик улавливал отраженный световой рисунок. Световой рисунок деформируется относительной глубиной объектов перед ним, и математика может использоваться для оценки этой глубины на основе нескольких факторов, связанных с аппаратной компоновкой Kinect. В то время как другие технологии определения глубины структурного света использовали несколько световых рисунков, Kinect использовал всего один, чтобы достичь высокой скорости определения глубины в 30 кадров в секунду. Kinect для Xbox One перешел на использование измерений времени пролета . Инфракрасный проектор на Kinect посылает модулированный инфракрасный свет, который затем улавливается датчиком. Инфракрасный свет, отражающийся от более близких объектов, будет иметь более короткое время полета, чем более удаленные, поэтому инфракрасный датчик фиксирует, насколько сильно шаблон модуляции был деформирован с момента полета, пиксель за пикселем. Измерения глубины по времени полета могут быть более точными и рассчитаны за более короткий промежуток времени, что позволяет обнаруживать больше кадров в секунду. [95]
После того, как Kinect получает попиксельное изображение глубины, Kinect использует здесь тип обнаружения края , чтобы отделить более близкие объекты от фона кадра, включая входные данные от обычной камеры видимого света. Затем устройство пытается отслеживать любые движущиеся объекты из этого, предполагая, что на изображении будут двигаться только люди, и изолирует человеческие фигуры из изображения. Программное обеспечение устройства, с помощью искусственного интеллекта, выполняет сегментацию фигур, чтобы попытаться идентифицировать определенные части тела, такие как голова, руки и кисти, и отслеживать эти сегменты по отдельности. Эти сегменты используются для построения 20-точечного скелета человеческого тела, который затем может использоваться игрой или другим программным обеспечением для определения того, какие действия выполнил человек. [96]
Kinect для Xbox 360 был комбинацией программного обеспечения и оборудования, созданного Microsoft . Оборудование включало ряд чипсетных технологий израильского разработчика PrimeSense , который разработал систему, состоящую из инфракрасного проектора и камеры, а также специального микрочипа , который генерирует сетку, с помощью которой можно определить местоположение близлежащего объекта в трех измерениях. [97] [98] [99] Эта система 3D-сканера , называемая Light Coding [100], использует вариант 3D-реконструкции на основе изображений . [101] [102]
Датчик Kinect представляет собой горизонтальную планку, соединенную с небольшим основанием с помощью моторизованного шарнира, и предназначен для размещения в продольном направлении над или под видеодисплеем. Устройство оснащено « камерой RGB , датчиком глубины и массивом микрофонов , работающим под управлением фирменного программного обеспечения» [103] , которые обеспечивают возможности захвата движений всего тела в 3D , распознавания лиц и распознавания голоса . На момент запуска распознавание голоса было доступно только в Японии, Великобритании, Канаде и Соединенных Штатах. Материковая Европа получила эту функцию позже весной 2011 года. [104] В настоящее время распознавание голоса поддерживается в Австралии , Канаде , Франции , Германии , Ирландии , Италии , Японии , Мексике , Новой Зеландии , Великобритании и Соединенных Штатах . Массив микрофонов датчика Kinect позволяет Xbox 360 проводить локализацию акустического источника и подавление окружающего шума , что позволяет делать такие вещи, как чат без гарнитуры через Xbox Live . [105]
Датчик глубины состоит из инфракрасного лазерного проектора в сочетании с монохромным датчиком CMOS , который захватывает видеоданные в 3D при любых условиях окружающего освещения . [105] [19] Диапазон чувствительности датчика глубины регулируется, а программное обеспечение Kinect способно автоматически калибровать датчик на основе игрового процесса и физического окружения игрока, приспосабливаясь к наличию мебели или других препятствий. [23]
Описанная сотрудниками Microsoft как основное новшество Kinect, [20] [106] [107] программная технология обеспечивает расширенное распознавание жестов , лиц и голоса. [21] Согласно информации, предоставленной розничным продавцам, Kinect способен одновременно отслеживать до шести человек, включая двух активных игроков, для анализа движения с извлечением признаков 20 суставов на игрока. [108] Однако PrimeSense заявила, что количество людей, которых устройство может «видеть» (но не обрабатывать как игроков), ограничено только тем, сколько людей поместится в поле зрения камеры. [109]
Обратное проектирование [110] определило, что различные датчики Kinect выводят видео с частотой кадров ≈9 Гц до 30 Гц в зависимости от разрешения. Видеопоток RGB по умолчанию использует 8-битное разрешение VGA (640 × 480 пикселей ) с цветовым фильтром Байера , но оборудование способно работать с разрешениями до 1280x1024 (при более низкой частоте кадров) и другими цветовыми форматами, такими как UYVY . Видеопоток с измерением монохромной глубины имеет разрешение VGA (640 × 480 пикселей) с 11-битной глубиной , что обеспечивает 2048 уровней чувствительности. Kinect также может напрямую передавать вид со своей ИК-камеры (т. е. до того, как он будет преобразован в карту глубины) как видео 640x480 или 1280x1024 при более низкой частоте кадров. Датчик Kinect имеет практический предел дальности действия 1,2–3,5 м (3,9–11,5 фута) при использовании с программным обеспечением Xbox. Площадь, необходимая для игры в Kinect, составляет примерно 6 м2 , хотя датчик может поддерживать отслеживание в расширенном диапазоне примерно 0,7–6 м (2,3–19,7 фута). Датчик имеет угловое поле зрения 57 ° по горизонтали и 43 ° по вертикали, в то время как моторизованный шарнир способен наклонять датчик до 27 ° вверх или вниз. Горизонтальное поле датчика Kinect на минимальном расстоянии просмотра ≈0,8 м (2,6 фута) составляет, таким образом, ≈87 см (34 дюйма), а вертикальное поле — ≈63 см (25 дюймов), что приводит к разрешению чуть более 1,3 мм (0,051 дюйма) на пиксель. Микрофонная решетка состоит из четырех микрофонных капсюлей [111] и работает с каждым каналом, обрабатывающим 16- битный звук с частотой дискретизации 16 кГц . [108]
Поскольку моторизованный механизм наклона сенсора Kinect требует больше энергии, чем могут обеспечить порты USB Xbox 360, [112] устройство использует фирменный разъем, объединяющий USB-связь с дополнительным питанием. Модернизированные модели Xbox 360 S включают специальный порт AUX для размещения разъема, [113] в то время как более старые модели требуют специального кабеля питания (входит в комплект сенсора) [111] , который разделяет соединение на отдельные USB и разъемы питания; питание подается от сети через адаптер переменного тока. [112]
Kinect для Windows — это модифицированная версия устройства Xbox 360, которая была впервые выпущена 1 февраля 2012 года вместе с SDK для коммерческого использования. [70] [114] Аппаратное обеспечение включало улучшенные компоненты для устранения шума вдоль USB и других кабельных путей, а также улучшения в системе камеры с датчиком глубины для обнаружения объектов на близком расстоянии, вплоть до 50 сантиметров (20 дюймов), в новом «Near Mode». [70]
SDK включал совместимые с Windows 7 драйверы ПК для устройства Kinect. Он предоставлял разработчикам возможности Kinect для создания приложений на C++ , C# или Visual Basic с использованием Microsoft Visual Studio 2010 и включал следующие функции:
В марте 2012 года Крейг Эйслер, генеральный менеджер Kinect для Windows, заявил, что почти 350 компаний работают с Microsoft над пользовательскими приложениями Kinect для Microsoft Windows. [116]
В марте 2012 года Microsoft объявила, что следующая версия Kinect для Windows SDK будет доступна в мае 2012 года. Kinect для Windows 1.5 был выпущен 21 мая 2012 года. Он добавляет новые функции, поддерживает множество новых языков и дебютирует еще в 19 странах. [117] [118]
Kinect for Windows SDK для сенсора первого поколения обновлялся ещё несколько раз: версия 1.6 была выпущена 8 октября 2012 г. [122] , версия 1.7 — 18 марта 2013 г. [123] и версия 1.8 — 17 сентября 2013 г. [124]
Обновленная версия Kinect была выпущена 22 ноября 2013 года для Xbox One . Она использует широкоугольную камеру времени пролета и обрабатывает 2 гигабита данных в секунду для считывания своего окружения. Новый Kinect обладает большей точностью, в три раза большей, чем его предшественник, и может отслеживать без видимого света, используя активный ИК- датчик. Он имеет на 60% более широкое поле зрения с минимальным рабочим расстоянием 0,91 метра (3,0 фута) от датчика по сравнению с 1,83 метра (6,0 футов) для оригинального Kinect [125] , и может отслеживать до 6 скелетов одновременно. Он также может определять частоту сердечных сокращений игрока , выражение лица, положение и ориентацию 25 отдельных суставов (включая большие пальцы), вес, приложенный к каждой конечности, скорость движений игрока и отслеживать жесты, выполняемые с помощью стандартного контроллера. Цветная камера снимает видео 1080p, которое может отображаться в том же разрешении, что и экран просмотра, что позволяет использовать широкий спектр сценариев. Помимо улучшения видеосвязи и приложений видеоаналитики, это обеспечивает стабильный ввод, на основе которого можно создавать интерактивные приложения. Микрофон Kinect используется для предоставления голосовых команд для таких действий, как навигация, запуск игр и вывод консоли из спящего режима . [126] [127] Рекомендуемый рост игрока составляет не менее 40 дюймов, что примерно соответствует росту детей 4 лет.+1 ⁄ 2 года и старше. [128] [129]
Все консоли Xbox One изначально поставлялись с включенным Kinect. [54] В июне 2014 года стали доступны комплекты без Kinect, [130] а также обновленный Xbox One SDK, позволяющий разработчикам игр явно отключать отслеживание скелета Kinect, освобождая системные ресурсы, которые ранее были зарезервированы для Kinect, даже если он был отключен или отключен. [130] [131] Поскольку интерес к Kinect в 2014 году пошел на убыль, более поздние версии оборудования Xbox One, включая Xbox One S и Xbox One X , отказались от выделенного порта Kinect, требуя от пользователей приобретения USB 3.0 и адаптера переменного тока для использования Kinect для Xbox One. [132] [133]
Отдельный Kinect для Xbox One, поставляемый в комплекте с цифровой копией Dance Central Spotlight , был выпущен 7 октября 2014 года. [134]
Считавшийся провалом на рынке по сравнению с Kinect для Xbox 360, продукт Kinect для Xbox One был снят с производства 25 октября 2017 года. Производство кабеля-адаптера также было прекращено в январе 2018 года. [9]
Выпущенный 15 июля 2014 года, Kinect 2 для Windows основан на Kinect для Xbox One и считается заменой оригинального Kinect для Windows. Он также был переупакован как «Kinect для Windows v2». Он почти идентичен, за исключением удаления брендинга Xbox, и включает адаптер USB 3.0/AC. Он был выпущен вместе с версией 2.0 Windows SDK для платформы. Рекомендуемая розничная цена составляла 199 долларов США . [83] [8] [135] [85] Microsoft считает Kinect 2 для Windows эквивалентным по производительности версии Xbox One.
В апреле 2015 года из-за трудностей с удовлетворением спроса на производство Kinect для Xbox One эта версия была снята с производства. Microsoft рекомендовала коммерческим пользователям использовать версию Xbox One с USB-адаптером. [85] [136] [8] [135] [137]
7 мая 2018 года Microsoft анонсировала новую итерацию технологии Kinect, разработанную в первую очередь для корпоративного программного обеспечения и использования искусственного интеллекта . Она разработана на основе облачной платформы Microsoft Azure и призвана «использовать богатство Azure AI для значительного улучшения понимания и операций». [138] [139] Она имеет меньший форм-фактор, чем итерации Xbox Kinect, и оснащена 12-мегапиксельной камерой, датчиком глубины времени пролета, также используемым в HoloLens 2 , и семью микрофонами. Комплект для разработки был анонсирован в феврале 2019 года. [140] [141]
Требуя не менее 190 МБ свободного места на диске, [142] системное программное обеспечение Kinect позволяет пользователям управлять пользовательским интерфейсом консоли Xbox 360 Dashboard с помощью голосовых команд и жестов рук. Такие методы, как распознавание голоса и распознавание лиц, используются для автоматической идентификации пользователей. Среди приложений для Kinect есть Video Kinect, который позволяет вести голосовой чат или видеочат с другими пользователями Xbox 360 или пользователями Windows Live Messenger . Приложение может использовать функциональность отслеживания Kinect и моторизованный поворот сенсора Kinect, чтобы удерживать пользователей в кадре, даже когда они перемещаются. Другие приложения с поддержкой Kinect включают ESPN , Zune Marketplace , [142] Netflix , Hulu Plus [143] и Last.fm. [144] Microsoft позже подтвердила, что все будущие приложения должны будут иметь функциональность Kinect для сертификации. [145]
Xbox One изначально поставлялся в комплекте с Kinect; оригинальное программное обеспечение пользовательского интерфейса Xbox One имело аналогичную поддержку функций Kinect, как и программное обеспечение Xbox 360, таких как голосовые команды, идентификация пользователя с помощью скелетного или голосового распознавания и команды, управляемые жестами, хотя эти функции могли быть полностью отключены из-за проблем с конфиденциальностью. [146] Однако это сделало более традиционную навигацию с использованием контроллера бессистемной. В мае 2014 года, когда Microsoft объявила о выпуске систем Xbox One без Kinect, компания также объявила о планах изменить программное обеспечение системы Xbox One, чтобы удалить функции Kinect. [147] Поддержка Kinect в программном обеспечении была полностью удалена к ноябрю 2015 года. [148]
Игры для Xbox 360, требующие Kinect, упакованы в специальные фиолетовые футляры (в отличие от зеленых футляров, используемых всеми другими играми для Xbox 360) и содержат заметный логотип «Требуется сенсор Kinect» на передней обложке. Игры, которые включают функции, использующие Kinect, но не требуют его для стандартного игрового процесса, имеют брендинг «Лучше с сенсором Kinect» на передней обложке. [149]
Kinect был запущен 4 ноября 2010 года с 17 названиями. [150] Сторонние издатели доступных и анонсированных игр Kinect включают, среди прочего, Ubisoft , Electronic Arts , LucasArts , THQ , Activision , Konami , Sega , Capcom , Namco Bandai и MTV Games . Наряду с розничными играми, есть также некоторые названия Xbox Live Arcade , для которых требуется периферийное устройство.
На выставке E3 2011 компания Microsoft анонсировала Kinect Fun Labs : коллекцию различных гаджетов и мини-игр, доступных из панели управления Xbox 360. В число этих гаджетов входят Build A Buddy , Air Band , Kinect Googly Eyes , Kinect Me , Bobblehead , Kinect Sparkler , Junk Fu [151] и Avatar Kinect . [152] [153] [154]
Многочисленные разработчики изучают возможные применения Kinect, выходящие за рамки основного назначения системы — игр, что стало еще более возможным после выпуска Kinect SDK компанией Microsoft. [155]
Например, Филипп Роббель из Массачусетского технологического института объединил Kinect с iRobot Create , чтобы составить карту комнаты в 3D и заставить робота реагировать на жесты человека, [156] в то время как команда MIT Media Lab работает над расширением JavaScript для Google Chrome под названием depthJS, которое позволяет пользователям управлять браузером с помощью жестов рук. [157] Другие программисты, включая Robot Locomotion Group в Массачусетском технологическом институте, используют драйверы для разработки пользовательского интерфейса контроллера движения, похожего на тот, который представлен в Minority Report . [158] Разработчики MRPT интегрировали драйверы с открытым исходным кодом в свои библиотеки и предоставили примеры живого 3D-рендеринга и базового 3D-визуального SLAM . [159] Другая команда продемонстрировала приложение, которое позволяет пользователям Kinect играть на виртуальном пианино, постукивая пальцами по пустому столу. [160] Оливер Крейлос, исследователь из Калифорнийского университета в Дэвисе , применил технологию для улучшения трехмерных видеоконференций в реальном времени , к которой проявил интерес НАСА . [161]
Александр Алахи из EPFL представил систему видеонаблюдения, которая объединяет несколько устройств Kinect для отслеживания групп людей даже в полной темноте. [162] Компании So touch и Evoluce разработали программное обеспечение для презентаций Kinect, которым можно управлять жестами рук; среди его функций — режим мультисенсорного масштабирования. [163] В декабре 2010 года была запущена бесплатная публичная бета-версия программного обеспечения HTPC KinEmote ; оно позволяет осуществлять навигацию по меню Boxee и XBMC с помощью датчика Kinect. [164] Соруш Фалахати написал приложение, которое можно использовать для создания стереоскопических 3D-изображений с помощью датчика Kinect. [165]
При отслеживании движений человека Kinect может страдать от окклюзии, когда некоторые суставы человеческого тела закрыты и не могут точно отслеживаться скелетной моделью Kinect. [166] Поэтому объединение его данных с другими датчиками может обеспечить более надежное отслеживание скелетной модели. Например, в исследовании использовался неароматизированный фильтр Калмана (UKF) для объединения данных о положении плечевого, локтевого и запястного суставов Kinect 3D с данными, полученными от двух инерциальных измерительных блоков (IMU), размещенных на верхней и нижней части руки человека. [167] Результаты показали улучшение точности отслеживания положения суставов до 50%. Помимо решения проблемы окклюзии, поскольку частота дискретизации IMU составляла 100 Гц (по сравнению с ~30 Гц для Kinect), улучшение положения скелета было более очевидным во время быстрых и динамичных движений.
Kinect также демонстрирует убедительный потенциал для использования в медицине. Исследователи из Университета Миннесоты использовали Kinect для измерения ряда симптомов расстройств у детей, создавая новые способы объективной оценки для выявления таких состояний, как аутизм, синдром дефицита внимания и обсессивно-компульсивное расстройство. [168] Несколько групп сообщили об использовании Kinect для интраоперационного обзора медицинской визуализации, что позволяет хирургу получать доступ к информации без загрязнения. [169] [170] Эта техника уже используется в Центре медицинских наук Саннибрук в Торонто , где врачи используют ее для управления визуализацией во время онкологической операции. [171] По крайней мере одна компания, GestSure Technologies, занимается коммерциализацией такой системы. [172]
Лаборатория реактивного движения НАСА (JPL) зарегистрировалась в программе Kinect для разработчиков Windows в ноябре 2013 года, чтобы использовать новый Kinect для управления роботизированной рукой в сочетании с гарнитурой виртуальной реальности Oculus Rift , создав «самый захватывающий интерфейс», созданный подразделением на сегодняшний день. [173]
После своего выпуска Kinect получил в целом положительные отзывы от рецензентов и критиков. IGN дал устройству 7,5 из 10, заявив, что «Kinect может быть огромным развлечением для случайных игроков, а креативная концепция без контроллера, несомненно, привлекательна», хотя и добавил, что за «$149,99 дополнительная камера слежения за движением для Xbox 360 — это сложная продажа, особенно учитывая, что начальная версия Xbox 360 стоит всего $199,99». [176] Game Informer оценил Kinect на 8 из 10, похвалив технологию, но отметив, что к ней нужно привыкнуть, а пространственные требования могут стать препятствием. [175] Computer and Video Games назвал устройство технологической жемчужиной и похвалил управление жестами и голосом, в то же время раскритиковав стартовую линейку и Kinect Hub. [174]
Обзор CNET указал на то, как Kinect поддерживает активность игроков с помощью своего полного распознавания движений тела, но раскритиковал кривую обучения, дополнительный источник питания, необходимый для старых консолей Xbox 360, и требования к пространству. [177] Engadget также перечислил большие требования к пространству как отрицательные, наряду с линейкой Kinect для запуска и медлительностью пользовательского интерфейса жестов рук. Обзор похвалил мощную технологию системы и потенциал ее игр для йоги и танцев. [178] Kotaku посчитал устройство революционным при первом использовании, но отметил, что игры иногда не могли распознавать жесты или имели медленный отклик, заключив, что Kinect «пока не является обязательным для владения, скорее, в конечном итоге обязательным для владения». [185] TechRadar похвалил голосовое управление и увидел большой потенциал в устройстве, чьи задержки и требования к пространству были определены как проблемы. [180] Gizmodo также отметил потенциал Kinect и выразил любопытство относительно того, как более популярные игры будут использовать эту технологию. [186] В обзоре Ars Technica выражается обеспокоенность тем, что основная особенность Kinect, отсутствие контроллера, будет препятствовать разработке игр, выходящих за рамки тех, в которых либо есть неподвижные игроки, либо автоматически управляется движение игрока. [187]
Основная пресса также сделала обзор Kinect. USA Today сравнила его с футуристической схемой управления, показанной в Minority Report , заявив, что «играть в игры — это здорово», и дав устройству 3,5 из 4 звезд. [179] Дэвид Поуг из The New York Times предсказал, что игроки почувствуют «сумасшедший, волшебный, омигошный прилив, когда впервые попробуют Kinect». Несмотря на то, что отслеживание движения было названо менее точным, чем реализация Wii , Поуг пришел к выводу, что «удивительная технология Kinect создает совершенно новую деятельность, которая является социальной, охватывающей возраст и даже спортивной». [188] Globe and Mail назвали Kinect как устанавливающую «новый стандарт управления движением». Небольшая задержка ввода между выполнением физического движения и его регистрацией Kinect не считалась серьезной проблемой большинства игр, и обзор назвал Kinect «хорошим и инновационным продуктом», оценив его в 3,5 из 4 звезд. [189]
Несмотря на улучшенную производительность по сравнению с оригинальным Kinect, его преемник подвергся неоднозначным отзывам. В своем обзоре Xbox One Engadget похвалил функциональность Kinect Xbox One, такую как вход с распознаванием лица и улучшенное отслеживание движения, но сказал, что, хотя устройство было «волшебным», «каждая ложная срабатывание или нераспознанная [голосовая] команда заставляла нас тянуться к контроллеру». [190] Неспособность Kinect понимать некоторые акценты в английском языке подверглась критике. [191] В своей статье для Time Мэтт Пекхэм описал устройство как «коренастое» по внешнему виду, но что функция входа с распознаванием лица была «жуткой, но в равной степени научно-фантастической и будущей крутой», и что новая система распознавания голоса была «мощным, вызывающим привыкание способом навигации по консоли, и за исключением нескольких исключений, которые, кажется, сглаживаются по мере использования». Однако было обнаружено, что на его точность влияет фоновый шум, и Пекхэм далее отметил, что запуск игр с использованием распознавания голоса требует указания полного названия игры, а не сокращенного имени, которое консоль «должна семантически понимать», например Forza Motorsport 5 вместо «Forza 5». [192]
До запуска Xbox One были высказаны опасения относительно конфиденциальности нового Kinect; критики выразили опасения, что устройство может быть использовано для наблюдения , вытекающие из первоначально объявленных требований, что Kinect Xbox One должен быть подключен все время, а также изначальной постоянно включенной системы DRM, которая требовала, чтобы консоль была подключена к Интернету для обеспечения непрерывной функциональности. Защитники конфиденциальности утверждали, что увеличенный объем данных, которые можно было собрать с помощью нового Kinect (например, движения глаз человека, частота сердечных сокращений и настроение), может быть использован для целевой рекламы . Также появились сообщения о недавних патентах Microsoft , связанных с Kinect, таких как система DRM, основанная на определении количества зрителей в комнате и отслеживании привычек просмотра путем награждения достижений за просмотр телевизионных программ и рекламы . Хотя Microsoft заявила, что ее политика конфиденциальности «запрещает сбор, хранение или использование данных Kinect в целях рекламы», критики не исключили возможности того, что эта политика может быть изменена до выпуска консоли. Также высказывались опасения, что устройство может также записывать разговоры, поскольку его микрофон остается активным все время. В ответ на критику представитель Microsoft заявил, что пользователи «контролируют, когда сенсор Kinect включен, выключен или приостановлен», будут предоставлены ключевая информация о конфиденциальности и настройки во время первоначальной настройки консоли, и что пользовательский контент, такой как фотографии и видео, «не покинет ваш Xbox One без вашего явного разрешения». [49] [50] [51] [52] В конечном итоге Microsoft решила отменить свое решение о необходимости использования Kinect на Xbox One, но консоль все еще поставлялась с устройством после ее запуска в ноябре 2013 года. [54]
Объявляя о прекращении поддержки Kinect в интервью Fast Co. Design 25 октября 2017 года, Microsoft заявила, что с момента его выпуска было продано 35 миллионов устройств. [10] К февралю 2013 года было отгружено 24 миллиона устройств Kinect . [193] Продав 8 миллионов устройств за первые 60 дней на рынке, Kinect попал в Книгу рекордов Гиннесса как «самое быстро продаваемое устройство потребительской электроники». [194] [195] [196] [197] По словам аналитика Wedbush Майкла Пахтера, комплекты Kinect составили около половины всех продаж консоли Xbox 360 в декабре 2010 года и более двух третей в феврале 2011 года. [198] [199] За неделю «Черной пятницы» 2011 года было продано более 750 000 устройств Kinect. [200] [201]
Kinect конкурирует с несколькими контроллерами движений на других домашних консолях, такими как Wii Remote , Wii Remote Plus и Wii Balance Board для Wii и Wii U , PlayStation Move и PlayStation Eye для PlayStation 3 , а также PlayStation Camera для PlayStation 4 .
Хотя отсутствие контроллера в Xbox 360 Kinect позволило ему предложить управляемый движением опыт, отличный от управления палочкой на Wii и PlayStation Move, это иногда мешало разработчикам разрабатывать определенные управляемые движением игры, которые могли бы быть нацелены на все три консоли седьмого поколения и по-прежнему обеспечивать тот же опыт независимо от консоли. Примеры управляемых движением игр седьмого поколения, которые были выпущены на Wii и PlayStation 3, но имели версию для Xbox 360, отмененную или исключенную с самого начала из-за проблем с переводом управления палочкой на движение камеры Kinect, включают Dead Space: Extraction , [202] The Lord of the Rings: Aragorn's Quest [203] и Phineas and Ferb: Across the 2nd Dimension . [204]
Он поступит в продажу 10 ноября, на пять дней позже, чем в США.
проделывают большую работу с камерами. Но магия кроется в программном обеспечении. Это сочетание партнеров и нашего собственного программного обеспечения.
Мы фактически создали программную платформу, которая была тем, что мы хотели иметь как создатели контента. А затем [спросили]: "Хорошо, есть ли аппаратные решения, которые подключаются?" Но количество программного обеспечения и качество программного обеспечения действительно являются инновациями в Natal.
сути, мы делаем 3D-сканирование вашего тела. Мы графически отображаем 48 суставов вашего тела, а затем эти 48 суставов отслеживаются в реальном времени со скоростью 30 кадров в секунду. То есть несколько для вашей головы, плеч, локтей, рук, ног...
Выпуск в ноябре 2010 г., 5 млн единиц по всему миру, 14 игр и сверхнизкая цена ниже 50 фунтов стерлингов [...] Microsoft планирует произвести 5 млн единиц в первый день выпуска, при этом ожидается сочетание консоли и камеры плюс solus SKU. [...] Устройство должно стоить менее 100 000 фунтов стерлингов при продаже отдельно. Отчасти подтвержденная цена составляет 150 долларов США при продаже отдельно, что на 50 долларов США выше первоначальной прогнозируемой цены в 99 долларов США. [...] Другой даже говорит, что камера может продаваться всего за 30 фунтов стерлингов.
знаете, я думаю, они сказали, что будут поставлять Natal с каждой Xbox, когда они действительно ее выпустят, так что у всех будет один.
времен NES каждые пять лет или около того в индустрии появлялась отчетливая новая волна технологий, приносящая с собой новую мощь и функции на рынок, вдохновленный обещаниями быстрее, лучше, больше.
{{cite web}}: CS1 maint: числовые имена: список авторов ( ссылка )Эта информация основана на спецификациях, предоставленных производителями, и должна использоваться только в качестве справочного материала.
Массив из 4 микрофонов с поддержкой распознавания голоса одного говорящего
{{cite web}}: CS1 maint: неподходящий URL ( ссылка )