Sidekick — проект, разработанный NASA и Microsoft , начатый в декабре 2015 года на Международной космической станции , который обеспечивает виртуальную помощь астронавтам с использованием гарнитур дополненной реальности Microsoft HoloLens . [1]
Sidekick имеет два режима работы. Удаленный экспертный режим использует функциональность приложения Holographic Skype — голосовой и видеочат, виртуальные аннотации в реальном времени — чтобы позволить наземному оператору и члену космического экипажа напрямую сотрудничать над тем, что видит астронавт, при этом наземный оператор может видеть вид члена экипажа в 3D, предоставлять интерактивные указания и рисовать аннотации в среде члена экипажа. В режиме процедуры анимированные виртуальные иллюстрации отображаются поверх объектов, когда член экипажа взаимодействует с ними. Этот режим может использоваться для руководства и учебных целей в автономных сценариях. [2] Приложения включают управление инвентарем, в котором система распознает элемент инвентаря и может отображать путь к месту, где этот элемент должен храниться. [3] Ранее члены экипажа в основном полагались на печатные инструкции и голосовую связь при выполнении сложных задач. Возможности, предоставляемые Sidekick, были представлены как потенциальные функции, позволяющие снизить требования к обучению экипажа и повысить эффективность в дальних космических миссиях, в которых задержки связи могут усложнять сложные операции. [2]
После проведения испытаний в условиях искусственной гравитации на своем самолете Weightless Wonder C9 [2] НАСА попыталось запустить пару устройств HoloLens на борту космического аппарата SpaceX CRS-7 , запущенного на Международную космическую станцию 28 июня 2015 года [4] , но ракета Falcon 9 с полезной нагрузкой взорвалась через 2 минуты и 19 секунд полета. [5] Sidekick испытывался в лаборатории Aquarius с конца июля по начало августа 2015 года в рамках двухнедельной экспедиции NASA Extreme Environment Missions Operations 20, демонстрируя его работу в таких задачах, как проверка и настройка оборудования. [3] [2] Аппаратное обеспечение HoloLens было успешно доставлено на МКС в ходе коммерческой миссии по пополнению запасов Cygnus CRS OA-4 9 декабря 2015 года. [1]
Несмотря на явные преимущества Sidekick, в исследовании B. Nuernberger описаны потенциальные недостатки. Некоторые опасения связаны с техническими проблемами, такими как задержка, поле зрения устройства и надежность HoloLens в сложных условиях МКС. Проект также опирался на непрерывную эволюцию и разработку HoloLens, которая, как и любая технология, имеет свои ограничения и случайные ошибки. [6]
Еще одной проблемой была автономность астронавтов. Существует тонкая грань между помощью астронавтам и чрезмерной зависимостью от наземной поддержки, что может потенциально подорвать развитие навыков решения проблем, необходимых для длительных миссий, таких как те, которые запланированы для Марса, где задержки связи с Землей значительны. [6]