Top.Mail.Ru
BLACK VR

ForceMed: приложение для обучения студентов медицинских учебных заведений

Задача
Разработка приложения дополненной реальности на основе Unity3D для использования с очками Microsoft HoloLens и Microsoft HoloLens 2. Приложение предназначено для обучения студентов медицинских учебных заведений навыкам, необходимым для диагностики рака молочной железы с использованием инвазивных методов.

Концепция проекта
Приложение "Forcemed AR" создаёт иммерсивную среду, включая манипуляционную комнату, где физический симулятор дополнен 3D-моделью пациента. Программа включает два сценария: "Обучение" с пошаговыми инструкциями и мультимедиа-материалами и "Экзамен" для оценки навыков.

Технологии
  • Платформа разработки: Unity3D.
  • Устройства: Microsoft HoloLens 2.
  • Язык программирования: C#.
  • Технологии дополненной реальности: MRTK (Mixed Reality Toolkit).
  • Интерфейс пользователя: Поддержка голосовых команд, интерактивные элементы управления.
  • Дизайн и мультимедиа: Интеграция 3D-моделей, текстовых и видео материалов.
  • Трекинг объектов: AR-трекинг с использованием пространственного сопоставления.
Результат
По завершении проекта команда Chiko Rocko gодробный документ, содержащий все результаты исследований. Он станет основой для будущих инноваций на платформе.
Ключевые функции:
  • Воссоздание "театральной комнаты" с элементами манипуляционной через AR.
    01
  • Дополнение физического симулятора 3D-моделью пациентки в анатомическом положении.

    02
  • Интерактивный чек-лист
    для выполнения процедур.
    03
  • Поддержка голосового управления (например, "показать чек-лист").

    04
  • Два режима работы:
    "Обучение" и "Экзамен".

    05
  • Генерация случайных клинических ситуаций для сценария "Экзамен".
    06
  • Визуализация объектов комнаты, включая часы, мебель и оборудование.
    07