Voice Assistant Technology: Alexa in the Sim Lab

A guest post by Bill Klug, British Columbia Institute of Technology 

Listen to our chat with BCIT student, Michelle Wan, about what it’s like to be a woman in engineering and how she programmed Alexa to support nurses.

The use of robot mannequins to simulate human behavior has become an integral part of nursing education. As these simulations become more realistic, technicians and educators are challenged with creating environments that support student and nurse decision-making capacities in mid- to high-fidelity scenarios.

To create the right level of fidelity, simulation labs integrate the same workflow and equipment as used in clinical practice. The workflow includes charting, accessing patient information, and providing new data during the scenario. Often the patient chart or data provided to students is on paper. Maintaining paper charts can be arduous as they can be accidentally removed or damaged during the simulation lab. And updates need to be placed into multiple charts, increasing the chance of mistakes. However, using computers for electronic charting increases the costs for hardware, storage, and workflow in the simulation lab.

Alexa Augments Patient Lab Retrieval

At British Columbia Institute of Technology (BCIT), an AWS Educate and AWS Academy school, a solution was created by Michelle Wan to address the challenge of maintaining patient records and improving access to information during a simulation scenario. Specifically, it employs voice-assistant technology in the form of an Amazon Echo Show.

During simulation, the device is located at the bedside of each mannequin. The Amazon Echo Show has a seven-inch screen and uses Alexa – a cloud-based voice service – to both vocalize and display information. At the consumer level, these devices can answer questions, provide news, play music, or purchase products. For simulation labs, the Amazon Echo Show allows students to ask questions of Alexa, such as ‘What is the latest arterial blood gas result?’ or ‘What are the chest x-ray report results?’ Alexa responds vocally and visually displays the results. These devices use cloud-computing technology, which decreases patient record maintenance as only one set of records needs to be updated. All devices in the lab access the same updated record(s) on the cloud.

The development of these voice-assistant skills at BCIT is an interdisciplinary partnership between BCIT’S School of Health Sciences and School of Computing.

Due to her experience in cloud computing, Michelle was hired by APN Advanced Technology Partner, Elastic Path Software, months before she graduated.

Watch the demo of a Michelle putting the cloud into action.

Learn more about how students can get started with the cloud with AWS Educate, and discover how We Power Tech is encouraging more women and underrepresented minorities to consider a future in tech.

Technologie d’assistant vocal Alexa dans le Sim Lab

Un billet d’invité par Bill Klug, British Columbia Institute of Technology 

Écoutez notre conversation avec une étudiante du BCIT, Michelle Wan, à propos de ce que c’est que d’être une femme en génie et de comment elle a programmé Alexa pour aider le personnel infirmier.

L’utilisation de mannequins robotisés pour simuler le comportement humain est devenue une partie intégrante des études infirmières. À mesure que le réalisme de ces simulations augmente, les techniciens et les éducateurs sont confrontés à des environnements de création qui soutiennent les capacités de prise de décision des étudiants et du personnel infirmier dans scénarios de moyenne à haute fidélité.

Pour créer le bon niveau de fidélité, les laboratoires de simulation intègrent le même flux de travail et le même équipement que ce qui est utilisé dans la pratique clinique. Le flux de travail comprend la création de fiches, l’accès aux renseignements du patient et le fait de fournir de nouvelles données durant le scénario. Souvent, la fiche du patient ou les données fournies aux étudiants sont sur papier. Garder des fiches sur papier peut être difficile, car elles peuvent être accidentellement jetées ou endommagées lors du laboratoire de simulation. De plus, les mises à jour doivent être ajoutées à plusieurs fiches, ce qui augmente le risque d’erreurs. Toutefois, l’utilisation d’ordinateurs pour la création de fiches électroniques augmente les coûts de matériel, de stockage et de flux de travail dans le laboratoire de simulation.

Alexa améliore la récupération des données du patient en laboratoire

Au British Columbia Institute of Technology (BCIT), une école faisant appel à AWS Educate et AWS Academy, une solution a été créée par Michelle Wan pour faire face au défi du maintien des dossiers de patients et de l’amélioration de l’accès à l’information lors d’un scénario de simulation. Plus précisément, elle emploie la technologie d’assistant vocal sous la forme d’un Amazon Echo Show.

Durant la simulation, l’appareil est situé à côté du lit de chaque mannequin. L’Amazon Echo Show est doté d’un écran de sept pouces et utilise Alexa – un service vocal infonuagique – pour présenter l’information à la fois de manière vocale et visuelle. Au niveau des consommateurs, ces appareils peuvent répondre aux questions, offrir des nouvelles, jouer de la musique ou acheter des produits. Pour les laboratoires de simulation, l’Amazon Echo Show permet aux étudiants de poser des questions à Alexa, par exemple « Quel est le dernier résultat de gazométrie artérielle? » ou « Quels sont les résultats du rapport de radiographie du thorax? ». Alexa répond vocalement et affiche visuellement les résultats. Ces appareils utilisent la technologie infonuagique, qui diminue la maintenance des dossiers de patients, car un seul ensemble de dossiers doit être mis à jour. Tous les appareils du laboratoire accèdent aux mêmes dossiers mis à jour dans le nuage.

Le développement de ces habiletés d’assistance vocale au BCIT résulte d’un partenariat interdisciplinaire entre la School of Health Sciences et la School of Computing du BCIT.

En raison de son expérience en infonuagique, Michelle a été embauchée par APN Advanced Technology Partner, Elastic Path Software, des mois avant sa graduation.

Regardez une démonstration de Michelle mettant le nuage en application.

Apprenez-en plus sur la façon dont les étudiants peuvent faire leurs premiers pas dans le nuage avec AWS Educate, et découvrez comment We Power Tech encourage plus de femmes et de minorités sous-représentées à envisager un avenir dans le domaine des technologies.