Halcyon (consola)

Halcyon se basaba en el microprocesador Z80 , con su memoria de 64 KB particionada en ROM y RAM . Un ordenador independiente de reconocimiento de voz proporcionaba la potencia adicional necesaria para reconocer el habla humana. Su firmware era propietario y su principal comunicación con el Z80 consistía en indicar qué palabra había reconocido y qué probabilidad de coincidencia calculaba. Otras funciones de este subsistema eran el almacenamiento en memoria no volátil y el entrenamiento del reconocimiento de voz.

El contenido de vídeo se almacenaba en un reproductor CED especial controlado por ordenador, proporcionado por RCA . Debido a las limitaciones de codificación de vídeo y posicionamiento del lápiz óptico inherentes a esta tecnología, los fotogramas fijos (donde la acción se suspendía a la espera de la entrada del reproductor) debían codificarse como una repetición de 2 o 3 segundos de vídeo. En una fase avanzada de su desarrollo, Halcyon tuvo que rediseñarse para utilizar reproductores Laserdisc, ya que RCA había dejado de fabricar unidades CED. El reproductor Laserdisc utilizado por Halcyon era una unidad genérica fabricada por Pioneer Corporation . ^{[ 12 ]}

La comunicación con los reproductores CED era serial . La comunicación con los reproductores Laserdisc se realizaba mediante un LED infrarrojo fijado con una ventosa.

La síntesis de voz se realizó mediante un algoritmo de conversión de texto a voz con licencia , incluido en el sistema operativo Halcyon, que incorporaba un vocabulario especial en inglés capaz de pronunciar correctamente cientos de nombres propios. La salida fonética de este algoritmo se introdujo en un chip Votrax .

El firmware exclusivo del juego que se estaba jugando existía como un cartucho ROM extraíble que contenía 16 KB de memoria, incluyendo la disposición completa de los nodos del juego, el vocabulario del juego (tanto para el sintetizador de voz como para el reconocedor de voz), datos de inventario (tanto para la jugabilidad como para fotogramas de vídeo que mostraban los objetos) y ciertas secciones de datos ejecutables para ayudar en el procesamiento del flujo del juego.

Salvo las palabras "Sí" y "No", Halcyon requería que cada jugador lo entrenara para reconocer su voz. Las palabras "Sí" y "No" existían como cuatro muestras de voces humanas precargadas en la memoria: dos femeninas y dos masculinas. Cada voz fue seleccionada por sus propiedades únicas de tono y timbre. Estas cuatro voces ofrecían una alta probabilidad de que Halcyon las reconociera en cualquier hablante de inglés.

El reconocimiento de voz era discontinuo, lo que significaba que el jugador solo tenía unos segundos para hablar por los auriculares cuando se le solicitaba. Estos auriculares estaban equipados con un micrófono con cancelación de ruido para aislar la voz de otros sonidos. Las muestras de voz se comparaban con las respuestas permitidas, y la coincidencia, junto con la probabilidad de precisión, se enviaba al procesador principal de Halcyon.

Para reconocer los comandos de voz, Halcyon repetía lo que creía haber oído decir al jugador. Esto a veces resultaba en acciones incorrectas, especialmente si el jugador tenía una entonación significativamente diferente o decía algo distinto a las opciones esperadas. La clasificación de probabilidad podía hacer que Halcyon le pidiera al jugador que repitiera su elección cuando recibía una respuesta deficiente a todas las opciones esperadas. Los errores de reconocimiento se debían principalmente a que una muestra de habla tenía la probabilidad suficiente de coincidir con una de las palabras o frases anticipadas.

Se pretendía que Halcyon tuviera una voz muy parecida a la de HAL 9000, pero las limitaciones de memoria impidieron el uso de parámetros de voz personalizados para el sintetizador Votrax integrado en la consola. La solución fue utilizar un algoritmo de conversión de texto a voz con licencia que incluía varias reglas para pronunciar correctamente el texto en inglés. También se utilizaron correcciones ortográficas cuando fue necesario para corregir problemas de pronunciación, aunque esto no se aplicó a palabras como los nombres de usuario escritos por el jugador.

Un videojuego seguiría un diseño general de "nodos" interconectados en función de las respuestas o la falta de respuesta del jugador. Ciertos desencadenantes, como una restricción de tiempo real que interrumpiría el juego si no se producía el evento asociado, también formaban parte de la dinámica del juego.

Las escenas constaban de dos o más guiones: uno para el encuentro "normal" o inicial con la escena, otro para las visitas posteriores y, opcionalmente, uno o dos para los casos en que ciertas acciones requerían que la animación o los gráficos de la escena se desviaran, generalmente cuando se había retirado o utilizado un objeto.

Una escena debía ser idéntica en animación y gráficos entre su aparición normal y la siguiente, diferenciándose únicamente en la pista de audio utilizada. Por esta razón, normalmente no se podía usar la sincronización labial , lo que a menudo resultaba en que los personajes que hablaban tuvieran la boca oculta o hablaran de espaldas.

Una escena en la que se utilice o se retire un objeto tendría animación y gráficos separados, lo que permitiría dos pistas de audio adicionales, de nuevo sin sincronización labial.

Las pistas de audio se codificaron en los canales izquierdo y derecho de una codificación estéreo; por lo tanto, solo se reproduciría audio monoaural en cualquier instancia dada de una escena.

Almost all scenes in a game would have some information revealed that would contribute to solving the puzzle of obtaining the final goal of the game. Since Halcyon needed to keep track of first versus subsequent visits, a count of visits (up to a maximum of 15) would be used to trigger its speech synthesized hints and comments. One example from Thayer's Quest would be the direct instruction to take the right door when the wrong door (leading to instant death) was chosen more than once.

To break up the monotony of robotic speech, Halcyon was given prompt and response phrases that had markers that would include interchangeable words and phrases, along with the player's name, which it would include occasionally. "Enter your name on my keyboard" and "Please spell your name" would be two examples of phrases it would use to prompt the player.

Halcyon's game authoring method would easily accommodate playing Dragon's Lair, except for the restraint that speech recognition would take too long to process each move before the time allowed would expire, limiting it to keyboard-only use. This game's inclusion was not considered for this reason as well as license restrictions.

Each player's game record was represented in non-volatile memory as the set of items they had in their inventory, the visit counters of all possible nodes in the game (unvisited nodes having a count of zero), the scene toggle information (item used / taken / etc.), applicable timers (real-time events would suspend when games were saved), and their trained speech sampled data. To resume play, all one had to do was speak their name when asked to do so by Halcyon.

• Thayer's Quest
• NFL Football: Chargers vs. Raiders
• Voyage to the New World (Unreleased)
• Shadow of the Stars (Unreleased)
• Orpheus (Unreleased)
• The Spirit of the Whittier Mansion (Unreleased)