Как объясняют разработчики, они воспользовались звукозаписями актеров, произносящих вслух просто даты, — неважно, что именно говорит человек, важно, с какой интонацией. Программа анализирует 12 особенностей речи, начиная с громкости и высоты, для распознавания эмоций: грусти, счастья, страха, отвращения и т. д.
В испытаниях прототип программы демонстрирует точность распознавания около 80% — сейчас после записи и анализа голоса она показывает изображение счастливого или грустного лица. Но в принципе на ее основе легко будет создать инструмент, автоматически меняющий цветовую схему или, например, включающий музыку под ваше настроение. Разработчики, по их словам, также совместно с психологами принимают участие в исследованиях, посвященных взаимоотношениям родителей с подростками. Сама программа изначально была написана одним из аспирантов универсиета во время практики в исследовательском подразделении Microsoft.