CHIL 2007+ Evaluation Package

View resource name in all available languages

Package d’évaluation CHIL 2007+

ID:

ELRA-E0041

The CHIL2007+ includes 1) CHIL 2007 Evaluation Package (see ELRA-E0033) and 2) additional annotations which have been created within the scope of the Metanet4u Project (ICT PSP No 270893), sponsored by the European Commission.

The CHIL 2007 Evaluation Package was produced within the CHIL Project (Computers in the Human Interaction Loop), in the framework of an Integrated Project (IP 506909) under the European Commission's Sixth Framework Programme. The objective of this project is to create environments in which computers serve humans who focus on interacting with other humans as opposed to having to attend to and being preoccupied with the machines themselves. Instead of computers operating in an isolated manner, and Humans [thrust] in the loop [of computers] we will put Computers in the Human Interaction Loop (CHIL).

In this context, the CHIL project produced CHIL Seminars. The CHIL Seminars are scientific presentations given by students, faculty members or invited speakers in the field of multimodal interfaces and speech processing. During the talks, videos of the speaker and the audience from 4 fixed cameras, frontal close ups of the speaker, close talking and far-field microphone data of the speaker’s voice and ambient sounds were recorded.

The CHIL 2007 Evaluation Package consists of the following contents:
1) A set of audiovisual recordings of interactive seminars. The number of people present in the recording was fixed to be between 3 and 7. The recordings were done between June and September 2006 according to the “CHIL Room Setup” specification.
2) Video annotations: the 3-D coordinates of each participant.
3) Orthographic transcriptions of speech, identity of the speaker, and acoustic events.

The additional annotations have been designed as a complementary extension of the CHIL 2007 Evaluation Package. The list of annotation categories included in that database has been largely extended so that: 1) the database can also be used with other speech technologies, and 2) it includes richer information about human activity.

The set of additional annotations includes:
1) Movement
2) Individual focus of attention
3) Hand gestures
4) Head gestures
5) Spatial role labeling
6) Activity
7) Emotion
8) Named entities
9) Topics
10) Links between tiers, when more than one modality is required to resolve ambiguities.

The resultant extended database is called CHIL2007+.

View resource description in all available languages

CHIL2007+ comprend 1) Le Package d’évaluation CHIL 2007 (voir ELRA-E0033) et 2) des annotations complémentaires qui ont été crées dans le cadre du projet Metanet4u (ICT PSP No 270893), sponsorisé par la commission européenne.

Le package d’évaluation CHIL 2007 a été produit dans le cadre du projet CHIL (Computers in the Human Interaction Loop), issus d’un projet intégré (IP 506909) du sixième programme-cadre de la Commission européenne. Le projet CHIL a pour objectif d’améliorer les échanges et l’interactivité entre utilisateurs humains et ordinateurs, par exemple grâce à des modes de communications plus efficaces et adaptés. CHIL prévoit ainsi que les ordinateurs et systèmes s’adaptent à la demande, grâce à l’observation et à la compréhension des besoins des utilisateurs.

Dans ce contexte, le projet CHIL a produit des séminaires CHIL. Les séminaires CHIL sont des présentations scientifiques faites par des étudiants, des membres universitaires ou des locuteurs invités dans le domaine des interfaces multimodales et du traitement de la parole. Pendant ces présentations, ont été enregistrées des vidéos du locuteur et des autres participants à partir de 4 caméras fixes, des prises de vues rapprochées du locuteur, des données contenant des enregistrements de la voix du locuteurs sur micro-cravate et via des microphones placés à distance (« far-field »), ainsi que l’enregistrement des sons ambiants.

Le package d’évaluation CHIL 2007 comprend les contenus suivants :
1) Un ensemble d’enregistrements audio-visuels de séminaires interactifs. Les enregistrements ont été réalisés entre juin et septembre 2006 en suivant les spécifications du « CHIL Room Setup » (mise en place d’une salle CHIL).
2) Des annotations vidéo : les coordonnées 3-D de chaque participant.
3) Des transcriptions orthographiques de la parole, de l’identité du locuteur et des événements acoustiques.

Les annotations complémentaires ont été réalisées en vue d’une extension au Package d’évaluation CHIL 2007. La liste des catégories d’annotation incluse dans la base de données a été largement étendue pour: 1) que la base de données puisse être utilisée avec d’autres technologies de la parole et 2) qu’elle contienne des informations d’activités humaines riches.

L’ensemble d’annotations complémentaires comprend:
1) Mouvement
2) Concentration individuelle de l’attention
3) Gestuel des mains
4) Gestuel de la tête
5) Etiquetage du role dans l’espace
6) Activité
7) Emotion
8) Entités nommées
9) Thèmes
10) Liens entre les niveaux, lorsque plus d’une modalité est nécessaire pour résoudre les ambigüités.

La base de données étendue en résultant est appelée CHIL2007+.

You don’t have the permission to edit this resource.
People who looked at this resource also viewed the following:
Resources from the same project