The CINTIL Corpus – International Corpus of Portuguese

View resource name in all available languages

Corpus CINTIL – Corpus international du portugais

ID:

ELRA-W0050

CINTIL-Corpus Internacional do Português is a linguistically interpreted written and spoken corpus of European Portuguese. It is composed of one million annotated tokens, each one of which verified by human expert annotators. The annotation comprises information on part-of-speech, open class lemma and inflection, multi-word expressions pertaining to the class of adverbs and to the closed POS classes, and multi-word proper names (for named entity recognition).

The corpus is developed over raw textual materials of several types, of which 30% are spoken materials. This spoken subcorpus includes materials from several registers (ranging from formal to informal) and several communicative situations (e.g. phone calls, media broadcasts, conversations, monologues, formal exposition, etc.). The CINTIL corpus comprises the transcriptions of spoken texts but does not include the sound files with the recorded interviews. The remaining subcorpus is composed of written texts from several genres: newspaper, books, magazines, journals and miscellaneous (proceedings, dissertations, pamphlets, etc.). A detailed overview of the corpus composition is presented below:

• Written = 689,124 tokens:
o News: 58.7% - 404,690 tokens
o Fiction: 29% - 200,194 tokens
o Other: 12.2% - 84,240 tokens
• Spoken = 502,622 tokens:
o Informal/Private: 43.2% - 217,604 tokens
o Informal/Public: 9.5% - 48,221 tokens
o Informal/Phone: 0.4% - 2,287 tokens
o Formal/Natural: 19.3% - 97,499 tokens
o Formal/Media: 17.6% - 88,727 tokens
o Formal/Phone: 9.6% - 48,284 tokens
• Total = 1,191,746 tokens

Linguistic information:
The corpus associates to raw text linguistic information of different nature and from different levels of sophistication. This information is encoded under the usual format of tags, checked for their accuracy by trained linguists, covering four levels of information:
• Segmentation: The boundaries of each sentence are tagged and every token is circumscribed by blanks. Contractions are expanded, clitics in enclisis and mesoclisis are detached into autonomous tokens, and punctuation is associated with explicit information concerning the blanks surrounding them in the raw version. Multi-word expressions from some POS classes (e.g. Conjunctions, Prepositions, etc) are identified as forming a lexical unit.
• POS: By means of POS tags, each token is associated with the indication of its morpho-syntactic category.
• Inflection: Information concerning inflectional morphology: every inflected token is associated with the corresponding lemma, and with explicit information encoding their values for Mood, Tense, Person and Number, if they are from verbal classes, or Number and Gender if they are nominals. Nominals include also information about their degree, namely superlative for Adjectives, and diminutive for both Adjectives and Nouns.
• Multiword Lexical Units (MWU) for Named Entity Recognition (NER): Delimitation and classification of multi-word expressions for Named Entities following the usual IOB tagging schema for NER, and the typical classes of Number, Date, Person, Location, etc.

The annotation manual is provided together with the corpus.

The corpus can be browsed online: http://cintil.ul.pt/

View resource description in all available languages

CINTIL-Corpus Internacional do Português est un corpus du portugais européen écrit et parlé, fourni avec une interprétation linguistique. Il est composé d’un million d’entrées annotées, chacune d’entre elles ayant été vérifiée par des annotateurs experts humains. L’annotation consiste en des informations sur la partie du discours, les lemmes de classe ouverte et les flexions, ainsi que les expressions composées appartenant à la classe des adverbes et aux classes fermées de la partie du discours, et enfin les noms propres composés (pour la reconnaissance d’entités nommées).

Le corpus a été développé sur la base de matériel textuel brut de plusieurs types, dont 30% de matériel parlé. Le sous-corpus parlé comprend du matériel de divers registres (tant formel qu’informel) et de diverses situations de communication (par exemple, des appels téléphoniques, des émissions télé-radio-diffusées, des conversations, des monologues, des exposés formels, etc.). Le corpus CINTIL comprend les transcriptions des textes parlés mais n’inclut pas les fichiers sons des interviews enregistrés. Le sous-corpus restant est composé de textes écrits de différents genres: journaux, livres, magazines, périodiques et divers (actes, thèses, essais, etc.). Une vue détaillée de la composition du corpus est présentée ci-dessous:

• Ecrit= 689 124 tokens:
o Actualités: 58,7% - 404 690 tokens
o Fictions: 29% - 200 194 tokens
o Autres: 12,2% - 84 240 tokens
• Parlé = 502,622 tokens:
o Informel/Privé: 43,2% - 217 604 tokens
o Informel/Publique: 9,5% - 48 221 tokens
o Informel/Téléphone: 0,4% - 2 287 tokens
o Formel/Naturel: 19,3% - 97 499 tokens
o Formel/Médias: 17,6% - 88 727 tokens
o Formel/Téléphone: 9,6% - 48 284 tokens
• Total = 1 191 746 tokens

Informations linguistiques:
Le corpus met en relation des informations linguistiques de textes bruts de différente nature et de différents niveaux de complexité. Ces informations sont codées selon un format habituel d’étiquettes, dont l’exactitude a été vérifiée par des linguistes entraînés, recouvrant quatre niveaux d’informations :
• Segmentation: Les limites de chaque phrase sont étiquetées et chaque élément est limité par des espaces. Les contractions sont étendues, les clitiques en enclise et mésoclise sont décomposés en éléments autonomes, et la ponctuation est associée à des informations explicites concernant les espaces les limitant dans la version brute. Les expressions composées venant de certaines classes de la partie du discours (par exemple les conjonctions, les prépositions, etc.) sont identifiées comme formant une unité lexicale.
• Partie du discours: Chaque entrée est associée à une information sur sa catégorie morpho-syntaxique au moyen d’étiquettes correspondant à la partie du discours.
• Flexion: Informations concernant la morphologie flexionnelle: chaque entrée fléchie est associée au lemme correspondant et présente une information explicite des valeurs correspondant au mode, temps, personne et nombre pour les classes verbales, ou au nombre et genre pour les classes nominales. Les classes nominales comprennent également des informations sur le degré, c’est-à-dire les superlatifs pour les adjectifs et les diminutifs à la fois pour les adjectifs et les noms.
• Unités lexicales composées (« Multiword Lexical Units ») pour la reconnaissance d’entités nommées: Délimitation et classification des expressions composées pour les entités nommées en suivant le schéma d’étiquetage habituel IOB pour la reconnaissance d’entités nommées, et les classes classiques de nombre, date, personne, lieux, etc.

Le manuel d’annotation est fourni avec le corpus.

Une recherche dans le corpus peut être effectuée en ligne: http://cintil.ul.pt/

You don’t have the permission to edit this resource.
People who looked at this resource also viewed the following: