Traitemint automatique d'ches langues

I feut doter ches langues éd mouéyins informatikes (corpus, lexikes, diction·noères) et d'otils d' traitemint pour foaire ène éyude pour el diffusion, el protection et pi l' inseignemint des langues.

Ch' traitemint du langache naturel (PNL) o traitemint automatique d'ches langues (TAL) ch'est un dsous-donmaine éd l’informatike, éd l’intelligince artifichielle, éd l’ingénierie d' l’informacion et pi éd l’interaccion honme-machine.

L' tokenisacion d'ches teskes

El tokenisacion ch'est ch' processus éd créachon éd ch'tons o éd division d’eune tchaîn•ne, d’un teske dins eune lisse éd ch'tons.

Ches ch'tons sont conme des parties o des bouts d' teske.

Un mot ch'est un ch'ton dins eune frase et pi eune frase ch'est un ch'ton dins un paragrafe.

exampe éd teske :     "Atincion, ches mots s'écrivette conme o in picard."

ch'tons =     [ 'Atincion' ,   ' , '  ,   'ches' ,   'mots' ,   ' s'  ' ,   'écrivette' ,   'conme' ,   'o' ,   'in' ,   'picard' ,   '. ' ]

El lemmatisacion

El « lemmatisacion » ch'est arprésinter ches mots (o « lemmes ») édsous leu forme canonike. L' forme canonike est l' forme l' pus simpe d'un mot pour l' erpérer dins un dictionnoère.

Pèr exampe pour un verbe, cha s'ra sin infinitif. Pour un nom, cha s'ra sin masculin singulier.

El normalisacion et pi el construccion du dictionnoère permet d' n' pon prinde in compte des détails importants à ch' niviau local (ponctuacion, majuscules, conjugaison, ...)

exemple : "Dins ches pièches, il y o des cinsiers picards aveuc leus fanmes"

O vut éstraire ches lemmes suivants : « pièche, avoèr, cinsier, picard, fanme ».

El racinisacion

L' racinisation (stemming in inglés) ch'est pour n' conserver uniquemint l' rachine des mots. Oz abolit ches suffixes, préfixes et d'eutes coses des mots.

TAL in picard

Lemmatiser n’est pon simpe. I feut foaire quate opéracions distinctes  :

1) couésir el forme granmaticale ;

2) effacemint chés variacions fonétikes ;

3) adopcion d’eune grafie éd lemme (L) ;

4) couésir un supralemme (SL).

Plusieurs étapes sont donc nécessaires pour tokéniser ches teskes picards, notammint dins ches quate aspects :

• ch' tiret,
• ch' point,
• l’apostrofe et
• l’espache.

quèques exampes :

ches multipes variantes fonétikes dialectales.

flexions verbales

• avoait, avoet, avait, avé, avot, awét, awè’t’, ...

variacion grafike aveuc apostrofes, tirets, points pouvant ète dins ch' mot

• une, eune, un’, un’n, unhn’, eun’, in-n, inne, un·ne, un·n’, ...
• I se proumon•ne

ches consonnes éd liaison

• z, t, n, ...

Apreu qu'i zz'euche autorisès à rouvrir, i zz'o rfreumès.

Quand is n’mariye-té (fr: quand elles se marient)

variacions diatopiques

• jamouais, janmoés, janmais, jin.mais, jamois, jamwé, jamé, jama, jamais, ...

Projet Picartext

• vir Projet Picartext
• Jean-Michel Eloy, Fanny Martin, Christophe Rey, PICARTEXT : Une ressource informatisée pour la langue picarde, Actes de TALaRE 2015 - Traitement Automatique des Langues Régionales de France et d’Europe , Juin 2015, Caen, France (2015).
  • https://hal.archives-ouvertes.fr/hal-01366138

Projet RESTAURE

Ch' projet RESTAURE i vut produire des mouéyins informatikes et des otils d' traitemint automatique pour troés langues régionales : alsacien, occitan et picard.

• Le projet RESTAURE : https://hal.archives-ouvertes.fr/hal-01297835/document
  • Delphine Bernhard, Marianne Vergez-Couret, Le projet RESTAURE, Colloque sur les technologies pour les langues régionales de France (TLRF 2015), Délégation générale à la langue française et aux langues de France, laboratoire de recherche en informatique pluridisciplinaire (LIMSI) - Centre national de la recherche scientifique (CNRS), Institut des technologies multilingues et multimédias de l’information (IMMI), Feb 2015, Meudon, France. pp.96-100.

Atlas pan-picard informatisé

Ch' projet Atlas pan-picard informatisé a débutè in janvier 2018 pour troés ans à l’Univarsité Lille. Il est foait pour préparer l' future intégration d'ches atlas linguistikes et éthnografikes d' France dins ch' projet intarnational éd digitalisation et d' mise in réseau d'ches érsources lexicografikes.

• https://anr-appi.univ-lille.fr/