Grand modèle de langageUn grand modèle de langage, grand modèle linguistique, grand modèle de langue, modèle massif de langage ou encore modèle de langage de grande taille (LLM, pour l'anglais large language model) est un modèle de langage possédant un grand nombre de paramètres (généralement de l'ordre du milliard de poids ou plus). Ce sont des réseaux de neurones profonds entraînés sur de grandes quantités de texte non étiqueté utilisant l'apprentissage auto-supervisé ou l'apprentissage semi-supervisé.
Universaux linguistiquesEn linguistique, les universaux sont des catégories, des propriétés, des relations, des tendances considérées comme étant communes à toutes les langues, bien que celles-ci soient très différentes à bien des égards. Il y a des universaux phonologiques, grammaticaux, sémantiques, lexicaux, pragmatiques, stylistiques, il en existe donc dans tous les domaines de la langue. Dès l’Antiquité, Aristote a eu l’intuition que toutes les langues se soumettent à des principes communs.
Compétence et performanceL'opposition théorique entre compétence et performance est une hypothèse de Noam Chomsky dans le cadre de la linguistique générative. Publiée initialement en 1965 dans Aspects de la théorie syntaxique, elle procède d'une réinterprétation de « l’opposition saussurienne de la langue et de la parole » et est devenue un concept classique du discours linguistique général. Elle différencie chez les générativistes la capacité de construire et reconnaître l'ensemble des énoncés grammaticalement corrects d'une part (compétence) et l'ensemble des énoncés produits d'autre part (performance).
Purisme (linguistique)Le purisme, en linguistique, est l'attitude qui consiste à chercher à rendre une langue « pure » en la débarrassant d'éléments considérés comme un appauvrissement du langage et une menace pour son intégrité. Ces éléments rejetés sont le plus souvent : des emprunts récents à d'autres langues : par exemple, de nos jours, les anglicismes en français ; des néologismes ; de nouvelles tournures syntaxiques. des évolutions sémantiques, appelées abus de langage.
Modèle de fondationUn modèle de fondation est un modèle d'intelligence artificielle de grande taille, entraîné sur une grande quantité de données non étiquetées (généralement par apprentissage auto-supervisé ). Le modèle résultant peut être adapté à un large éventail de tâches en aval (downstream tasks en anglais). Depuis leur introduction en 2018, les modèles de fondation ont induit une transformation majeure dans la manière de construire les systèmes d'IA. Les premiers modèles de fondation étaient de grands modèles de langage pré-entraînés, notamment BERT et GPT-3.
AnglaisLanglais (English ; prononcé : ) est une langue indo-européenne germanique originaire d'Angleterre qui tire ses racines de langues du nord de l'Europe (terre d'origine des Angles, des Saxons et des Frisons) dont le vocabulaire a été enrichi et la syntaxe et la grammaire modifiées par le français anglo-normand, apporté par les Normands, puis par le français avec les Plantagenêt. La langue anglaise est ainsi composée d'environ 29 % de mots d'origine normande et française et plus des deux tiers de son vocabulaire proviennent du français ou du latin.
Indo-européen communL’indo-européen commun, proto-indo-européen (PIE) ou indo-européen (IE) est une langue hypothétique considérée comme l'origine unique des langues indo-européennes actuelles. Cette possible protolangue est partiellement reconstruite par les linguistes à partir des similitudes entre langues souvent disparues mais réelles et connues et partiellement à partir des schémas de transformation notamment phonologiques bien identifiés.
Modèle de langageEn traitement automatique des langues, un modèle de langage ou modèle linguistique est un modèle statistique de la distribution de symboles distincts (lettres, phonèmes, mots) dans une langue naturelle. Un modèle de langage peut par exemple prédire le mot suivant dans une séquence de mots. Un modèle de langage n-gramme est un modèle de langage qui modélise des séquences de mots comme un processus de Markov. Il utilise l'hypothèse simplificatrice selon laquelle la probabilité du mot suivant dans une séquence ne dépend que d'une fenêtre de taille fixe de mots précédents.
NéerlandaisLe néerlandais (Nederlands, prononciation ) est, avec ses 25 millions de locuteurs maternels, la troisième langue germanique après l'anglais et l'allemand. Elle est langue officielle aux Pays-Bas et dans ses territoires d'outre mer, en Belgique et au Suriname. Elle est enfin langue régionale en France. Confinée dans l'actuel Westhoek français après une importante extension médiévale, elle a toutefois quasiment disparu de la Flandre française au cours du .
Acquisition du langageL'acquisition du langage est un domaine de recherche pluridisciplinaire, relevant notamment de la recherche en psychologie et en sciences du langage, qui vise à décrire et comprendre comment l'enfant acquiert le langage, oral ou gestuel, du milieu qui l'entoure. L'acquisition du langage d'un jeune enfant est rapide et s'effectue sans apprentissage formel. Le langage se développe toute la vie, mais c'est surtout entre la naissance et l'âge de cinq ans, que les apprentissages essentiels sont observés.
Transformeur génératif pré-entraînédroite|vignette| Architecture du modèle GPT Le transformeur génératif pré-entraîné (ou GPT, de l’anglais generative pre-trained transformer) est une famille de modèles de langage généralement formée sur un grand corpus de données textuelles pour générer un texte de type humain. Il est construit en utilisant plusieurs blocs de l'architecture du transformeur. Ils peuvent être affinés pour diverses tâches de traitement du langage naturel telles que la génération de texte, la traduction de langue et la classification de texte.
Language developmentLanguage development in humans is a process starting early in life. Infants start without knowing a language, yet by 10 months, babies can distinguish speech sounds and engage in babbling. Some research has shown that the earliest learning begins in utero when the fetus starts to recognize the sounds and speech patterns of its mother's voice and differentiate them from other sounds after birth. Typically, children develop receptive language abilities before their verbal or expressive language develops.
Mass comparisonMass comparison is a method developed by Joseph Greenberg to determine the level of genetic relatedness between languages. It is now usually called multilateral comparison. The method is rejected by most linguists , though not all. Some of the top-level relationships Greenberg named are now generally accepted, though they had already been posited by others (e.g. Afro-Asiatic and Niger–Congo). Others are accepted by many though disputed by some prominent specialists (e.g.
PerformanceA performance is an act of staging or presenting a play, concert, or other form of entertainment. It is also defined as the action or process of carrying out or accomplishing an action, task, or function. In the work place, job performance is the hypothesized conception or requirements of a role. There are two types of job performances: contextual and task. Task performance is dependent on cognitive ability, while contextual performance is dependent on personality.
Apprentissage de représentationsEn apprentissage automatique, l'apprentissage des caractéristiques ou apprentissage des représentations est un ensemble de techniques qui permet à un système de découvrir automatiquement les représentations nécessaires à la détection ou à la classification des caractéristiques à partir de données brutes. Cela remplace l'ingénierie manuelle des fonctionnalités et permet à une machine d'apprendre les fonctionnalités et de les utiliser pour effectuer une tâche spécifique.
Entretien d'évaluationL'entretien d'évaluation est un entretien qui a pour but de fixer des objectifs à atteindre au personnel pour une période déterminée, et leur évaluation pour le passé, en fonction de l'ensemble des priorités, des connaissances, de l'expérience et des comportements et aptitudes. Il s'agit d'une explicitation fine des missions afin de déterminer les compétences nécessaires à leur exercice et les actions de formations destinées à acquérir et à améliorer ces compétences.
Cell cycle checkpointCell cycle checkpoints are control mechanisms in the eukaryotic cell cycle which ensure its proper progression. Each checkpoint serves as a potential termination point along the cell cycle, during which the conditions of the cell are assessed, with progression through the various phases of the cell cycle occurring only when favorable conditions are met. There are many checkpoints in the cell cycle, but the three major ones are: the G1 checkpoint, also known as the Start or restriction checkpoint or Major Checkpoint; the G2/M checkpoint; and the metaphase-to-anaphase transition, also known as the spindle checkpoint.
Nativisme (psychologie)En psychologie, le nativisme est la théorie selon laquelle certaines compétences ou les habiletés sont des « innées » ou câblées dans le cerveau à la naissance. Cette théorie est en contraste avec l'empirisme, qui stipule que le cerveau a des capacités innées pour permettre l'apprentissage, mais ne contient pas de contenu inné en tant que tel (voir le débat inné versus acquis). Le nativisme a une histoire dans la philosophie. Schopenhauer (1788-1860) réduit le nombre de catégories innées à une seule catégorie, qui est la causalité.
Trouble d'apprentissageLe trouble des apprentissages, ou trouble d'apprentissage est un dysfonctionnement dans le processus d'acquisition des connaissances. Il peut être d'origine psychologique, cognitif, voire psychomoteur. Il est spécifique à la fonction cognitive touchée : il y a donc des troubles d'apprentissage reliés au langage, à l'attention, mais aussi à des compétences spécifiques comme la lecture, l'orthographe, l'arithmétique La classification actuelle le place parmi les troubles neurodéveloppementaux.
GrammaticalisationLe terme grammaticalisation désigne, dans l'évolution d'une langue à une autre ou dans l'histoire d'une langue déjà formée, un changement linguistique consistant en la transformation d'une entité autonome, le plus souvent un mot à sens lexical, en morphème grammatical. La grammaticalisation est un processus graduel et de longue durée, se manifestant par plusieurs phénomènes.
