Тіл біліміндегі символдық өрнектеулер

Кіріспе

Символикалық лингвистикалық бейнелеу – бұл сөйлеу туралы лингвистикалық ақпаратты, мысалы, фонетика, фонология, морфология, синтаксис немесе семантика туралы мәліметтерді бейнелеу үшін символдарды қолданатын сөйлеудің өрнегі. Символикалық тілдік бейнелеулер, жазбалар сияқты символдық емес бейнелеулерден өзгеше, себебі олар тілдік ақпаратты өлшемдер емес, символдар арқылы көрсетеді. Символикалық бейнелеулер лингвистикада кеңінен қолданылады. Синтаксистік бейнелеулердегі атомдық категориялық символдар көбінесе лексикалық элементтің синтаксистік санатына сілтеме жасайды. Мысалдарға көмекші етістіктер (INFL), салыстырмалы сөйлемдер (SRel) сияқты фразеологиялық категориялар және wh іздері (tWH) сияқты бос категориялар жатады. Кейбір формализмдерде, мысалы, лексикалық функционалдық грамматикада, бұл символдар грамматикалық функцияларды да, грамматикалық санаттардың мәндерін де білдіре алады. Лингвистикада бос категориялар ∅ символымен белгіленеді. Символикалық бейнелеулер фонетикалық транскрипцияда, фонологиялық процестердің сипаттамаларында, трохелерде, фонемаларда, морфофонемаларда, табиғи кластарда, анимация сияқты семантикалық ерекшеліктерде және генеративтік лексика теориясының квалиа құрылымдарында да кездеседі. Табиғи тілді өңдеуде, синтаксистік бейнелеулер сияқты лингвистикалық бейнелеулер ұзақ уақыттан бері ақпаратты іздеу жүйелерінің (мысалы, іздеу қозғалтқыштары және машиналық аударма жүйелері) нәтижелерін жақсартуға жәрдемдесіп келеді. Соңғы уақыттарда, span негізделген нейрондық құрылымдық талдауда лексикалық элементтер сөздік бөліктер немесе BPE токендері ретінде басталады, кейін бірнеше басқа бейнелеулерге айналады: сөз векторлары (сөзді кодтаушы), терминалдық түйіндер (span векторлары, қоршау бағаналары), терминалдық емес түйіндер (span жіктеуіш), талдау ағашы (нейрондық CKY). Терминалдан терминалдық емес элементтерге жасалатын шамалау, тілдің қандай құрылымдарға рұқсат беретінін анықтайды. Символикалық лингвистикалық бейнелеулер есептеу лингвистикасында жиі қолданылады. Лингвистикадағы символдар немесе өлшемдер емес басқа бейнелеулерге ережелер мен рейтингтер кіреді.

A symbolic linguistic representation is a representation of an utterance that uses symbols to represent linguistic information about the utterance, such as information about phonetics, phonology, morphology, syntax, or semantics. Symbolic linguistic representations are different from non symbolic representations, such as recordings, because they use symbols to represent linguistic information rather than measurements. Symbolic representations are widely used in linguistics. In syntactic representations, atomic category symbols often refer to the syntactic category of a lexical item. Examples include lexical categories such as auxiliary verbs (INFL), phrasal categories such as relative clauses (SRel) and empty categories such as wh traces (tWH). In some formalisms, such as Lexical Functional Grammar, these symbols can refer to both grammatical functions and values of grammatical categories. In linguistics, empty categories are represented with ∅. Symbolic representations also appear in phonetic transcription, descriptions of phonological processes, trochees, phonemes, morphophonemes, natural classes, semantic features such as animacy and the qualia structures of Generative Lexicon Theory. In natural language processing, linguistic representations, such as syntactic representations, have long been in the service of improving the output of information retrieval systems, such as search engines and machine translation systems. Recently, in span based neural constituency parsing lexical items begin as wordpiece tokens or BPE tiktokens before they are transformed into several other representations: word vectors (word encoder), terminal nodes (span vectors, fenceposts), non terminal nodes (span classifier), parse tree (neural CKY). It's suggested that the mapping from terminals to non terminals learns what constructions are permitted by the language. Symbolic linguistic representations are frequently used in computational linguistics. Other representations in linguistics that are not symbols or measurements include rules and rankings.