Jazykové modely: Moderné nástroje na riešenie komplexných úloh

Abstract

Umelá inteligencia je aktuálne jednou z najrýchlejšie sa rozvíjajúcich oblastí informačných technológií. Obzvlášť disciplína spracovania prirodzeného jazyka (Natural Language Processing − NLP), ktorá je interdisciplinárnym odborom kombinujúcim počítačovú vedu, lingvistiku, matematiku, filozofiu a ďalšie oblasti. Medzi úlohy, ktorým sa táto oblasť venuje, patrí napríklad porozumenie prirodzenému jazyku, jeho generovanie, analýza sentimentu, vyhľadávanie a extrakcia informácií a podobne. O niektorých konkrétnych úlohách a ich riešeniach si môžete prečítať v článku Identifikácia entít pre extrakciu adries z transkribovaných rozhovorov s využitím syntetických dát [1] na webovej stránke Národného kompetenčného centra pre HPC. Dozviete sa o konkrétnej aplikácii metódy identifikácie entít (Named Entity Recognition − NER) na textové dáta obsahujúce adresy, pričom cieľom je extrahovať názov ulice, číslo domu, názov obce a poštové smerovacie číslo pomocou optimalizácie jazykového modelu SlovakBERT. V ďalšom článku Využitie veľkých jazykových modelov na efektívnu analýzu náboženských textov sa zaoberáme tvorbou vektorových databáz z náboženských textov pomocou verejne dostupných aj proprietárnych
modelov, za účelom efektívneho vyhľadávania pasáží s relevantným obsahom (information retrieval).