본문으로
댓글 쓰기

Komputa lingvistiko por Esperanto

글쓴이: AleksandrSup, 2023년 1월 19일

글: 6

언어: Esperanto

AleksandrSup (프로필 보기) 2023년 1월 19일 오후 6:00:07

Esperanto estas bonega lingvo kun multaj aktivaj parolantoj, sed mi ne scias eĉ iun indan korpuson de Esperantaj tekstoj. Ankaŭ Esperanto havas sufiĉe simplan gramatikon, tial ĝi povus uzati por prototipi, fari iajn eksperimentajn pri komputa lingvistiko.
Por tio mi petas informi pri ĉiuj projektoj farantaj:
  • grandan korpuson de tekstoj (por havi materialon por laboro);
  • morfologian analizilon (por determini gramatikajn formojn de vortoj);
  • vort-vektorojn (por konverti vortojn al vektorojn por analizi senca proksimeco);
  • eble eĉ sintaksan analizilon aŭ iajn aliajn komputajn ilojn?

AleksandrSup (프로필 보기) 2023년 1월 19일 오후 6:40:32

La nura komputa projekto rilata al Esperanto, kiun mi scias, estas fastText, kiu faris vort-vektorojn por 157 lingvoj inkluzive Esperanton. Ĝi uzis Vikipedion kiel korpuso. Mi ne ŝatas la rezulton, ĉar oni ne konvertis vortojn al la vortara formo, sekve oni havas diversajn vektorojn por esti kaj estas, lando kaj landoj, kio ne plej utilas laŭ mia opinio.

Frano (프로필 보기) 2023년 1월 19일 오후 8:24:36

Altebrilas (프로필 보기) 2023년 1월 20일 오후 1:51:05

Kio estas vortvektoro?

Mi iam verkis programeton en python por distrancxi radikojn el vortoj. Oni devas disponi pri listo de radikaro kaj, post forjxeto de la terminajxoj, vidi cxu la listigitaj radikoj aperas komence aux fine de la vorto. La programo printas la nerekonitajn vortojn, kaj la uzanto povas aldoni radikon en la listo aux korekti eraron.

Mi ne konas aliajn laborojn, sed multe supozas, ke tiaj ekzistas, cxar auxtomata tradukado bezonas tiajn ilojn.

AleksandrSup (프로필 보기) 2023년 1월 21일 오후 5:13:17

Altebrilas:Kio estas vortvektoro?
Tio estas iom da nombroj reprezentantaj iun vorton, komputitaj per statistiko pri aperoj de la vorto en tekstoj apud aliaj vortoj. Ideale vortvektoroj de vortoj kun similaj sencoj estas proksimaj en vektora spaco. Vi povas legi pli en ekzemple angla Vikipedio (Word embedding).

Frano (프로필 보기) 2023년 1월 22일 오후 7:30:58

다시 위로