Uvod u obradu prirodnog jezika

Upoznavanje područja obrade prirodnog jezika. Obrada na morfološkom, sintaktičkom, semantičkom i pragmatičkom nivou s lingvističke i računalne perspektive. Usvajanje temeljnih modela i algoritama za obradu prirodnog jezika.

Predznanje

linearna algebra i vjerojatnost, objektno orijentirano programiranje u Pythonu.

Predavanja

Na predavanjima će se govoriti o osnovama obrade teksta, metrikama teksta, ispravljanju pravopisnih pogrešaka, modeliranju jezika, klasifikaciji teksta, analizi sentimenta, prepoznavanju imenovanih entiteta, parsiranju teksta temeljem gramatike, vraćanju informacijama, sustavima za odgovaranje na pitanja, sumarizacija teksta.

1. Uvod (slide)

2. Osnove obrade teksta (slide, video)

3. Udaljenost nizova znakova (slide, video)

4. Modeliranje jezika (slide, video)

5. Pravopisne greške (slide, video)

6. Klasifikacija teksta (slide, video)

7. Analiza sentimenta (slide, video)

Vježbe

Laboratorijske vježbe uključuju implementaciju algoritama za obradu prirodnog jezika.

1. Uvod (binder, colab)

2. Osnove obrade teksta (binder, colab)

3. Minimalna udaljenost (binder, colab)

4. Model jezika (binder, colab)

5. Pravopisne greške (binder, colab)

6. Klasifikacija teksta (binder, colab)

7. Analiza sentimenta (binder, colab)

Literatura

Speech and Language Processing (3rd edition), Dan Jurafsky, James H. Martin