Chcete si procvičit mozkové závity v oblasti NLP?

Chcete si procvičit mozkové závity v oblasti NLP – zpracování přirozeného textu? Mám pro vás jednu úlohu pro pokročilé, kterou jsem právě dostal a vyřešil v „Ruské škole“.

Procvičme si „Hidden Markov Model“ se třemi skrytými stavy: N (noun = podstatné jméno), V (verb=sloveso) a O (other = jiné slovo). Nechť všechny přechody mezi jednotlivými stavy rovnocenné (mají stejnou pravděpodobnost).

Předpokládejme následující možné výstupy:
N: mimsy | borogoves
V: were | borogoves
O: All | mimsy | the

Nyní si otestujme tuto větu „All mimsy were the borogoves“.

Kontrolní otázky pro vás:

1. Jaké tagy můžeme v souladu s Hidden Markov Model (skrytý Markovův model) vytvořit (např. ONVON…)?
2. Jaký tag má nevětší pravděpodobnost (pozor trošku chyták)?
3. Pravděpodobnost přechodu p (V | O) čili z O na V je v tomto modeluje 1/3. Spočítejte jednu interakcí Baum-Welchova algoritmu a řekněte, jak se změní pravděpodobnost (nápověda: je třeba odhadnout pravděpodobnosti pro (O -> V) a (O->?) a spočítat jejich poměr).

Výzva: Tomu, kdo sem první napíše všechny tři správné odpovědi platím pivo!

Ukázka inspirována: https://www.coursera.org/le…/language-processing/home/week/2