Can Esperanto Make AI Smarter? I Tested It | Esperanto vs English AI Experiment
Asakura Tetsuo Folco publikigis antaŭ 14 tagoj en Esperanto Ĉu ne?
Ni ne povas montri ĉi tiun filmeton al vi, ĉar viaj agordoj pri kuketoj ne permesas tion al ni.
Por rigardi kaj re-agordi viajn kuketojn, vizitu la paĝon Kuketoj.
Vi povas daŭre spekti la filmeton ĉe la originala platformo:
Originala paĝo
Spekti filmon ĉe Tubaro ne ŝtelas la spekton de Jutubo. La spekto enkalkuliĝas en ambaŭ Tubaro kaj Jutubo. Mi komprenas.
- 5 Spektoj
- Komentu!
- 2
Via ŝato/malŝato, ankaŭ viaj ĝenro-proponoj por ĉi tiu afiŝo estas konservita nur en Tubaro, ili ne estas sendataj ekster niaj serviloj. Simile, la statistikoj pri la afiŝo (spektoj, ŝatoj, komentoj ktp), ankaŭ aliaj atribuoj, ekzemple ĝenroj, venas de Tubaro mem. Ili neniel estas rilataj al tiuj ĉe la originala platformo. Mi komprenas.
Viaj signaloj pri problemoj rilate ĉi tiun afiŝon estos sendataj nur al la administrantoj de Tubaro. Ĉi tiu funkcio neniel estas rilata al ebla simila eco ĉe la originala platformo de la filmo. Por raporti problemon al la administrantoj de la originala platformo, uzu la raportofunkcion ĉe tiu platformo. Mi komprenas.
Priskribo
A year ago I asked ChatGPT if Esperanto could make AI smarter. It said: “Yes, absolutely.” This time I didn’t ask. I tested it.
With the help of Claude, I built two tiny AIs from scratch (the same design as ChatGPT, about a million parameters each) and trained one in Esperanto and one in English on exactly the same text: the whole Bible, 31,101 verses aligned one by one. 2,000 verses were hidden from both to test them.
What happened:
• Reading letter by letter, the Esperanto AI was 5% less “surprised” by verses it had never seen, and 20% better with words it had never seen.
• Reading word chunks like ChatGPT, the two languages tied. With a new tokenizer that splits Esperanto into its real roots and affixes, Esperanto won again by 3%, at the cost of about 19% more tokens.
• With only 10% of the text, the Esperanto AI already beat the English AI trained on all of it.
• With little text plus the root tokenizer, Esperanto won at every size and memorized the least.
The honest part: these are tiny models, trained on one book, with 17th-century English. Esperanto saves text for learning the language, not for learning about the world.
Verdict: not smarter, but it learns a language with far less text. ChatGPT was half right: right about the roots, wrong about fewer tokens.
Chapters
0:00 ChatGPT said yes
0:14 How Esperanto builds words
0:39 The experiment: two tiny AIs
1:09 How to measure it
1:20 Test 1: letter by letter
1:39 Test 2: word chunks and the root cutter
2:14 Test 3: less text
2:31 Test 4: little text + roots
2:47 The honest part
3:07 Verdict
Previous video: https://youtu.be/cfVXzpyrbmc
Subtítulos en español incluidos.
Data: Bible parallel corpus by Christos Christodoulopoulos and Mark Steedman (github.com/christos-c/bible-corpus)
Narration voice: Kokoro text-to-speech (Apache 2.0)
#Esperanto #AI #MachineLearning
