Η Τεχνητή Νοημοσύνη έδειξε επιτυχίες στην έρευνα των σπάνιων και λιγότερο διαδεδομένων γλωσσών

Τα μεγάλα γλωσσικά μοντέλα μειώνουν το γλωσσικό χάσμα

Οι νέες εκδόσεις τεχνητής νοημοσύνης (ΤΝ) δείχνουν σημαντική πρόοδο στη διαχείριση σπάνιων και λιγότερο γνωστών γλωσσών, με αποτέλεσμα να μειώνονται δραματικά τα παγκόσμια «γλωσσικά χάσματα». Αυτό επιβεβαιώνει μια έρευνα της εταιρείας RWS που δημοσιεύτηκε στο TechRadar.

1. Τι δείχνουν οι έρευνες
- Το Google Gemini Pro έλαβε βαθμό ποιότητας άνω των 4,5 από 5 για τη γλώσσα κίνιαρουάντα – στην οποία μιλούν περίπου 12 εκατομμύρια άνθρωποι στη Ρουανδία, την Ουγκάντα και τη Δημοκρατία του Κονγκό.
- Οι συγγραφείς εξηγούν την επιτυχία με το ότι τα σύγχρονα μοντέλα βασίζονται όχι μόνο σε τεράστια σύνολα δεδομένων συγκεκριμένης γλώσσας, αλλά χρησιμοποιούν κοινά στατιστικά μοτίβα όλων των γλωσσών (μηχανισμός μεταφοράς μεταξύ γλωσσών).
- Οι βελτιώσεις στους τωκενιζέστερους – συστήματα διαίρεσης κειμένου σε «τωκέν» – συμβάλλουν επίσης στη πιο ακριβή επεξεργασία σπάνιων γλωσσών.

2. Ο εφέτος «drift benchmark»
Οι ειδικοί ανακαλύψαν ότι κατά τη μετάβαση από μια έκδοση μοντέλου στην επόμενη, οι δυνατότητές του μπορεί να αλλάξουν απροσδόκητα:
- Η τελευταία έκδοση του OpenAI GPT υπολείπεται σε ορισμένες εργασίες δημιουργίας περιεχομένου από παλαιότερα μοντέλα, αν και το προγενέστερο ήταν πιο αποτελεσματικό.
- Η αποδοτικότητα του τωκενιζέστη μπορεί να διαφέρει έως 3,5 φορές μεταξύ γενεών· αυτό σημαίνει ότι τα αποτελέσματα προηγούμενων δοκιμών δεν είναι πάντα εφαρμόσιμα στις νέες εκδόσεις.

3. Τι αλλάζει στις προτεραιότητες των αναπτυξιακών ομάδων
- Πρώην οι εργαστήρια ΤΝ έδιναν προτεραιότητα στην απόδοση στα αγγλικά και σε μερικές βασικές γλώσσες.
- Τα σύγχρονα μοντέλα ήδη αντιμετωπίζουν επιτυχώς αυτές τις εργασίες, οπότε η προσοχή μετατοπίζεται σε ευρύτερη κοινότητα: η υποστήριξη σπάνιων γλωσσών γίνεται ολοένα πιο σημαντική.
- Ωστόσο, το σκορ 4,5/5 δεν εγγυάται πραγματικό επίπεδο κυριαρχίας της γλώσσας· η πολυγλωσσία εξακολουθεί να μην θεωρείται κρίσιμη.

4. Συμπέρασμα
Η ΤΝ συνεχίζει να σπασά τα εμπόδια μεταξύ πολιτισμών και γλωσσών. Παρά το γεγονός ότι η «καλυκίδα» των σπάνιων γλωσσών δεν έχει γίνει ακόμη υποχρεωτική απαίτηση, η τάση προς μια πιο εκτενή κάλυψη του κοινού είναι ήδη εμφανής και, όπως αναμένουν οι ειδικοί, θα ενισχυθεί τα επόμενα χρόνια.