Γιατί οι υπολογιστές κατανοούν τη γλώσσα;

Οι υπολογιστές δεν κατανοούν εγγενώς τη γλώσσα με τον τρόπο που κάνουν οι άνθρωποι. Δεν κατανοούν το νόημα ή το πλαίσιο όπως κάνουμε. Αντ 'αυτού, επεξεργάζονται τη γλώσσα μέσω σύνθετων αλγορίθμων και στατιστικών μοντέλων. Εδώ είναι μια κατανομή:

* χειρίζονται σύμβολα, όχι νόημα: Οι υπολογιστές δουλεύουν με σύμβολα - γράμματα, αριθμούς, στίξη. Αναλύουν τις σχέσεις μεταξύ αυτών των συμβόλων, όχι των υποκείμενων εννοιών που αντιπροσωπεύουν.

* Στατιστική ανάλυση: Η επεξεργασία φυσικής γλώσσας (NLP) βασίζεται σε μεγάλο βαθμό στις στατιστικές. Οι αλγόριθμοι εκπαιδεύονται σε τεράστια σύνολα δεδομένων κειμένου και κώδικα, πρότυπα μάθησης και πιθανότητες χρήσης λέξεων, δομής προτάσεων και σχέσεων μεταξύ λέξεων. Προβλέπουν το πιο πιθανό νόημα που βασίζεται σε αυτά τα πρότυπα.

* Μηχανική μάθηση: Τα μοντέλα μηχανικής μάθησης, όπως τα νευρωνικά δίκτυα, επιτρέπουν στους υπολογιστές να μάθουν από δεδομένα χωρίς ρητό προγραμματισμό. Μπορούν να εντοπίσουν σύνθετα πρότυπα σε γλωσσικά δεδομένα που μπορεί να είναι υπερβολικά λεπτές για τους ανθρώπους που οι προγραμματιστές θα καθορίσουν άμεσα. Αυτά τα μοντέλα βελτιώνουν την ακρίβειά τους με την πάροδο του χρόνου μέσω της έκθεσης σε περισσότερα δεδομένα.

* Συστήματα βασισμένων σε κανόνες: Οι παλαιότερες προσεγγίσεις NLP βασίστηκαν σε χειροποίητους κανόνες που καθορίζουν γραμματικές δομές και σημασιολογικές σχέσεις. Αυτά τα συστήματα ήταν περιορισμένα στην ικανότητά τους να χειρίζονται τις αποχρώσεις και την ασάφεια της φυσικής γλώσσας.

Στην ουσία, οι υπολογιστές προσομοιώνουν την κατανόηση. Υπερέχουν σε εργασίες όπως:

* Μετάφραση: Προσδιορισμός των αντίστοιχων λέξεων και φράσεων σε διαφορετικές γλώσσες βασισμένες σε στατιστικές συσχετίσεις.

* Ανάλυση συναισθημάτων: Προσδιορισμός του συναισθηματικού τόνου ενός κειμένου αναλύοντας τις επιλογές λέξεων και τη δομή των προτάσεων.

* Ερώτηση Απάντηση: Ανάκτηση σχετικών πληροφοριών από μια βάση δεδομένων με βάση την αντιστοίχιση λέξεων -κλειδιών και την ανάλυση συμφραζομένων.

* Περίληψη κειμένου: Συμπύκνωση μεγάλων ποσοτήτων κειμένου σε μικρότερες περιλήψεις προσδιορίζοντας βασικές προτάσεις και έννοιες.

Ωστόσο, εξακολουθούν να αγωνίζονται με:

* σαρκασμός και ειρωνεία: Αυτά βασίζονται σε μεγάλο βαθμό στο πλαίσιο και σε σιωπηρή έννοια, τα οποία είναι δύσκολα για τους υπολογιστές να κατανοήσουν.

* ασάφεια: Η ανθρώπινη γλώσσα είναι συχνά διφορούμενη, με λέξεις και φράσεις που έχουν πολλαπλές έννοιες.

* Λογιστική κοινή λογική: Οι υπολογιστές δεν διαθέτουν τις γνώσεις υποβάθρου και την πραγματική κατανόηση που κατέχουν οι άνθρωποι.

Έτσι, ενώ οι υπολογιστές μπορούν να εκτελούν εντυπωσιακά καθήκοντα που σχετίζονται με τη γλώσσα, δεν καταλαβαίνουν πραγματικά * τη γλώσσα με τον ίδιο τρόπο που κάνουν οι άνθρωποι. Η "κατανόησή τους" είναι μια εξελιγμένη προσομοίωση που βασίζεται σε στατιστικά πρότυπα και αλγόριθμους.