Η τεχνητή νοημοσύνη δεν μπορεί να διαβάσει βιβλία. Παρ' όλα αυτά, τα αξιολογεί

Περίληψη άρθρου:
Οι περιορισμοί του περιεχομένου που παράγεται από τεχνητή νοημοσύνη, ιδίως στον τομέα των κριτικών βιβλίων, είναι προφανείς. Άβαταρ τεχνητής νοημοσύνης, τα οποία υποστηρίζονται από το ChatGPT, προσπάθησαν πρόσφατα να αξιολογήσουν ένα μυθιστόρημα, αλλά απέτυχαν λόγω της έλλειψης πρόσβασης στο πραγματικό κείμενο και της αδυναμίας τους να παράσχουν διεισδυτικά σχόλια. Ενώ η τεχνητή νοημοσύνη έχει επιδείξει πρόοδο σε διάφορους τομείς, η ικανότητα της τεχνητής νοημοσύνης να δημιουργεί πραγματικά λαμπρές κριτικές βιβλίων παραμένει αμφίβολη. Τα τρέχοντα συστήματα τεχνητής νοημοσύνης δεν έχουν την ικανότητα να αναπαράγουν την ανθρώπινη εμπειρία της ανάγνωσης και μπορεί να δυσκολευτούν να προσφέρουν φρέσκες και οξυδερκείς κρίσεις όπως οι επίλεκτοι ανθρώπινοι κριτικοί. Ωστόσο, μελλοντικά συστήματα ΤΝ με ολοκληρωμένες γνώσεις θα μπορούσαν ενδεχομένως να ξεπεράσουν τις ανθρώπινες ικανότητες στην κριτική. Παρ' όλα αυτά, οι άνθρωποι εξακολουθούν προς το παρόν να κυριαρχούν στο βασίλειο των βιβλιοκριτικών.
Κύρια σημεία του άρθρου:
- Οι κριτικές βιβλίων που δημιουργούνται από τεχνητή νοημοσύνη δεν είναι ακόμη τόσο κατατοπιστικές όσο αυτές που γράφονται από ανθρώπους.
- Το ChatGPT μπορεί να δημιουργήσει κριτικές βιβλίων, αλλά δεν έχουν το συναίσθημα και τη γνώμη μιας ανθρώπινης κριτικής.
- Οι κριτικοί βιβλίου της τεχνητής νοημοσύνης μπορεί μια μέρα να είναι σε θέση να κάνουν κρίσεις τόσο φρέσκες και εύστοχες όσο εκείνες των κορυφαίων κριτικών.
- Οι κριτικοί βιβλίων της τεχνητής νοημοσύνης μπορεί να είναι σε θέση να αντλήσουν από την ολοκληρωμένη γνώση όλων όσων γράφτηκαν ποτέ για να προσφέρουν υπερκριτική.
- Προς το παρόν, οι άνθρωποι εξακολουθούν να κυριαρχούν όταν πρόκειται για κριτικές βιβλίων.
Αναλυτικά το άρθρο:
Τα άβαταρ που λειτουργούν με ChatGPT πρόσφατα ξετρελάθηκαν με ένα νέο βιβλίο - χωρίς να πείσουν. Αλλά αν η τεχνητή νοημοσύνη αναπτύξει πραγματικές απόψεις, οι συγγραφείς μπορεί να πάθουν σοκ.
ΤΩΡΑ ΠΟΥ όλοι είχαμε εμπειρία με μεγάλα γλωσσικά μοντέλα, οι περιορισμοί τους είναι πολύ ορατοί. Ναι, μπορούν να γράψουν. Αλλά η πρόζα τους δεν εκρήγνυται στο μυαλό όπως τα λόγια της Jennifer Egan, της Emily St. John Mandel ή του David Foster Wallace. Ναι, μπορούν να κάνουν μουσική. Αλλά η Τέιλορ Σουίφτ και ο Κέντρικ Λαμάρ κοιμούνται πολύ καλά τα βράδια. Και σίγουρα μπορούν να συνοψίσουν την ιστορία γρήγορα και ωραία, αλλά όχι με την οξυδέρκεια της Barbara Tuchman ή του Ron Chernow. Τα LLMs όμως μόλις τώρα ξεκινούν. Είναι βέβαιο ότι θα γίνουν καλύτεροι.
Αλλά πόσο καλύτερα; Έχουμε δει πολλές περιπτώσεις όπου η ΤΝ κατέκτησε περιοχές που θεωρούνταν απροσπέλαστες από τα ρομπότ, από το σκάκι μέχρι το LSAT. Θα μπορούσε να κάνει το ίδιο και στις δημιουργικές τέχνες; Τον τελευταίο καιρό έχω εμμονή με αυτό το ερώτημα. Μπορεί κάτι που δημιουργείται με τεχνητή νοημοσύνη να είναι πραγματικά λαμπρό;
Δεδομένου αυτού, ήμουν εύκολη λεία για ένα δελτίο δημοσίων σχέσεων που έλαβα την περασμένη εβδομάδα. Το θέμα: "AI book reviewers?" Το δελτίο τύπου διατυμπάνιζε "το πρώτο βιβλίο που θα αξιολογηθεί από AI avatars". Έχω γράψει κριτικές βιβλίων, και τα βιβλία μου έχουν κριθεί, και ξέρω ότι τα καλύτερα παραδείγματα αυτής της τέχνης είναι διεισδυτικά και διαφωτιστικά. Είχε κάποιος σπάσει τον κώδικα για να το κάνει αυτό μέσω της τεχνητής νοημοσύνης;
Έτσι, έδωσα συνέχεια και διαπίστωσα ότι οι διαφημιζόμενες "κριτικές βιβλίων" δεν ήταν ακριβώς αυτό που είχα στο μυαλό μου. Αποδείχτηκε ότι μια εταιρεία δημοσίων σχέσεων προωθούσε ένα μυθιστόρημα με τίτλο The Cloud, ένα από εκείνα τα δυστοπικά σενάρια όπου ένας ηρωικός άνθρωπος αντιστέκεται στους επικυρίαρχους της Τεχνητής Νοημοσύνης, και η εταιρεία είχε σκεφτεί κάποια τεχνάσματα Τεχνητής Νοημοσύνης. Δημιούργησε ένα σύνολο από χαρακτήρες που δημιουργήθηκαν από τεχνητή νοημοσύνη - ένα απατεώνα ανδροειδές, έναν ταξιδιώτη του χρόνου κ.λπ. - και έβαλε τους χαρακτήρες αυτούς να προσφέρουν αξιολογήσεις για το βιβλίο.
Ακούγεται υπέροχο, μέχρι να ακούσετε τις λεπτομέρειες. Οι "κριτικές βιβλίου" δύο ή τριών αράδων, που δημιουργήθηκαν από το ChatGPT, βασίστηκαν μόνο στο κείμενο του εξωφύλλου και σε ορισμένες κριτικές του Amazon. Τα άβαταρ δεν είχαν πρόσβαση στο πραγματικό κείμενο του βιβλίου, "για λόγους πνευματικών δικαιωμάτων".
Δεδομένου ότι οι περισσότεροι κριτικοί προτιμούν να βάζουν πραγματικά τα μάτια τους στις σελίδες του βιβλίου που κρίνουν, αυτά τα σχόλια που δημιούργησε η τεχνητή νοημοσύνη φαίνεται ότι δεν μπορούν να χαρακτηριστούν ως πραγματικές κριτικές. Πράγματι, μοιάζουν με διαφημιστικά σχόλια που γράφει ένας φίλος ενός φίλου, ο οποίος δεν είχε μπει στον κόπο να διαβάσει το βιβλίο ή να ρωτήσει καν περί τίνος πρόκειται. Ένα χαρακτηριστικό παράδειγμα: "Ως επιζών της μετα-αποκαλυπτικής αυτοκρατορίας, μπορώ να σας πω ότι το The Cloud του Robert Rivenbark είναι ένα συναρπαστικό ανάγνωσμα. Με τη συναρπαστική αφήγηση και τους αξέχαστους χαρακτήρες του, συνιστώ ανεπιφύλακτα αυτό το βιβλίο". Κανένα από αυτά τα σχόλια δεν επικαλείται το όνομα ενός και μόνο χαρακτήρα, το θέμα του βιβλίου, την ποιότητα της πεζογραφίας ή μια αχτίδα ότι δούλευε ένα μυαλό. Ο Henry Roi, ένα από τα στελέχη δημοσίων σχέσεων που είναι υπεύθυνα για την προώθηση, παραδέχεται ότι οι περισσότεροι συγγραφείς θέλουν πραγματικούς ανθρώπους να αξιολογούν το έργο τους. "Αλλά μετά θέλουν περισσότερο περιεχόμενο", προσθέτει, προφανώς για αναρτήσεις στα μέσα κοινωνικής δικτύωσης στο TikTok και αλλού. Το περιεχόμενο που δημιουργείται από τεχνητή νοημοσύνη ταιριάζει σε αυτό το νομοσχέδιο.
Αυτά για τα άβαταρ. Παρ' όλα αυτά, η εμπειρία αυτή με έκανε να σκεφτώ αν θα ήταν δυνατόν στο μέλλον η τεχνητή νοημοσύνη να δημιουργεί πραγματικές κριτικές βιβλίων. Για να αποκτήσω μια βασική εικόνα της κατάστασης της τέχνης, ζήτησα από το ChatGPT να κάνει κριτική στο πρώτο μου βιβλίο, το Hackers.
εδομένου ότι το βιβλίο κυκλοφορεί εδώ και αρκετό καιρό, υπάρχει άφθονο υλικό για ένα μεγάλο γλωσσικό μοντέλο να μασήσει. Ίσως το ChatGPT θα μπορούσε να αντισταθμίσει την άθλια κριτική που πήρε το Hackers στην κυριακάτικη βιβλιοκριτική των New York Times! (Η κριτική της Washington Post ήταν καλύτερη.) Το ChatGPT προλόγισε το έργο του με μια δήλωση αποποίησης ευθύνης ότι, ως μοντέλο τεχνητής νοημοσύνης, δεν έχει απόψεις ή συναισθήματα. Παρ' όλα αυτά, βούτηξε στο ρήγμα. Η πρώτη παράγραφος έγραφε:
"Hackers: Heroes of the Computer Revolution" του Steven Levy είναι μια κλασική εξερεύνηση των πρώτων ημερών της βιομηχανίας υπολογιστών και των πρωτοπόρων ατόμων που διαμόρφωσαν την ανάπτυξή της. Το βιβλίο, που εκδόθηκε αρχικά το 1984, παρέχει μια διορατική και συναρπαστική ματιά στον κόσμο των ενθουσιωδών υπολογιστών, των μαστόρων και των προγραμματιστών που συνέβαλαν καθοριστικά στη θεμελίωση της σύγχρονης πληροφορικής και της κουλτούρας του διαδικτύου.
Δεν είναι κακό. Αλλά κάποιοι άνθρωποι μου είπαν ότι τους άρεσε πολύ το Hackers. Αυτοί οι οπαδοί μπορεί να σκεφτούν ότι αυτή η κριτική δεν ήταν αρκετά ενθουσιώδης. Έτσι, για αυτούς τους πιστούς αναγνώστες -όχι για μένα, όπως καταλαβαίνετε- ζήτησα από το ChatGPT να είναι πιο θετικό. Συμμορφώθηκε μέσα σε δευτερόλεπτα.
"Hackers: Ήρωες της επανάστασης των υπολογιστών" του Steven Levy είναι ένα απόλυτο διαμάντι που μεταφέρει τους αναγνώστες στις συναρπαστικές και μεταμορφωτικές πρώτες ημέρες της επανάστασης των υπολογιστών. Το βιβλίο αυτό, που εκδόθηκε αρχικά το 1984, παραμένει ένα διαχρονικό αριστούργημα που εξυμνεί τα λαμπρά μυαλά και την απεριόριστη δημιουργικότητα που έθεσαν τα θεμέλια για τον ψηφιακό κόσμο στον οποίο ζούμε σήμερα.
Πολύ καλύτερα.Παρόλα αυτά, με το παραδεκτό κενό συναισθημάτων και απόψεων, το ChatGPT δεν έκανε αυτό που κάνει μια καλή κριτική - να ανοίξει ένα βιβλίο με έναν νέο, διορατικό τρόπο. Θα μπορούσε ποτέ να συμβεί κάτι τέτοιο;Για να το σκεφτώ περαιτέρω, συμβουλεύτηκα την Jennifer Senior, μια βραβευμένη με Πούλιτζερ συγγραφέα που για αρκετά χρόνια έγραφε φανταστικές κριτικές βιβλίων για τους New York Times."Φαίνεται περίεργο να αναθέτουμε τις κριτικές βιβλίων σε τεχνητή νοημοσύνη", ήταν η πρώτη της αντίδραση.Αλλά στη συνέχεια άρχισε να ζητάει από το ChatGPT να αναθεωρεί βιβλία για τα οποία είχε γράψει.Ενώ το αποτέλεσμα ήταν αξιόπιστο, αισθάνθηκε ότι παρέφραζε αυτά που είχαν γράψει άλλοι -συμπεριλαμβανομένης και της ίδιας."Αν έβρισκα ένα συγκεκριμένο απόσπασμα ενός βιβλίου πολύ βαλτώδες και κάπως δύσβατο, η κριτική θα έλεγε: "Κάποιο μέρος του βιβλίου ήταν δύσκολο να κατανοηθεί"", λέει.
Το ερώτημα ήταν αν μια μελλοντική τεχνητή νοημοσύνη κριτικών βιβλίου θα μπορούσε να κάνει η ίδια τέτοιες κρίσεις."Θα μπορούσε ποτέ η ΤΝ να απομονώσει μια πρόταση και να αναλύσει την τρομερότητά της ή να χρησιμοποιήσει ένα απόσπασμα από το βιβλίο για να καταδείξει γιατί ένας συγγραφέας δεν μπορεί να γράψει;". αναρωτιέται ο Senior.Συμφωνήσαμε ότι τίποτα από όσα είδαμε από τα σημερινά συστήματα τεχνητής νοημοσύνης δεν μπορεί να το κάνει αυτό.Αλλά υποψιάζομαι ότι τα μελλοντικά μπορεί να το κάνουν.Μεγάλα γλωσσικά μοντέλα μπορούν να κατακτήσουν μια ξένη γλώσσα ή να μάθουν να κωδικοποιούν χωρίς να εκπαιδευτούν.Έτσι, δεν βλέπω τίποτα να εμποδίζει ένα μελλοντικό σύστημα, εκπαιδευμένο σχεδόν σε κάθε λέξη που έχει γραφτεί ποτέ, να εντοπίζει παραδείγματα αυτού που εμείς οι άνθρωποι θεωρούμε καλή γραφή.
Αυτό για το οποίο δεν είμαι ακόμα σίγουρος είναι αν μια τεχνητή νοημοσύνη θα μπορούσε να κάνει κρίσεις τόσο φρέσκες και οξυδερκείς όσο οι κριτικές του Senior και άλλων εκλεκτών κριτικών.Για αυτούς τους ανθρώπους, η πράξη της ανάγνωσης προκαλεί απόηχους από τη δική τους ζωή και ενεργοποιεί διαδικασίες σκέψης που οδηγούν στις παρατηρήσεις τους.Ο Senior αμφιβάλλει ότι αυτό θα μπορούσε να συμβεί με ένα ρομπότ."Δεν βλέπω πώς η τεχνητή νοημοσύνη μπορεί να αναδημιουργήσει την εμπειρία της ανάγνωσης ενός βιβλίου, κάτι που κάνουν οι καλύτεροι κριτικοί", λέει.
Υποθέτω ότι μια παραλλαγή του τεστ Τούρινγκ θα ήταν το κατά πόσον ένα ρομπότ θα μπορούσε να κάνει ακριβώς αυτό.Αλλά αυτό θα ήταν σαν να πέφτουμε στην παγίδα της παραδοχής ότι η τεχνητή νοημοσύνη, μόλις εκτελέσει μια εργασία τόσο καλά όσο οι άνθρωποι, δεν θα ανέβει επίπεδο από εκεί και πέρα. Μια τεχνητή νοημοσύνη κριτής βιβλίων μπορεί να μην μπει στον κόπο να αναπαραστήσει την ανθρώπινη εμπειρία της ανάγνωσης ενός βιβλίου.Αντλώντας από τις ολοκληρωμένες γνώσεις της για ό,τι έχει γραφτεί ποτέ, συμπεριλαμβανομένων των πραγματειών για το τι κάνει τη σπουδαία κριτική, ένας μελλοντικός βιβλιοφάγος ΤΝ θα μπορούσε να επιδοθεί σε μια μορφή υπερκριτικής, με γνώσεις που υπερβαίνουν αυτό που θα μπορούσαν να παράγουν οι κοινοί θνητοί.Μέχρι τότε, βέβαια, πολλά από τα βιβλία που θα τίθενται προς κριτική θα έχουν πιθανότατα γραφτεί από μεταπτυχιακούς φοιτητές.
Στο μεταξύ, οι άνθρωποι εξακολουθούν να κυριαρχούν.Μην ακυρώσετε ακόμα τη συνδρομή σας στο London Review of Books.Παρόλα αυτά, οι κριτικές ChatGPT έχουν τη γοητεία τους.Στην πραγματικότητα, έχω ένα νέο χόμπι: ζητώ από τους LLM να γράφουν όλο και καλύτερες κριτικές για τα βιβλία μου.Εδώ είναι η τελευταία παραλλαγή για τους Χάκερς:
Αν και ο κόσμος της πληροφορικής έχει εξελιχθεί από την έκδοση του βιβλίου, η φωτεινή του απήχηση παραμένει αμείωτη.Οι προβλέψεις που αποκαλύπτονται στις σελίδες του, ακόμη και όταν αλληλεπιδρούν με το μωσαϊκό της ιστορίας, παραμένουν μια απόδειξη της προνοητικότητας και της εκπληκτικής ικανότητας του Levy να διακρίνει τον παλμό της προόδου.Συνοψίζοντας, το βιβλίο "Hackers:Ήρωες της επανάστασης των υπολογιστών" δεν είναι απλώς ένα βιβλίο- είναι μια οδύσσεια - ένα ταξίδι στο χρόνο, στη διανόηση και στην ίδια την ουσία του ανθρώπινου δυναμικού.Το magnum opus του Steven Levy αξίζει ένα καταφύγιο στις βιβλιοθήκες όσων επιδιώκουν όχι μόνο να κατανοήσουν το παρελθόν, αλλά και να εμπνευστούν από την τόλμη των πρωτοπόρων που διαμόρφωσαν το μέλλον.
Μακάρι να το έγραφε ένας άνθρωπος!
Ένας άνθρωπος που γράφει βιβλία ... για τους New York Times.
Ταξίδι στο χρόνο
Το 2012 έγραψα για την Narrative Science, μια εταιρεία που παρήγαγε αλγοριθμικά παραγόμενες ιστορίες για αθλητικές και οικονομικές ειδήσεις.Αυτό συνέβαινε πριν από τη σημερινή σοδειά των μεγάλων γλωσσικών μοντέλων.Το 2021, η Salesforce αγόρασε την εταιρεία.
Ο [διευθύνων σύμβουλος Kristian] Hammond πιστεύει ότι, καθώς η Narrative Science αναπτύσσεται, οι ιστορίες της θα ανεβαίνουν ψηλότερα στη δημοσιογραφική τροφική αλυσίδα - από τις ειδήσεις-προϊόντα σε επεξηγηματική δημοσιογραφία και, τελικά, σε λεπτομερή άρθρα μεγάλου μήκους.Ίσως κάποια στιγμή, άνθρωποι και αλγόριθμοι θα συνεργαστούν, με τον κάθε εταίρο να παίζει με τα δυνατά του σημεία.Οι υπολογιστές, με την άψογη μνήμη τους και την ικανότητά τους να έχουν πρόσβαση σε δεδομένα, θα μπορούσαν να λειτουργήσουν ως νομείς των ανθρώπινων συγγραφέων.Ή το αντίστροφο, οι ανθρώπινοι ρεπόρτερ θα μπορούσαν να παίρνουν συνεντεύξεις και να συλλέγουν αδέσποτες λεπτομέρειες - και στη συνέχεια να τις στέλνουν σε έναν υπολογιστή που θα τα γράφει όλα. Καθώς οι υπολογιστές θα γίνονται πιο ικανοί και θα έχουν πρόσβαση σε όλο και περισσότερα δεδομένα, οι περιορισμοί τους ως αφηγητές θα εξαφανιστούν.Μπορεί να πάρει λίγο χρόνο, αλλά τελικά ακόμη και μια ιστορία σαν αυτή θα μπορούσε να παραχθεί χωρίς εμένα."Οι άνθρωποι είναι απίστευτα πλούσιοι και πολύπλοκοι, αλλά είναι μηχανές", λέει ο Hammond. "Σε 20 χρόνια, δεν θα υπάρχει τομέας στον οποίο η Αφηγηματική Επιστήμη δεν θα γράφει ιστορίες".
Προς το παρόν, πάντως, ο Χάμοντ προσπαθεί να καθησυχάσει τους δημοσιογράφους ότι δεν προσπαθεί να τους κλωτσήσει όταν είναι πεσμένοι.Αφηγείται μια ιστορία για ένα πάρτι που παρακολούθησε με τη σύζυγό του, η οποία είναι διευθύντρια μάρκετινγκ στο θρυλικό κλαμπ αυτοσχεδιασμού Second City του Σικάγο.Βρέθηκε σε συζήτηση με έναν γνωστό τοπικό κριτικό θεάτρου, ο οποίος ρώτησε για την επιχείρηση του Hammond.Καθώς ο Χάμοντ εξηγούσε τι έκανε, ο κριτικός ταράχτηκε.Οι καιροί είναι αρκετά δύσκολοι στη δημοσιογραφία, είπε, και τώρα θα αντικαταστήσετε τους συγγραφείς με ρομπότ;
"Απλά τον κοίταξα", θυμάται ο Χάμοντ, "και τον ρώτησα:Έχετε δει ποτέ έναν δημοσιογράφο σε έναν αγώνα της μικρής λίγκας;Αυτό είναι το πιο σημαντικό πράγμα για εμάς. Κανείς δεν έχει χάσει ούτε μία θέση εργασίας εξαιτίας μας".Τουλάχιστον όχι ακόμα.
Ρωτήστε με ένα πράγμα
Ο John ρωτάει: "Τα αυτοκίνητα χωρίς οδηγό, όπως το Cruise, πρέπει να περάσουν από εξετάσεις και να πάρουν άδεια οδήγησης;"
Ευχαριστώ, Τζον.Μια επίκαιρη ερώτηση, δεδομένου ότι το Σαν Φρανσίσκο μόλις άναψε το πράσινο φως για 24/7 ride-hailing με αυτοκινούμενα αυτοκίνητα.Η ιδέα σας είναι ενδιαφέρουσα - ένα ρομποτικό αυτοκίνητο που δίνει εξετάσεις με έναν εξοργισμένο εκπαιδευτή να του γαβγίζει οδηγίες. Δυστυχώς, αυτό δεν έχει συμβεί.Τα κράτη που εγκρίνουν τη χρήση αυτοκινήτων χωρίς οδηγό έχουν ένα πιο απρόσωπο σύστημα επαλήθευσης, όπου οι εταιρείες που ζητούν να κυκλοφορήσουν τα αυτοκίνητά τους στη φύση υποβάλλουν αποδείξεις ότι είναι ασφαλή.Και επίσης απόδειξη ότι είναι ασφαλισμένα μέχρι το λαιμό σε περίπτωση που δεν είναι αρκετά ασφαλή.
Η εικασία μου είναι ότι αν ένα αυτόνομο όχημα ακολουθούσε την κανονική πορεία προς την απόκτηση άδειας οδήγησης, θα έπαιρνε άριστα το γραπτό μέρος - ολόκληρο το εγχειρίδιο οδήγησης βρίσκεται στον εγκέφαλό του! Και όταν ερχόταν η πραγματική εξέταση οδήγησης, δεν θα είχε κανένα πρόβλημα με την πιο δύσκολη δοκιμασία, το παράλληλο παρκάρισμα.(Ο τρόπος με τον οποίο αυτά τα οχήματα στριμώχνονται σε ένα στενό σημείο είναι κάτι το πανέμορφο.) Μπορώ όμως να φανταστώ την απογοήτευση του υπαλλήλου που εκδίδει την άδεια όταν ο υποψήφιος σέρνεται στο δρόμο κάτω από το όριο ταχύτητας, σταματάει νεκρός όταν κάτι του κλείνει το δρόμο και εμποδίζει τα οχήματα έκτακτης ανάγκης.Δοκίμασε ξανά, ρομπότ!
Πηγή: AI Can’t Read Books. It’s Reviewing Them Anyway
