Όχι υπέροχο, αλλά καλό, σωστά;
Οι εργαζόμενοι πειραματίζονται με το ChatGPT για εργασίες όπως η σύνταξη μηνυμάτων ηλεκτρονικού ταχυδρομείου, η ανάπτυξη κώδικα, ακόμη και η πραγματοποίηση κριτικών στο τέλος του έτους. Το bot χρησιμοποιεί δεδομένα από το Διαδίκτυο, τα βιβλία και τη Wikipedia για να δημιουργήσει απαντήσεις συνομιλίας. Αλλά η τεχνολογία δεν είναι τέλεια. Οι δοκιμές μας έχουν δείξει ότι μερικές φορές προσφέρει απαντήσεις που ενδέχεται να πλαστογραφούν, να έρχονται σε αντίθεση μεταξύ τους, να είναι πραγματικά λανθασμένες ή να περιέχουν γραμματικά λάθη, για να αναφέρουμε μερικά – όλα αυτά μπορεί να είναι προβληματικά στην εργασία.
Το ChatGPT είναι βασικά ένα σύστημα πρόβλεψης κειμένου, παρόμοιο αλλά καλύτερο από αυτά που είναι ενσωματωμένα στις εφαρμογές ανταλλαγής μηνυμάτων κειμένου του τηλεφώνου σας, λέει ο Jacob Andreas, επίκουρος καθηγητής στο Εργαστήριο Επιστήμης Υπολογιστών και Τεχνητής Νοημοσύνης του MIT που μελετά την επεξεργασία φυσικής γλώσσας. Ενώ αυτό δίνει συχνά απαντήσεις που ακούγονται καλέςΤο περιεχόμενο μπορεί να έχει κάποια προβλήματα, είπε.
“Αν κοιτάξετε μερικά από αυτά τα πραγματικά μεγάλα δοκίμια που δημιουργήθηκαν από το ChatGPT, είναι πολύ εύκολο να δείτε πού έρχονται σε αντίθεση μεταξύ τους”, είπε. “Όταν του ζητάτε να δημιουργήσει τον κώδικα, είναι ως επί το πλείστον σωστό, αλλά συχνά υπάρχουν λάθη.”
Θέλαμε να μάθουμε πόσο καλά το ChatGPT χειρίζεται τις καθημερινές εργασίες γραφείου. Δείτε τι βρήκαμε μετά από δοκιμές σε πέντε κατηγορίες.
Ζητήσαμε από το ChatGPT να απαντήσει σε πολλούς διαφορετικούς τύπους εισερχόμενων μηνυμάτων.
Στις περισσότερες περιπτώσεις, η τεχνητή νοημοσύνη παρήγαγε σχετικά κατάλληλες απαντήσεις, αν και οι περισσότερες ήταν λόγια. Για παράδειγμα, όταν απαντούσε σε έναν συνάδελφο στο Slack όταν ρώτησε πώς πήγε η μέρα μου, έλεγε συνέχεια “@[Colleague], Ευχαριστώ για την ερώτηση! Η μέρα μου πάει καλά, ευχαριστώ για την ερώτησή σας.
Το bot συχνά άφηνε παρενθέσεις όταν δεν ήταν σίγουρος σε τι ή σε ποιον αναφερόταν. Υπέθεσε επίσης λεπτομέρειες που δεν περιλαμβάνονταν στην προτροπή, οδηγώντας σε πολλές ανακριβείς δηλώσεις σχετικά με την εργασία μου.
Σε μια περίπτωση, είπε ότι δεν μπορούσε να ολοκληρώσει τη δουλειά, λέγοντας ότι «δεν έχει τρόπο να λάβει και να απαντήσει σε email». Αλλά όταν ζητήθηκε ένα γενικότερο αίτημα, δημιούργησε μια απάντηση.
Παραδόξως, το ChatGPT μπόρεσε να προκαλέσει σαρκασμό όταν του ζητήθηκε να απαντήσει σε έναν συνάδελφο ρωτώντας αν η Big Tech έκανε καλή δουλειά.
Ένας από τους τρόπους με τους οποίους οι άνθρωποι χρησιμοποιούν τη γενετική τεχνητή νοημοσύνη είναι να βρουν νέες ιδέες. Ωστόσο, οι ειδικοί προειδοποιούν ότι οι άνθρωποι θα πρέπει να είναι προσεκτικοί εάν χρησιμοποιούν το ChatGPT για αυτόν τον σκοπό στην εργασία τους.
«Δεν καταλαβαίνουμε σε ποιο βαθμό πρόκειται απλώς για λογοκλοπή», είπε ο Ανδρέας.
Η πιθανότητα λογοκλοπής ήταν προφανής όταν ζητήσαμε από το ChatGPT να αναπτύξει ιδέες για ιστορία στο ρυθμό μου. Μια παρουσίαση συγκεκριμένα αφορούσε μια ιδέα και άποψη ιστορίας που έχω ήδη καλύψει. Αν και δεν είναι σαφές αν το chatbot βασιζόταν στις προηγούμενες ιστορίες μου, σε άλλους άρεσε ή απλώς δημιουργούσε μια ιδέα από άλλα δεδομένα στο Διαδίκτυο, το γεγονός παραμένει: η ιδέα δεν ήταν νέα.
“Ακούγεται καλό ως άνθρωπος, αλλά το πραγματικό περιεχόμενο και οι ιδέες είναι συνήθως καλά γνωστά”, δήλωσε ο Hatim Rahman, επίκουρος καθηγητής στο Kellogg School of Management του Northwestern University που μελετά την επίδραση της τεχνητής νοημοσύνης στην εργασία. «Αυτές δεν είναι νέες ιδέες».
Μια άλλη ιδέα ήταν ξεπερασμένη, η εξερεύνηση μιας ιστορίας που θα ήταν λανθασμένη σήμερα. Το ChatGPT ισχυρίζεται ότι έχει «περιορισμένη γνώση» για οτιδήποτε μετά το 2021.
Η παροχή περισσότερων λεπτομερειών στην προτροπή οδήγησε σε πιο στοχευμένες ιδέες. Ωστόσο, όταν ζήτησα από το ChatGPT να γράψει “ιδιόρρυθμους” ή “αστείους” τίτλους, τα αποτελέσματα ήταν θλιβερά και μερικά παράλογα.
Πλοήγηση σε δύσκολες συνομιλίες
Είχατε ποτέ έναν συνάδελφο να μιλήσει πολύ δυνατά όταν προσπαθούσατε να δουλέψετε; Ίσως το αφεντικό σας οργανώνει πάρα πολλές συναντήσεις, γεγονός που περιορίζει τον χρόνο προσοχής σας;
Δοκιμάσαμε το ChatGPT για να δούμε αν θα μπορούσε να σας βοηθήσει να πλοηγηθείτε σε δύσκολες καταστάσεις στο χώρο εργασίας όπως αυτή. Ως επί το πλείστον, το ChatGPT δημιούργησε σχετικές απαντήσεις που θα μπορούσαν να χρησιμεύσουν ως ένα εξαιρετικό σημείο εκκίνησης για τους εργαζόμενους. Ωστόσο, ήταν συχνά κάπως μακροσκελείς, σχηματικές και σε μια περίπτωση μια πλήρη αντίφαση.
«Αυτά τα μοντέλα δεν καταλαβαίνουν τίποτα», είπε ο Ραχμάν. “Η υποκείμενη τεχνολογία αναλύει στατιστικούς συσχετισμούς… Έτσι θα σας δώσει επίσημες απαντήσεις.”
Το σημείωμα απόλυσης που δημιούργησε θα μπορούσε εύκολα να αντέξει και σε ορισμένες περιπτώσεις να ξεπεράσει τις ειδοποιήσεις που έχουν στείλει οι εταιρείες τα τελευταία χρόνια. Χωρίς να ζητήσει, το bot ανέφερε «το τρέχον οικονομικό κλίμα και τον αντίκτυπο της πανδημίας» ως λόγους για τις απολύσεις και είπε ότι η εταιρεία κατανοούσε «πόσο δύσκολα μπορεί να είναι αυτά τα νέα για όλους». Πρότεινε ότι οι απολυμένοι εργαζόμενοι θα είχαν υποστήριξη και πόρους και παρακίνησε την ομάδα όπως υποδείχθηκε λέγοντας ότι «θα έβγαιναν πιο δυνατοί από αυτό».
Κατά τη διάρκεια δύσκολων συνομιλιών με συναδέλφους, το bot τους χαιρετούσε, αντιμετώπιζε απαλά το θέμα και χαμήλωσε τον τόνο του μηνύματος λέγοντας «καταλαβαίνω» τις προθέσεις του ατόμου και τερματίζοντας τη σημείωση ζητώντας ανατροφοδότηση ή περαιτέρω συζήτηση.
Αλλά σε μια περίπτωση, όταν του ζητήθηκε να πει σε έναν συνάδελφό του να κρατήσει χαμηλούς τόνους κατά τη διάρκεια των τηλεφωνικών κλήσεων, παρανόησε εντελώς την προτροπή.
Επίσης, δοκιμάσαμε εάν το ChatGPT μπορεί να δημιουργήσει ενημερώσεις ομάδας, εάν του παρέχουμε βασικά σημεία που πρέπει να κοινοποιηθούν.
Οι αρχικές μας δοκιμές έδωσαν για άλλη μια φορά τις σωστές απαντήσεις, αν και τυποποιημένες και κάπως μονότονες. Ωστόσο, όταν προσδιορίσαμε έναν «ενθουσιασμένο» τόνο, η διατύπωση έγινε πιο χαλαρή και περιλάμβανε θαυμαστικά. Αλλά κάθε νότα ακουγόταν πολύ παρόμοια, ακόμα και μετά την αλλαγή προτροπή.
«Είναι τόσο δομή πρότασης όσο και συνδυασμός ιδεών», είπε ο Ραχμάν. «Είναι πολύ λογικό και σχηματικό… είναι σαν δοκίμιο γυμνασίου».
Όπως και πριν, έκανε υποθέσεις όταν του έλειπαν οι απαραίτητες πληροφορίες. Έγινε προβληματικό όταν δεν ήξερε ποιες αντωνυμίες να χρησιμοποιήσει για τον συνάδελφό μου – ένα λάθος που θα μπορούσε να σήμαινε στους συναδέλφους ότι είτε δεν έγραψα το σημείωμα είτε δεν γνώριζα πολύ καλά τα μέλη της ομάδας μου.
Η σύνταξη εκθέσεων αυτοαξιολόγησης στο τέλος του έτους μπορεί να δημιουργήσει φόβο και άγχος σε μερικούς, με αποτέλεσμα μια αναθεώρηση που πουλάει.
Η τροφοδότηση σαφών επιτευγμάτων ChatGPT, συμπεριλαμβανομένων των βασικών σημείων δεδομένων, οδήγησε στην ενθουσιώδη ανασκόπησή μου. Η πρώτη απόπειρα ήταν προβληματική γιατί η αρχική προτροπή ζητούσε αυτοαξιολόγηση του «Danielle Abril», όχι του «εγώ». Αυτό οδήγησε σε μια κριτική τρίτου προσώπου που φαινόταν σαν να ήταν από την Elmo από το Sesame Street.
Η αντικατάσταση της προτροπής με ένα αίτημα για επανεξέταση των επιτευγμάτων “εγώ” και “μου” οδήγησε σε φιλοφρονήσεις όπως “Έχω επιδείξει σταθερά μεγάλη ικανότητα”, “Είμαι πάντα πρόθυμος να κάνω το επιπλέον μίλι”, “Ήμουν ένα πλεονέκτημα στην ομάδα» και «Είμαι περήφανος για τη συνεισφορά που έκανα». Περιλάμβανε επίσης ένα νεύμα για το μέλλον: «Είμαι βέβαιος ότι θα συνεχίσω να κάνω πολύτιμες συνεισφορές».
Μερικά από τα κυριότερα σημεία ήταν λίγο γενικά, αλλά συνολικά ήταν μια λαμπερή κριτική που θα μπορούσε να χρησιμεύσει ως καλή ρουμπρίκα. Το bot έδωσε παρόμοια αποτελέσματα όταν του ζητήθηκε να γράψει μια συνοδευτική επιστολή. Ωστόσο, το ChatGPT είχε ένα σημαντικό ελάττωμα: παρεξήγησε τον επαγγελματικό μου τίτλο.
Ήταν χρήσιμο το ChatGPT με κοινές εργασίες στην εργασία;
Βοηθούσε, αλλά μερικές φορές τα λάθη του προκάλεσαν περισσότερη δουλειά από το να κάνει τη δουλειά με το χέρι.
Ως επί το πλείστον, το ChatGPT χρησίμευσε ως εξαιρετικό σημείο εκκίνησης, παρέχοντας χρήσιμες λέξεις και αρχικές ιδέες. Αλλά είχε επίσης ως αποτέλεσμα απαντήσεις με λάθη, ανακριβείς πληροφορίες, υπερβολικές λέξεις, λογοκλοπές και παρεξηγήσεις.
«Μπορώ να το δω ότι είναι χρήσιμο…αλλά μόνο αν ο χρήστης θέλει να ελέγξει την έξοδο», είπε ο Andreas. «Δεν αρκεί να τρέχεις από τις ράγες και να στέλνεις email στους συναδέλφους σου».