Το AI μπορεί να κάνει πολλά πράγματα εξαιρετικά καλά. Κάτι που μπορεί να κάνει σχετικά καλά είναι το να γράψει μια πανεπιστημιακή εργασία.
Αυτό είναι το εύρημα του EduRef, ένα resource για μαθητές και εκπαιδευτικούς, το οποίο διεξήγαγε ένα πείραμα για να προσδιορίσει εάν ένα μοντέλο πρόβλεψης γλώσσας deep learning γνωστό ως GPT-3 θα μπορούσε να λάβει επιτυχημένα αποτελέσματα σε ένα ανώνυμο trial.
“Προσλάβαμε μια ομάδα καθηγητών για να δημιουργήσουν κάποια writing prompts (θέματα γύρω από τα οποία αρχίζεις να γράφεις ιδέες) που δόθηκαν σε μια ομάδα πτυχιούχων και προπτυχιακών φοιτητών. Επίσης, τα ίδια writing prompts εισάχθηκαν στο GPT-3 το οποίο έκανε την ανάλογη έρευνα και δημιούργησε τις πανεπιστημιακές εργασίες,” αναφέρει μια δημοσίευση του EduRef. Τα αποτελέσματα ήταν μια εκπληκτική επίδειξη της ικανότητας του AI.
Το συγκεκριμένο AI – GPT-3 (Generative Pre-trainer Transformer 3) – κυκλοφόρησε τον Ιούνιο του 2020 από την OpenAI, μια ερευνητική επιχείρηση που ιδρύθηκε από τον Elon Musk. Αναπτύχθηκε για τη δημιουργία περιεχομένου με δομή ανθρώπινης γλώσσας καλύτερα από οποιονδήποτε από τους προκατόχους του. Η επεξεργασία της φυσικής γλώσσας έχει αναπτυχθεί με πολύ γρήγορους ρυθμούς τα τελευταία δύο χρόνια, επιτρέποντας στους υπολογιστές να δημιουργούν κείμενο.
Ωστόσο, τα εμπόδια για την προηγμένη επεξεργασία φυσικής γλώσσας είναι πολλά. Σύμφωνα με ένα έγγραφο του 2019 από το Ινστιτούτο Τεχνητής Νοημοσύνης Allen, οι μηχανές ουσιαστικά δεν έχουν κοινή λογική – την ικανότητα να κατανοούν τι γράφουν. Αυτό το εύρημα βασίζεται σε μια κριτική επανεκτίμηση των τυπικών τεστ για τον προσδιορισμό της συλλογιστικής λογικής σε μηχανές – όπως το Winograd Schema Challenge.
Αυτό καθιστά τα αποτελέσματα του πειράματος EduRef πολύ πιο εντυπωσιακά. Τα writing prompts αφορούσαν μια ποικιλία θεμάτων, όπως η ιστορία των ΗΠΑ, οι ερευνητικές μέθοδοι (αποτελεσματικότητα εμβολίου Covid-19), το Creative Writing (δημιουργική γραφή) και οι νόμοι. Το GPT-3 κατάφερε να βαθμολογήσει με ένα μέσο όρο “C” τα τέσσερα μαθήματα. Το AI σημείωσε τους υψηλότερους βαθμούς στα writing prompts ιστορίας και νόμου των ΗΠΑ (βαθμολογία B- και στις δύο εργασίες). Το GPT-3 σημείωσε ένα “C” σε ένα ερευνητικό έγγραφο σχετικά με την αποτελεσματικότητα του εμβολίου για τον Covid-19, με την βαθμολογία του να είναι καλύτερη από αυτή που έλαβε ο άνθρωπος-συγγραφέας.
Συνολικά, οι αξιολογήσεις των εκπαιδευτικών έδειξαν ότι το GPT-3 ήταν σε θέση να μιμηθεί το ανθρώπινο γράψιμο στους τομείς της γραμματικής, της σύνταξης και της συχνότητας των λέξεων, αν και οι εργασίες έμοιαζαν κάπως τεχνικές. Όπως θα περίμενε κανείς, ο χρόνος που χρειάστηκε το AI για να ολοκληρώσει τις εργασίες ήταν δραματικά μικρότερος από αυτόν των συμμετεχόντων. Ο μέσος χρόνος μεταξύ της ανάθεσης και της ολοκλήρωσης για τον άνθρωπο ήταν 3 ημέρες, ενώ ο μέσος χρόνος μεταξύ της ανάθεσης και της ολοκλήρωσης για το GPT-3 ήταν μεταξύ 3 και 20 λεπτών.
Πηγή: zdnet.com, secnews.gr
