Τα εργαλεία AI υπόσχονται επανάσταση στον κώδικα, αλλά μήπως τελικά επιβραδύνουν τους προγραμματιστές; Μια νέα έρευνα της METR ανατρέπει τα δεδομένα. Δείτε την αλήθεια.
Η τεχνολογία AI έχει φέρει μια πραγματική επανάσταση στις ροές εργασίας των μηχανικών λογισμικού, με την εισροή προηγμένων εργαλείων προγραμματισμού όπως το Cursor και το δημοφιλές GitHub Copilot. Αυτά τα εργαλεία υπόσχονται να εκτοξεύσουν την παραγωγικότητα, γράφοντας αυτόματα κώδικα, προτείνοντας διορθώσεις και αυτοματοποιώντας δοκιμές.
Τροφοδοτούνται από πανίσχυρα γλωσσικά μοντέλα εταιρειών-κολοσσών όπως οι OpenAI, Google DeepMind, Anthropic και xAI, τα οποία έχουν επιδείξει ραγδαία εξέλιξη στην απόδοσή τους. Ωστόσο, μια νέα, καινοτόμος μελέτη που δημοσιεύθηκε από τη μη κερδοσκοπική ερευνητική ομάδα AI, METR, έρχεται να αμφισβητήσει τον βαθμό στον οποίο τα σημερινά εργαλεία κώδικα AI ενισχύουν πραγματικά την παραγωγικότητα, ειδικά για τους έμπειρους προγραμματιστές.
Για να μετρήσει τον πραγματικό αντίκτυπο, η METR οργάνωσε μια τυχαιοποιημένη ελεγχόμενη δοκιμή. Στη μελέτη συμμετείχαν 16 έμπειροι προγραμματιστές ανοιχτού κώδικα, οι οποίοι κλήθηκαν να ολοκληρώσουν 246 πραγματικές εργασίες σε μεγάλα αποθετήρια κώδικα στα οποία συνεισφέρουν τακτικά.
Οι ερευνητές χώρισαν τυχαία τις εργασίες σε δύο ομάδες:
Πριν ξεκινήσουν, οι συμμετέχοντες προέβλεψαν ότι η χρήση των εργαλείων AI θα μείωνε τον χρόνο που χρειάζονταν κατά μέσο όρο 24%. Η πραγματικότητα, όμως, ήταν εντελώς διαφορετική.
«Παραδόξως, διαπιστώνουμε ότι η χρήση AI στην πραγματικότητα αυξάνει τον χρόνο ολοκλήρωσης κατά 19% — οι προγραμματιστές είναι πιο αργοί όταν χρησιμοποιούν εργαλεία AI,» δήλωσαν χαρακτηριστικά οι ερευνητές της METR.
Είναι σημαντικό να σημειωθεί ότι δεν είχαν όλοι οι συμμετέχοντες την ίδια εξοικείωση με τα εργαλεία που χρησιμοποιήθηκαν. Συγκεκριμένα:
Σημείωση: Οι ερευνητές επισημαίνουν ότι παρείχαν εκπαίδευση για τη χρήση του Cursor. Ωστόσο, η καμπύλη εκμάθησης ενός νέου, πολύπλοκου εργαλείου θα μπορούσε να είναι ένας παράγοντας που επηρέασε αρνητικά την ταχύτητα των προγραμματιστών στο πλαίσιο της μελέτης.
Τα ευρήματα της METR εγείρουν κρίσιμα ερωτήματα για τα υποτιθέμενα οφέλη παραγωγικότητας που υπόσχεται η τρέχουσα γενιά εργαλείων κώδικα AI. Για τους προγραμματιστές στην Ελλάδα και παγκοσμίως, αυτό σημαίνει ότι η υιοθέτηση ενός εργαλείου AI δεν εγγυάται αυτόματα αύξηση της ταχύτητας.
Η μελλοντική εξέλιξη αυτών των τεχνολογιών είναι βέβαιη, αλλά προς το παρόν, οι προγραμματιστές δεν πρέπει να θεωρούν δεδομένο ότι το GitHub Copilot, το Cursor ή άλλα παρόμοια εργαλεία θα τους κάνουν ταχύτερους σε κάθε είδους εργασία. Η κριτική σκέψη και η σωστή αξιολόγηση παραμένουν τα πιο ισχυρά εργαλεία στα χέρια κάθε developer.
