Ένας πελάτης που τοποθετεί τρεις προσφορές δίπλα-δίπλα δεν συγκρίνει τη διαδικασία σας αλλά το αποτέλεσμά της: χρόνος απόκρισης, ακρίβεια μιας πρότασης, πόσο γρήγορα μια ερώτηση παίρνει συγκεκριμένη απάντηση. Αν σε έναν ανταγωνιστή ένα μέρος αυτής της δουλειάς γίνεται ήδη από AI, με ή χωρίς ανθρώπινο έλεγχο σε αυτό, το αποτέλεσμα αυτό αλλάζει προτού εμφανιστεί κάπου εσωτερικά μια αναφορά σχετικά με αυτό. Ο πελάτης βλέπει τη διαφορά στην τρίτη προσφορά. Εσείς την βλέπετε μόλις στα τριμηνιαία αποτελέσματα, και μόνο αν καταφέρετε να συνδέσετε την απώλεια με μια αιτία.
Αυτό δεν είναι ζήτημα προσοχής. Είναι ζήτημα του πού προσγειώνεται πρώτα η απόδειξη. Τα εσωτερικά σήματα περνούν μέσα από κύκλους αναφοράς. Τα σήματα των πελατών περνούν μέσα από την ίδια την προσφορά, δηλαδή σε πραγματικό χρόνο.
Η μετατόπιση δεν βρίσκεται στο "το AI κάνει περισσότερη δουλειά". Βρίσκεται σε τι σημαίνει μια διάσταση στη σύγκριση από τη στιγμή που η δουλειά πίσω από αυτή αλλάζει χαρακτήρα. Ο χρόνος παράδοσης, βασισμένος στη χωρητικότητα προγραμματισμού, ήταν ζήτημα στελέχωσης και φόρτου εργασίας. Από τη στιγμή που ο προγραμματισμός καθαυτός γίνεται σε μεγάλο βαθμό αυτόματα, με έναν άνθρωπο που εγκρίνει ή απορρίπτει αποτελέσματα, ο χρόνος παράδοσης γίνεται ζήτημα του πόσο καλά είναι διαμορφωμένο αυτό το σύστημα, όχι πόσοι άνθρωποι κάθονται στο γραφείο. Όποιος το εφαρμόσει νωρίτερα, κερδίζει σε μια διάσταση όπου η στελέχωση καθόριζε παλαιότερα το ανώτατο όριο.
Αυτό δεν συμβαίνει παντού εξίσου. Ορισμένες εργασίες μπορούν να αναληφθούν πλήρως από AI, άλλες μόνο εν μέρει με έλεγχο που εγκρίνει ή απορρίπτει με αιτιολόγηση, και ένα μέρος παραμένει ανθρώπινη εργασία επειδή η φύση της εργασίας το απαιτεί. Ποια κατηγορία εφαρμόζεται σε ποια διάσταση διαφέρει ανά επιχείρηση και ανά διαδικασία. Αυτός είναι ακριβώς ο λόγος για τον οποίο το ερώτημα αν το ισχυρότερο σημείο σας εξισώνεται πλέον από το AI δεν είναι ρητορικό: ένα διακριτικό πλεονέκτημα που βασιζόταν σε ανθρώπινη εργασία, μπορεί να γίνει κοινή πρακτική από τη στιγμή που οι ανταγωνιστές το έχουν αυτοματοποιήσει και εσείς όχι.
Ένα benchmark που θέλει να κάνει αυτό ορατό, δουλεύει με εκτιμήσεις, και αυτές οι εκτιμήσεις δεν είναι παντού εξίσου βέβαιες. Κείμενα αγγελιών εργασίας, χρόνοι διεκπεραίωσης σε δημόσια επικοινωνία, μοτίβα παραπόνων σε πλατφόρμες κριτικών: είναι έμμεσα σήματα. Λένε κάτι για την πιθανή διαμόρφωση, όχι για την ακριβή κατάσταση πίσω από τον τοίχο ενός ανταγωνιστή. Όταν ένας ανταγωνιστής δεν δημοσιεύει στοιχεία, εναπόκειται στον ερευνητή να εργαστεί με τέτοιου είδους έμμεσες πηγές, και η προσέγγιση για την απόκτηση χρήσιμων πληροφοριών για έναν ανταγωνιστή χωρίς στοιχεία είναι ρητά μια προσέγγιση πιθανοτήτων, όχι βεβαιοτήτων.
Υπάρχουν επίσης αποτελέσματα που δεν λένε τίποτα. Μια βαθμολογία σε μια διάσταση στην οποία δεν πρόκειται ποτέ να ανταγωνιστείτε είναι θόρυβος στην αναφορά, όχι διορατικότητα. Πριν μια βαθμολογία αποκτήσει βαρύτητα, πρέπει να είναι βέβαιο ότι η συγκεκριμένη διάσταση καθορίζει πράγματι τη συμφωνία στους πελάτες που θέλετε να κερδίσετε. Πώς κάνετε αυτή τη διάκριση περιγράφεται στο το ερώτημα πώς σταθμίζετε μια διάσταση στην οποία δεν πρόκειται ποτέ να κερδίσετε. Χωρίς αυτό το βήμα, κάθε benchmark παράγει μια ακριβή βαθμολογία σε ένα ασήμαντο ερώτημα.
Ένας τρίτος περιορισμός: όλοι οι παίκτες σε μια αγορά διατυπώνουν συχνά την πρόταση αξίας τους με παρόμοια γλώσσα. "Προσωπική προσέγγιση", "προσαρμοσμένες λύσεις", "σύντομες γραμμές επικοινωνίας" επανέρχονται σε σχεδόν κάθε πάροχο, ανεξάρτητα από τι κρύβεται πραγματικά πίσω από αυτές τις λέξεις. Αυτό κάνει δύσκολο να βασιστείτε στην ίδια την διαβεβαίωση· ο λόγος που οι ανταγωνιστές ακούγονται σχεδόν ταυτόσημοι στις υποσχέσεις τους δεν βρίσκεται σε έλλειψη πρωτοτυπίας αλλά στη φύση της γλώσσας μάρκετινγκ, και είναι ακριβώς ο λόγος για τον οποίο απαιτείται έλεγχος της διαβεβαίωσης πριν μια βαθμολογία βασιστεί σε αυτή.
Δεν είναι κάθε σήμα εξίσου ασαφές. Η εναλλαγή προσωπικού, για παράδειγμα, είναι σκληρός δείκτης που λέει κάτι για την εσωτερική σταθερότητα, και σε έναν ανταγωνιστή με μεγάλη εναλλαγή σε θέσεις-κλειδί αυτό αποτελεί ένδειξη ότι οι διαδικασίες είναι λιγότερο εμπεδωμένες από όσο υποδηλώνει η εξωτερική εικόνα· ό,τι η εναλλαγή προσωπικού ενός ανταγωνιστή λέει για τη θέση του είναι λοιπόν μία από τις λίγες διαστάσεις όπου τα δημόσια δεδομένα και η πραγματική εσωτερική κατάσταση τρέχουν σχετικά παράλληλα. Ανάλογα ισχύει και για την ωριμότητα σε AI: αυτή μπορεί να μετρηθεί από έξω με βάση δημόσια ίχνη, και ο τρόπος να μετρήσετε την ωριμότητα σε AI ενός ανταγωνιστή από έξω δείχνει ποια είναι αυτά τα ίχνη και τι αποδεικνύουν και τι όχι.
Το υποκείμενο ερώτημα, ποια εργασία στην ίδια σας την επιχείρηση μπορεί όντως να αναληφθεί από AI, απαντάται από τη σάρωση εργασίας της FTE TO AI ανά εργασία, με τη διάκριση μεταξύ πλήρους ανάληψης, επίβλεψης με αξιολόγηση, και εργασίας που παραμένει ανθρώπινη. Για αποφάσεις σχετικά με τη διαχείριση προσωπικού ισχύουν εξάλλου δικές τους νομικές απαιτήσεις· αυτή η σελίδα και η αντίστοιχη μέθοδος δεν παρέχουν τεκμηρίωση για αυτό.
Ο δωρεάν έλεγχος διαστάσεων σας επιτρέπει να ονομάσετε πού πιστεύετε ότι κερδίζετε, και ελέγχει ανά διαβεβαίωση αν υπάρχει ή όχι απόδειξη γι' αυτό. Το πλήρες benchmark, με την πλήρη ομάδα ομοτίμων και τον πίνακα αποδεικτικών στοιχείων, βρίσκεται υπό κατασκευή.