Η συνήθης απάντηση ήταν: ετησίως, ή σε περίπτωση στρατηγικής επαναξιολόγησης. Αυτή η απάντηση βασιζόταν σε μια παραδοχή που δεν ισχύει πλέον παντού: ότι οι διαστάσεις στις οποίες ανταγωνίζονται οι επιχειρήσεις είναι οι ίδιες σταθερές. Χρόνος παράδοσης, χρόνος απόκρισης, συνέπεια τιμών, χρόνος επεξεργασίας μιας προσφοράς — αυτά ήταν αποτελέσματα στελέχωσης και διαδικασίας, και αυτά μεταβάλλονται αργά. Μια ετήσια μέτρηση είχε λοιπόν νόημα.
Όταν η AI αναλαμβάνει την εργασία πίσω από μια διάσταση, η ίδια η διάσταση αλλάζει χαρακτήρα. Ο χρόνος παράδοσης που εξαρτιόταν από το πόσοι σχεδιαστές υπήρχαν, γίνεται χρόνος παράδοσης που εξαρτάται από το πόσο καλά έχει διαμορφωθεί ένα σύστημα σχεδιασμού. Αυτό μπορεί να μετατοπιστεί σε μήνες, όχι σε χρόνια. Μια σύγκριση που συνεχίζει να χρησιμοποιεί την παραδοχή της σταθερότητας, μετρά κάτι που δεν υπάρχει πλέον.
Δεν μεταβάλλεται κάθε διάσταση με τον ίδιο ρυθμό, και αυτό καθορίζει πόσο συχνά πρέπει να αναθεωρείται μια σύγκριση.
Σε διαστάσεις όπου η AI μπορεί να αναλάβει σε μεγάλο βαθμό το έργο — σχεδιασμό, απόκριση πρώτης γραμμής, υπολογισμό προσφορών — η ανταγωνιστική θέση μπορεί να αλλάξει σε μικρό χρονικό διάστημα. Ένας ανταγωνιστής που οργανώνει διαφορετικά αυτή την εργασία σήμερα, κερδίζει σε λίγους μήνες σε μια διάσταση στην οποία πέρυσι ακόμα βρισκόταν πίσω. Αυτές οι διαστάσεις απαιτούν συντομότερο κύκλο, όχι επειδή το επιβάλλει η μέθοδος, αλλά επειδή η υποκείμενη πραγματικότητα κινείται η ίδια ταχύτερα.
Σε διαστάσεις όπου άνθρωποι εργάζονται με υποστήριξη AI και ασκούν εποπτεία — ποιότητα συμβουλών, χειρισμό σύνθετων φακέλων — η θέση μετατοπίζεται πιο σταδιακά. Η υποστήριξη αλλάζει την ταχύτητα και τη συνέπεια της εργασίας, αλλά η αξιολόγηση παραμένει στους ανθρώπους, και αυτή η διαδικασία δεν αλλάζει από μήνα σε μήνα.
Σε διαστάσεις που παραμένουν ανθρώπινη εργασία — διαχείριση σχέσεων, διαπραγμάτευση, οικοδόμηση εμπιστοσύνης σε έναν μακρό κύκλο πωλήσεων — ο ρυθμός του παρελθόντος παραμένει σε μεγάλο βαθμό ανέπαφος. Εδώ, μια ετήσια ή διετής επισκόπηση είναι συχνά επαρκής, επειδή η υποκείμενη εργασία δεν μεταβάλλεται θεμελιωδώς ως μορφή.
Το ερώτημα «πόσο συχνά» δεν έχει λοιπόν μία ενιαία απάντηση. Η απάντηση είναι: ανά διάσταση, εξαρτώμενη από ποια από τις τρεις κατηγορίες αντιπροσωπεύει σήμερα αυτή η διάσταση.
Αυτό δεν είναι σενάριο μέλλοντος. Σε κάποιες επιχειρήσεις η λειτουργία σχεδιασμού είναι ήδη σε μεγάλο βαθμό αυτοματοποιημένη και η διάσταση του χρόνου παράδοσης μετατοπίζεται μετρήσιμα· σε άλλες επιχειρήσεις η ίδια λειτουργία βρίσκεται ακόμα πλήρως στα χέρια ανθρώπων και η διάσταση παραμένει σταθερή. Η διαφορά δεν βρίσκεται στον κλάδο, αλλά στις επιλογές που έχουν ήδη κάνει μια επιχείρηση και οι ανταγωνιστές της σχετικά με ποια εργασία αναθέτουν σε συστήματα και ποια εργασία διατηρούν στους ανθρώπους με εποπτεία που εγκρίνει ή απορρίπτει. Ένα benchmark που δεν χαρτογραφεί αυτή τη διαφορά ξεχωριστά ανά διάσταση, χάνει το σημείο όπου βρίσκεται η πραγματική κίνηση.
Γι' αυτό είναι σχετικό και το γιατί οι πελάτες σας βλέπουν τη διαφορά πριν από εσάς: οι πελάτες βιώνουν έναν ταχύτερο χρόνο παράδοσης ή πιο συνεπή απόκριση συχνά μήνες πριν μια εσωτερική μέτρηση το εντοπίσει. Η σύγκριση τότε ακολουθεί την αγορά, δεν την προηγείται.
Ένα μητρώο αποδεικτικών στοιχείων κάνει τις βαθμολογίες ιχνηλάσιμες, αλλά η ιχνηλασιμότητα δεν είναι το ίδιο με τη βεβαιότητα. Ορισμένοι περιορισμοί είναι εγγενείς στη μέθοδο, όχι στην εκτέλεση.
Τα δημόσια στοιχεία για έναν ανταγωνιστή είναι πάντα μια καθυστερημένη αντανάκλαση της πραγματικής κατάστασης. Μια δήλωση σε έναν ιστότοπο, μια κριτική, μια ετήσια έκθεση: αυτά λένε κάτι για μια στιγμή που έχει ήδη παρέλθει. Πόσο πρόσφατα και πόσο άμεσα είναι τα στοιχεία, καθορίζει πόσο βάρος μπορεί να πάρει μια βαθμολογία· παλιά στοιχεία σε μια διάσταση που μετατοπίζεται ταχέως λένε λίγα.
Μια βαθμολογία σε μια διάσταση στην οποία δεν πρόκειται ποτέ να κερδίσετε, δεν λέει επίσης τίποτα χρήσιμο, εκτός αν αυτή η διάσταση έχει βάρος στην αγοραστική απόφαση του πελάτη σας. Πώς λειτουργεί αυτή η στάθμιση, και γιατί μια χαμηλή βαθμολογία εκεί δεν αποτελεί αυτόματα πρόβλημα, αναλύεται στο πώς σταθμίζετε μια διάσταση στην οποία δεν πρόκειται ποτέ να κερδίσετε.
Και ένα ισχυρό σημείο σήμερα δεν αποτελεί εγγύηση για αύριο. Αν μια αξίωση βασίζεται σε εργασία που πλέον μπορεί να παραδοθεί και από ένα σύστημα, η διάκριση καταρρέει τη στιγμή που οι ανταγωνιστές εισάγουν το ίδιο σύστημα. Τι σημαίνει αυτό για ένα ισχυρότερο σημείο που γίνεται κοινή πρακτική μέσω AI, αναφέρεται στο τι κάνετε όταν το ισχυρότερο σημείο σας γίνεται κοινή πρακτική μέσω AI.
Αυτοί οι περιορισμοί δεν αποτελούν λόγο να μη δημιουργήσετε ένα benchmark. Είναι λόγος να αναφέρετε σε κάθε αποτέλεσμα πόσο παλιά είναι τα στοιχεία και πόσο ευαίσθητη είναι η διάσταση σε μετατόπιση λόγω αυτοματοποίησης. Μια βαθμολογία χωρίς αυτά τα δύο στοιχεία είναι δύσκολο να ερμηνευτεί, ακόμα και για μια διοίκηση που θέλει να τη χειριστεί με σύνεση.
Πόσο συχνά πρέπει να αναθεωρείται μια σύγκριση, σχετίζεται λοιπόν με ένα ερώτημα που δεν απαντάται από την αγορά αλλά από την ίδια την επιχείρηση: ποια εργασία μπορεί εδώ πραγματικά να αναλάβει η AI, ποια εργασία γίνεται με εποπτεία, και ποια εργασία παραμένει ανθρώπινη. Αυτό το ερώτημα απαντάται ανά καθήκον με το werkscan της FTE TO AI. Όποιος το γνωρίζει, γνωρίζει επίσης σε ποιες διαστάσεις η δική του θέση μπορεί να μετατοπιστεί ταχέως και σε ποιες όχι.
Αν κάποιο από αυτά τα αποτελέσματα αγγίζει αποφάσεις σχετικά με προσωπικό, τότε ισχύουν γι' αυτό οι δικές τους νομικές απαιτήσεις· αυτή η σελίδα και η υποκείμενη μέθοδος δεν παρέχουν συμβουλές σχετικά με αυτό.
Μια peer group που έχει συγκροτηθεί λανθασμένα κάνει κάθε επόμενο ερώτημα σχετικά με τον ρυθμό επανάληψης χωρίς νόημα· δείτε τι είναι μια peer group και πώς τη συγκροτείτε για το πώς λειτουργεί αυτή η επιλογή. Όποιος θέλει να δει πού στην αγορά υπάρχει ακόμα χώρος που κανείς δεν καταλαμβάνει, βρίσκει την προσέγγιση στο τι είναι μια ανάλυση white space.
Ο δωρεάν έλεγχος διαστάσεων είναι ένα πρώτο βήμα: αναφέρετε σε τι πιστεύετε ότι υπερτερείτε, και βλέπετε ποιες από αυτές τις αξιώσεις μπορούν να υποστηριχθούν με στοιχεία. Το πλήρες benchmark βρίσκεται υπό κατασκευή.