Do nedávna byla otázka, jak vyspělý je konkurent v oblasti AI, především kuriozitou. Nyní je to otázka s komerční váhou, protože AI v částech práce skutečně převzala úkoly: některé zcela, některé s člověkem, který schvaluje nebo zamítá, a některé ještě vůbec ne. Kde se to děje, se nemění jen nákladová cena konkurenta. Mění se to, na čem ještě vyhráváte. Dodací lhůta byla dlouho funkcí obsazenosti: víc lidí v plánování, kratší průběžná doba. Pokud se plánování u konkurenta z velké části děje samo, dodací lhůta už není otázkou personálu, ale softwaru, a to změní, kdo v této dimenzi vede. Právě proto má měření z vnějšku smysl: nikoli aby se zjistilo, kolik AI konkurent používá, ale aby se zjistilo, které dimenze srovnání se tím posouvají.
Z vnějšku nevidíte systémy, prompty ani interní popisy procesů. Vidíte chování a důsledky: reakční doby, které klesají, zatímco tým neroste, texty nabídek práce, které se posouvají od výkonných k kontrolním, dodací lhůty, které se zkracují při nezměněných personálních inzerátech, cenotvorbu, která je o něco pružnější, než by odpovídalo nákladové struktuře. Žádný z těchto signálů sám o sobě nedokazuje využití AI. Společně, v rámci více dimenzí, ale tvoří vzorec, který něco vypovídá. Metoda tedy není odečtení procenta AI u konkurenta, to jako externě pozorovatelné číslo neexistuje. Metodou je bodování dimenzí, na kterých se na vašem trhu skutečně vyhrává, a u každého bodového ohodnocení ověření, co je jeho podkladem a jak pevný ten podklad je.
Každé hodnocení v konkurenčním benchmarku stojí vedle důkazu, na kterém je založeno: text nabídky práce, signál od klienta, pozorovaná dodací lhůta, změna ceny. To dělá hodnocení ověřitelným a stejně důležité, vyvratitelným. Hodnocení bez dohledatelného zdroje je předpoklad s číslem. Na porada vedení se tento rozdíl rychle projeví: otázka „na čem je toto založeno“ musí mít konkrétní odpověď, jinak je srovnání šum. Stejný test platí i pro vlastní organizaci. Před srovnáváním s vnějším světem je užitečné vědět, co je peer group a jak ji sestavit, protože hodnocení vedle nesprávné srovnávací skupiny je stejně zavádějící jako hodnocení bez zdroje.
Externí odhad AI vyspělosti má hranice, které nelze setřít. Konkurent může provozovat pilotní projekt, který ještě nevytvořil žádný externí signál, a proto neoprávněně nízko bodovat. Konkurent může také uvádět tvrzení o AI v marketingových materiálech, které se ve výkonné práci nenachází, a proto neoprávněně vysoko bodovat, dokud toto tvrzení není ověřeno. Počty zaměstnanců, které zůstávají stejné, vypovídají málo, pokud je část tohoto personálu strukturálně najímána přes třetí strany. A rychlá reakční doba může být stejně tak výsledkem doplňkové služby jako automatizace. Metoda proto pracuje s rozpětími a explicitními mírami nejistoty pro každou dimenzi, ne s jediným číslem, které naznačuje jistotu, jaká neexistuje. Hodnocení, které stojí na jediném slabém signálu, je v matici jako takové označeno.
Výsledek vypovídá málo, pokud samotná dimenze už není rozlišující. Pokud se nasazení AI v určité dimenzi na celém trhu stalo standardem, nikdo tím už nevyhrává, a hodnocení této dimenze je cvičení bez komerčního důsledku. To je jeden z důvodů, proč benchmark začíná otázkou, které dimenze se stávají bezcennými, když AI nasazuje každý, než se čas věnuje bodování dimenzí, které už odpověď neovlivňují. Totéž platí pro náskok, který je dnes reálný: ten zaniká, jakmile konkurenti převezmou stejnou práci, a otázka, jak dlouho vydrží náskok v AI, tedy standardně patří do interpretace, ne jako vedlejší věc.
Externí odhad konkurenta je jedna polovina. Druhou polovinou je otázka, jakou práci ve vaší vlastní firmě skutečně lze převést na AI, a tato otázka se zodpovídá po jednotlivých úkolech pomocí pracovního skenu FTE TO AI. Totéž rozlišení, co AI převezme, co se děje s dohledem a co zůstane lidskou prací, je také to, na čem ještě můžete konkurovat, když je výkonná práce z velké části převzata, a to je otázka, která nehraje jen navenek: viz na čem ještě konkurujete, když AI dělá výkonnou práci. Konkurent s méně lidmi na výplatní listině tím není automaticky levnějším partnerem, jak je rozpracováno v proč konkurent s méně lidmi není automaticky levnější. Pokud se některá z těchto otázek dotýká personálních rozhodnutí ve vaší vlastní organizaci, platí pro to vlastní zákonné požadavky; tato stránka pro taková rozhodnutí neposkytuje podklad.
Můžete začít, aniž byste čekali na kompletní benchmark. Určete dimenze, na kterých si myslíte, že vyhráváte, a ověřte je pomocí bezplatné kontroly dimenzí: uvidíte, která z těchto tvrzení lze obhájit důkazy a která stojí na předpokladu. Kdo chce pohlédnout širší než na vlastní pozici, může stejný test zaměřit na to, kde u konkurentů zůstává prostor nevyužit, prostřednictvím analýzy white space. Kompletní konkurenční benchmark se připravuje; kontrola dimenzí je již nyní k dispozici.