Calibrare una scorecard quando tutti stanno in un livello

Come calibrare una scorecard: leggi la distribuzione dei risultati, sposta le soglie finché ogni livello ha delle persone dentro, verifica che i livelli coprano ancora da zero a cento senza buchi né sovrapposizioni, poi guarda di nuovo. Se l'ottanta per cento finisce in un livello, i punti di taglio sono sbagliati.

Come calibrare una scorecard su persone vere

Non puoi progettare su carta una scorecard che discrimini. Ne puoi progettare una plausibile. Poi la correggi su persone vere.

La maggior parte di chi costruisce non calibra mai una scorecard. Pubblica, raccoglie compilazioni e non guarda mai. È tutta la differenza tra una scorecard mediocre e una buona, e costa un pomeriggio. La calibrazione è per lo più aritmetica, non scrittura. Per chi ha poche ore è il tipo migliore di correzione: niente testi nuovi, niente domande nuove, solo numeri che puoi spostare.

Aspetta di avere qualcosa da leggere

Non calibrare su dieci persone. Il ritmo della guida è dopo le prime cinquanta compilazioni circa, poi ogni mese. Prima stai leggendo rumore, e il rumore ti tenta a correggere problemi che non ci sono. Dopo emergono schemi che sono reali.

Una regola prima di cominciare: metti a punto prima di portare traffico. Ogni modifica fatta dopo il lancio confonde la tua storia, come spiega l'ultima sezione. Quindi il momento migliore per calibrare è la fase tranquilla dopo il primo piccolo gruppo di rispondenti veri e prima di spingere la scorecard in un posto rumoroso.

Guida gratuita · 28 pagineCostruisci la versione onesta.Un quiz che separa le persone, dice qualcosa di vero e ti dà un motivo per iniziare la conversazione.Ricevi la guida gratuita →

Quattro letture, quattro verdetti

Ci sono quattro cose da leggere. Ognuna ha un verdetto e ognuna indica un tipo diverso di correzione.

La quarta è trattata a parte in come trovare le domande inutili nella scorecard. Questo articolo riguarda le altre tre, perché lavorano al livello dell'intero strumento.

Il risultato più comune è anche la correzione più facile

Diciamo che hai progettato cinque livelli e l'ottanta per cento delle persone finisce in uno. Cosa è andato storto? Non le persone. La guida è brusca su questo: i punti di taglio sono sbagliati, non i rispondenti. Le persone sono quello che sono. Le tue soglie stanno nel posto sbagliato per i punteggi che producono davvero. È il risultato più comune di gran lunga. Ed è il più facile da correggere, perché è aritmetica e non scrittura. Non stai riscrivendo una sola domanda. Stai spostando una linea.

L'istinto è dare la colpa al pubblico. "Le mie persone sono tutte allo stesso stadio." Forse. Ma una scorecard che non ordina nessuno non ti sta dicendo che il tuo pubblico è uniforme. Ti sta dicendo che non sa distinguerlo. Correggi prima lo strumento e fatti la domanda sul pubblico dopo.

La questione più ampia di dove dovrebbero andare le linee fin dall'inizio è in come fissare i confini delle fasce di una scorecard. La calibrazione è ciò che fai quando la tua prima ipotesi ha incontrato la realtà.

Il ciclo per calibrare una scorecard

La guida dà un nome alla calibrazione, ed è un ciclo di quattro passi.

1. Leggi la distribuzione dei punteggi. Dove finiscono davvero le persone?
2. Sposta le soglie. Spostale finché ogni livello è popolato.
3. Controlla che i livelli coprano ancora tutto. Da zero a cento, nessun buco, nessuna sovrapposizione.
4. Guarda di nuovo la distribuzione. Si è distribuita come volevi?

Il passo tre è quello che le persone dimenticano, ed è quello che fa male. Quando trascini una soglia, puoi lasciarti dietro un buco o far toccare due fasce. Una soglia che tocca corrisponde due volte e il vincitore lo decide l'ordinamento, cioè il caso. Un buco è peggio. La guida descrive una scala con un buco che non mostrava nessun risultato nel titolo e mostrava il risultato migliore nei consigli, sulla stessa pagina.

La correzione è un'abitudine. Scrivi ogni fascia in modo che inizi un centesimo di punto sopra dove finisce la precedente. Poi controlla l'intera sequenza, ogni volta che modifichi. Un esempio reale dalla guida: a qualcuno che aveva totalizzato esattamente quaranta è stato detto per mesi che il suo livello era "Buono" perché una riga iniziava un centesimo di punto in anticipo. Nessun errore. Semplicemente corrispondeva per prima.

Quando i tuoi numeri non concordano tra loro

C'è una cosa che ti confonderà dopo la prima ricalibrazione, quindi te la dico adesso.

Di solito ricalibrare non torna indietro a cambiare i rispondenti passati. Tengono il risultato che hanno ricevuto. Quindi un conteggio nel tuo editor può legittimamente non coincidere con un grafico che ricalcola in tempo reale. Nessuno dei due è rotto.

L'editor riporta ciò che è stato detto alle persone. Il grafico riporta ciò che direbbero le nuove soglie. Entrambi sono veri. Rispondono a domande diverse.

Decidi quale dei due stai leggendo prima di agire. Se vuoi sapere che aspetto ha il tuo pubblico rispetto alle nuove linee, usa il grafico in tempo reale. Se vuoi sapere cosa è stato davvero promesso a una persona vera che potrebbe rispondere alla tua email, usa il risultato salvato.

Valutazione gratuitaQuanto sei intrappolato, davvero?Fai l'Indice di Soffocamento Aziendale, la valutazione gratuita per capire se sei pronto a diventare solopreneur.Fai la valutazione →

Cambia una volta, scrivilo

Niente viene ricalcolato, mai. I punteggi si scrivono una volta, al completamento. Non c'è un nuovo calcolo. Ogni modifica a un valore di opzione, a un peso o a una soglia di livello biforca lo strumento, e niente registra quale versione ha compilato qualcuno.

Le tue analisi reinterpreteranno in silenzio la storia sulla nuova scala. Uno spostamento nei tuoi numeri la settimana dopo una ricalibrazione può essere la ricalibrazione, non il tuo pubblico.

Quindi costruisci tre abitudini:

• Raggruppa le modifiche. Una seduta, tutte le modifiche, poi lascia stare.
• Segna la data di ogni modifica nei tuoi appunti. Lo strumento non lo farà.
• Non leggere mai un andamento attraverso una modifica. Traccia una linea sul calendario e confronta solo dentro ciascun lato.

Un'altra cosa da controllare quando hai finito. Ogni risultato deve avere ancora un follow-up in ascolto. Un risultato senza nessuno dall'altra parte è il fallimento silenzioso più comune che esista. Nessun errore. Sembra solo una settimana tranquilla. Il ragionamento dietro, e come scrivere un follow-up che valga la pena, è in come scrivere il piano d'azione di una scorecard.

Una sessione di calibrazione, dall'inizio alla fine

1. Estrai i risultati. Conta quante persone stanno in ogni livello.
2. Dai un nome al problema. Un livello sovraccarico, un livello vuoto, una dimensione stretta, o una dimensione sempre la più debole.
3. Modifica una volta. Sposta le linee. Unisci o irrobustisci una dimensione se serve.
4. Controlla la copertura. Da zero a cento, niente di mancante, niente di doppio.
5. Scrivi la data e cosa hai cambiato.
6. Controlla i follow-up. Assicurati che ogni risultato ne abbia ancora uno in ascolto.

Poi chiudi l'editor per un mese. Per calibrare bene una scorecard, torna con rispondenti nuovi, non con una nuova voglia di ritoccare.

Guida gratuita · 28 pagineCostruisci la versione onesta.Un quiz che separa le persone, dice qualcosa di vero e ti dà un motivo per iniziare la conversazione.Ricevi la guida gratuita →

Il ritmo delle domande

La calibrazione non riguarda solo i punteggi. La leva più grande sul completamento è il ritmo delle domande, e lo controlli tu.

Appare una domanda per schermata. Le domande a scelta singola avanzano da sole dopo un attimo. Scelta multipla, cursori e caselle di testo richiedono tutti una pressione. Quindi cambiare il tipo di una domanda cambia il ritmo fisico dell'intero test, e quasi nessuno lo tratta come una scelta di design. Tieni la spina dorsale a scelta singola. Spendi i rallentamenti con intenzione, verso la fine.

L'ordine conta più di quanto sembri. L'ordine delle domande di solito è l'ordine delle dimensioni, con il nome della dimensione stampato sopra ogni domanda. Quindi non stai ordinando domande. Stai ordinando capitoli. Apri con la dimensione più facile e più lusinghiera. Metti la più difficile al terzo o al quarto posto, dopo il punto in cui le persone si sono impegnate e prima che si stanchino.

Anche l'avanzamento è persuasione. Di solito si calcola dalla posizione, quindi la domanda uno di venticinque si legge già come una piccola frazione completata. I puntini e i passi sono onesti, ma diventano scoraggianti oltre una dozzina di domande. Oltre venti, usa una barra continua. Se i completamenti sono bassi anche quando i risultati sembrano sani, guarda qui prima di toccare le soglie.

Valutazione gratuitaQuanto sei intrappolato, davvero?Fai l'Indice di Soffocamento Aziendale, la valutazione gratuita per capire se sei pronto a diventare solopreneur.Fai la valutazione →

Domande frequenti

Quante risposte servono prima di calibrare?

Circa cinquanta compilazioni è il punto di partenza della guida, poi una revisione mensile. Sotto, gli schemi sono per lo più rumore e rischi di aggiustare cose che non sono rotte.

E se quando calibro una scorecard la maggior parte delle persone finisce in un livello?

Allora i punti di taglio sono sbagliati, non i rispondenti. È il risultato più comune e la correzione più facile, perché sposti soglie, non riscrivi domande. Spostale finché ogni livello è popolato.

Ricalibrare cambia i vecchi risultati?

Di solito no. I rispondenti passati tengono il risultato che hanno ricevuto, quindi un conteggio dell'editor può differire da un grafico in tempo reale. Entrambi possono essere corretti. Annota la data della modifica così non confronterai mai attraverso di essa.

E se la stessa dimensione è la più debole per quasi tutti?

La tua scorecard potrebbe essere un solo argomento con più cappelli. Di solito significa che diverse dimensioni misurano la stessa cosa di fondo, quindi verifica se si possono unire.

Il metodo completo, con le checklist, è in Il Playbook del quiz di valutazione, una guida gratuita di 28 pagine.