Misurare la Soddisfazione a livello internazionale

iI punto cieco della cultura della valutazione

Language

For a more comfortable reading experience, download the article in PDF format.

Download Article

La maggior parte delle aziende che monitorano il NPS o la CSAT in più paesi lo sa già: un voto non ha esattamente lo stesso valore da un paese all'altro. A parità di soddisfazione reale, un cliente giapponese, brasiliano o francese non assegnerà lo stesso punteggio.

Il dato è noto. Raramente viene misurato. Abbiamo voluto quantificarlo: quanto pesa la cultura della valutazione sui punteggi, indipendentemente dalla qualità dell'esperienza?

Il dato : un problema di comparabilità

Confrontare un NPS tra paesi equivale spesso a confrontare cose che non si misurano sulla stessa scala. È talmente riconosciuto che il settore ha sviluppato degli aggiramenti; per esempio, nell'ambito dell'European NPS, si include il voto 8 tra i promotori, con la motivazione che in Europa i rispondenti attribuiscono raramente 9 o 10.

Una precisazione è necessaria: un voto Google Maps misura una soddisfazione, mentre il NPS misura un'intenzione di raccomandazione. Non sono le stesse domande. Ma ciò che cerchiamo di cogliere non è né l'una né l'altra: è il modo in cui una cultura assegna un voto su una scala. Questa abitudine — evitare gli estremi, riservare il voto massimo, esprimere o meno il proprio malcontento — è una caratteristica dei rispondenti, non della domanda posta, e si riflette allo stesso modo su una soddisfazione, un NPS o una CSAT (Customer Satisfaction score). Google Maps ci serve quindi come proxy della cultura della valutazione di un paese, non come sostituto del NPS.

Questi aggiustamenti partono da una buona intuizione, ma trattano il sintomo senza misurarne l'entità. Da qui la nostra domanda, posta al contrario: a qualità di servizio comparabile,  quali paesi valutano più generosamente, e quali paesi valutano più severamente?

Il metodo utilizzato

La sfida era isolare il modo di valutare dei clienti locali, neutralizzando due elementi di disturbo: la qualità reale del servizio e la presenza di turisti.

La fonte. Google Maps. Un volume considerevole di recensioni, gratuito, disponibile nella quasi totalità dei paesi e alimentato in grandissima parte da residenti locali.

I luoghi. Invece di siti noti o turistici, abbiamo scelto tre categorie deliberatamente banali: stazioni di servizio, parrucchieri e lavanderie a gettoni. Tre scelte che svolgono lo stesso lavoro metodologico:

Esistono ovunque nel mondo, il che rende possibile il confronto

Rispondono a bisogni quotidiani, quindi generano molte recensioni

Sono frequentati in misura minoritaria dai turisti, il che limita la loro influenza;

E soprattutto, offrono un servizio standardizzato e comparabile da un paese all'altro. È quest'ultimo punto a neutralizzare il bias più pericoloso: se si confronta ovunque lo stesso tipo di prestazione, banale e omogenea, allora gli scarti nei voti osservati non riflettono più la qualità del servizio, ma proprio la cultura locale della valutazione.

I filtri. Ogni esercizio doveva contare almeno 25 recensioni, redatte in larghissima maggioranza nella lingua locale; un'ulteriore garanzia per assicurarsi che i voti provenissero da clienti locali e non da visitatori di passaggio.

Il perimetro. 20 stazioni di servizio, 20 parrucchieri e 20 lavanderie a gettoni per paese, cioè quasi 3.000 esercizi analizzati in 50 paesi. Per ogni paese, una media su 5, comparabile su scala internazionale. La raccolta è stata realizzata con il supporto dell'IA (Gemini, Claude) per trattare questo volume rispettando i filtri sopra indicati.

Un ultimo punto di coerenza: abbiamo confrontato questa classifica con i nostri dati NPS B2B multi-paese. Le tendenze osservate su Google Maps vanno nella stessa direzione di ciò che misuriamo lato clienti; un segnale che gli scarti rilevati dipendono effettivamente da abitudini di valutazione, e non soltanto dal grande pubblico.

Per rendere questi scarti leggibili a colpo d'occhio, abbiamo classificato i 50 paesi per voto medio, poi li abbiamo raggruppati in cinque quintili — dal più generoso (Q1) al più severo (Q5). La mappa qui sotto ne offre una lettura geografica: non dove i clienti sono più soddisfatti, ma dove valutano più in alto o più in basso, a esperienza comparabile.

Cosa mostra la classifica

Gli scarti tra paesi si spiegano ampiamente con la cultura, e si raggruppano per regioni in modo coerente con la letteratura sui response styles.

Il Sud-est asiatico figura tra i più generosi: Thailandia (1ª), Vietnam (3°), Malesia (5ª). In queste culture, esprimere pubblicamente un'insoddisfazione può essere percepito come una mancanza di cortesia, il che spinge i voti verso l'alto. Il Medio Oriente segue una logica simile: Qatar (3°), Arabia Saudita (7ª).

Il Giappone, al contrario, è uno dei paesi più severi. Questo non significa che il servizio sia peggiore; piuttosto il contrario. Il 5/5 è riservato all'eccezionale; un servizio semplicemente buono è considerato normale, quindi valutato come tale. Standard elevati producono meccanicamente voti bassi.

Gli Stati Uniti occupano una posizione intermedia (28ª), il che sorprende per un paese ritenuto entusiasta. La ricerca sugli stili di risposta descrive lì un uso più marcato degli estremi; voti molto buoni come voti molto negativi; laddove altre culture tendono maggiormente ad attenuare. La nostra misurazione coglie solo la media, ma colloca gli Stati Uniti più in basso di quanto la loro reputazione suggerirebbe.

L'Europa non forma un blocco. Il Centro, l'Est e una parte del Sud valutano piuttosto generosamente — Romania e Grecia (7ª), Svizzera (11ª), Austria e Polonia (12ª), Spagna e Serbia (17ª), Portogallo (20°) — mentre l'Europa occidentale e settentrionale si mostra più sobria: Paesi Bassi e Danimarca (30ª), Belgio (36°), Regno Unito (38°) e soprattutto la Francia (40ª). Questa moderazione occidentale è coerente con una cultura in cui la critica è più valorizzata del complimento — il Middle Response Style descritto dalla ricerca: si evitano gli estremi, si restringe verso il centro, e la media ne risente.

Classifica dei 50 paesi. Voto medio per paese, classificato in 5 quintili dal più generoso (Q1) al più severo (Q5). I quintili raggruppano i paesi per fasce di dieci nella classifica; due paesi con lo stesso voto dopo l'arrotondamento possono così trovarsi da una parte e dall'altra di una soglia (es. Francia e Sri Lanka, a 4,36).

Come leggere un voto, allora?

La conseguenza è diretta: uno stesso voto non si confronta da un paese all'altro. Un 3/5 in Giappone può riflettere un'esperienza del tutto corretta; un 5/5 in Thailandia può semplicemente riflettere un modo più positivo di utilizzare la scala. Interpretare un voto — Google Maps come NPS — implica tenere conto della cultura della valutazione del paese in cui è stato attribuito.

Limiti

Come ogni analisi di questo tipo, anche questa presenta alcune riserve che assumiamo:

Residuo turistico. Il filtro per lingua locale riduce fortemente l'influenza dei turisti, senza poterla annullare del tutto.

Disponibilità diseguale delle categorie. Alcuni paesi contano poche lavanderie a gettoni; nel Nord Europa molte stazioni di servizio sono automatiche, con meno interazioni di servizio da valutare.

Auto-selezione delle recensioni. Su Google Maps, chi lascia una recensione è tra i più motivati; spesso i molto soddisfatti o i molto scontenti. Questa propensione a valutare, e a polarizzarsi, varia anch'essa a seconda dei paesi. Fa tuttavia parte integrante della cultura della valutazione che cerchiamo di misurare, e riguarda del resto anche le indagini classiche: anche un questionario relazionale o transazionale viene compilato solo da una frazione auto-selezionata dei clienti, e questo bias resta, anche in quel caso, soggetto alle stesse variazioni culturali da un paese all'altro.

Per le aziende che gestiscono a livello internazionale

Che fare di questi scarti? Soprattutto non distorcere il NPS per « correggerlo »: ricontare gli 8 come promotori, sul modello dell'European NPS, sposta il bias senza misurarlo. Il dato resta utile a due condizioni. Prima di tutto, confrontare ciò che è comparabile, cioè un paese con sé stesso, nel tempo. Essendo la cultura della valutazione relativamente stabile, essa si annulla in un'evoluzione year-over-year — +3 punti in Giappone o in Brasile dicono la stessa cosa, perché il bias culturale è costante da un anno all'altro. Poi, quando si confrontano paesi tra loro, farlo all'interno di una stessa area culturale, oppure tenendo presente l'ordine di grandezza del bias che questo studio mette in luce.

E se il vostro paese meno performante non fosse quello che soddisfa meno i suoi clienti, ma semplicemente quello che valuta più severamente?