Qualità della risposta

Informazioni sulla qualità della risposta

La qualità delle risposte ExpertReview è una funzione della piattaforma Qualtrics che controlla la qualità complessiva dei dati raccolti prima di iniziare ad analizzarli. Fornirà suggerimenti su come pulire al meglio i dati per assicurarsi di analizzare i dati con la massima qualità possibile. Di seguito sono riportati i possibili messaggi di errore che potresti ricevere durante l’analisi delle risposte e i modi in cui puoi risolvere ciascuno di essi.

Per istruzioni su come utilizzare ExpertReview in Data & Analysis, vedere Response Quality Functionality.

Sondaggio del partecipante terminato in modo anomalo e veloce

Gli intervistati che completano il sondaggio troppo rapidamente saranno contrassegnati come acceleratori. Ciò implica che hanno scelto risposte a caso per passare rapidamente attraverso il sondaggio, invece di fornirvi risposte di qualità.

Le risposte vengono contrassegnate quando sono più di due deviazioni standard dalla durata media impiegata dai partecipanti per partecipare al sondaggio, ed è necessario aver raccolto almeno 100 risposte nel sondaggio. Le risposte escluse, in anteprima e di prova non vengono conteggiate per le 100 risposte.

Possibile bot

Utilizzando la tecnologia reCaptcha invisibile di Google, possiamo rilevare la probabilità che una risposta provenga da un bot piuttosto che da un soggetto umano. Quando il rilevamento bot è attivato, a ogni intervistato viene assegnato un punteggio nel campo dati incorporati Q_RecaptchaScore, che indica la probabilità che la risposta provenga da un bot. Se questo punteggio è inferiore a 0,5, la risposta verrà contrassegnata come bot.

Impedire i bot

Esistono diversi modi per ridurre la probabilità che un bot passi attraverso il sondaggio.

• Utilizza Q_RecaptchaScore nella logica di diramazione per inviare i bot alla fine del sondaggio o esaminarli del tutto.
• Utilizzare una domanda di verifica del codice captcha all’inizio del sondaggio.
• Se stai distribuendo a un panel, utilizza un autenticatore o una password per limitare chi può accedere al sondaggio.
• Prova ad adattare le opzioni di sicurezza del tuo sondaggio.

Il partecipante ha partecipato al sondaggio più di una volta

A volte gli utenti possono provare a partecipare al tuo sondaggio più di una volta. A seconda dell’obiettivo del tuo studio, i duplicati possono ridurre la qualità dei tuoi dati distorcendo i risultati verso il feedback dei recidivi.

A seconda dell’opzione del sondaggio abilitata, ci sono 2 modi diversi in cui una risposta può finire contrassegnata come duplicato:

• RilevantID attivato: il campo Q_RilevantIDDuplicateScore è maggiore o uguale a 75.
• Impedisci invii multipli è impostato su “Contrassegna risposte:” Il campo Q_BallotBoxStuffing è uguale a “true”.

Impedire risposte duplicate

A seconda della configurazione del sondaggio, è possibile impedire risposte duplicate prima ancora di iniziare a raccogliere dati.

• Se conosci i tuoi intervistati, invia il sondaggio per e-mail agli intervistati.
  Qtip: Per garantire che nessuno possa utilizzare il link anonimo, cambia il tuo accesso al sondaggio a Solo su invito.
• Se conosci i tuoi intervistati o utilizzi il Single Sign-On (SSO) nella tua organizzazione, utilizza un autenticatore con l’opzione di ripetizione disabilitata.
• Quando si utilizza per impedire più invii con un collegamento anonimo, scegli un‘opzione di fine sondaggio o di reindirizzamento.
  Qtip: quando si utilizza un collegamento anonimo, l’abilitazione di ReleantID non eliminerà istantaneamente i duplicati, ma rafforzerà la qualità dei dati consentendo di eliminare i duplicati al termine della raccolta dati.

Percentuale di completamento scadente di 24 ore

Se un partecipante non termina il sondaggio entro 24 ore dall’inizio, è probabile che non torni a finire il sondaggio. Più questo accade, più è probabile che qualcosa sul modo in cui il sondaggio è scritto o formattato stia allontanando gli intervistati.

Il sondaggio può essere contrassegnato come con una percentuale di completamento scadente solo dopo aver raccolto almeno 100 risposte completate. (Sono escluse le risposte incomplete e quelle in corso.) Anche il tasso di completamento insoddisfacente non verrà contrassegnato se non sono state avviate risposte nelle ultime 24 ore. (Questo include risposte completate, risposte incomplete e risposte in corso.) Ciò garantisce che non ci sarà un falso positivo per il completamento inadeguato quando lo studio ha smesso di raccogliere le risposte mesi fa.

Quando è contrassegnata la percentuale di completamento di 24 ore

Un sondaggio è determinato ad avere un basso tasso di completamento calcolando quanto segue:

(Numero di sondaggi iniziati a 24 ore dall’ora corrente e completati) / (Numero di sondaggi iniziati a 24 ore dall’ora corrente)

• Minore: solo l’1-9% delle risposte iniziate nelle ultime 24 ore non è stato completato.
• Moderato: dal 10 al 20% delle risposte iniziate nelle ultime 24 ore non sono state completate.
• Grave: il 21% o più delle risposte iniziate nelle ultime 24 ore non sono state completate.

Revisione del sondaggio

I bassi tassi di completamento possono indicare che c’è un problema con la modalità di creazione del sondaggio. Quando rivedi il tuo sondaggio per migliorare la percentuale di completamento, è importante prendere in considerazione quello che iQ Score ExpertReview ha assegnato inizialmente al tuo sondaggio. Le pagine seguenti contengono consigli su tutti gli indicatori ExpertReview.

• Metodologia del sondaggio e best practice di conformità
• Errori comuni del sondaggio
• Richieste di dati sensibili

Scarsa percentuale di completamento generale

Quanto peggiore è il tasso di completamento di un sondaggio, tanto più è probabile che qualcosa sul modo in cui il sondaggio è scritto o formattato stia allontanando gli intervistati.

Il sondaggio può essere contrassegnato come con una bassa percentuale di completamento solo dopo aver raccolto almeno 100 risposte completate. (Ciò esclude le risposte importate, le risposte incomplete e le risposte in corso.)

Quando il tasso di completamento generale è contrassegnato

Un sondaggio è determinato ad avere un basso tasso di completamento calcolando quanto segue:

(Numero totale di risposte complete al sondaggio) / (Numero totale di risposte registrate + Numero totale di risposte in corso)

• Minore: solo l’1-9% delle risposte iniziate nelle ultime 24 ore non è stato completato.
• Moderato: dal 10 al 20% delle risposte iniziate nelle ultime 24 ore non sono state completate.
• Grave: il 21% o più delle risposte iniziate nelle ultime 24 ore non sono state completate.

Revisione del sondaggio

I bassi tassi di completamento possono indicare che c’è un problema con la modalità di creazione del sondaggio. Quando rivedi il tuo sondaggio per migliorare la percentuale di completamento, è importante prendere in considerazione quello che iQ Score ExpertReview ha assegnato inizialmente al tuo sondaggio. Le pagine seguenti contengono consigli su tutti gli indicatori ExpertReview.

• Metodologia del sondaggio e best practice di conformità
• Errori comuni del sondaggio
• Richieste di dati sensibili

La risposta contiene dati sensibili

A volte una risposta conterrà informazioni sensibili su un intervistato. Può trattarsi di qualsiasi cosa, da un numero di telefono a un numero di previdenza sociale. Ogni organizzazione ha il proprio standard di contenuti che considera sensibili e ci sono volte in cui potresti voler escludere questi dati dall’insieme di dati perché le informazioni fornite dagli intervistati sono troppo sensibili per essere incluse nell’analisi.

A seconda delle impostazioni del tuo brand, le informazioni sensibili potrebbero anche essere cancellate dalla risposta. In questo caso, le informazioni sensibili verranno sostituite con asterischi e non sarà possibile recuperarle. Dipende da te se includere nell’analisi risposte con informazioni oscurate.

Impedire la raccolta di dati sensibili

Sebbene gli intervistati possano fornire informazioni sensibili in una risposta aperta senza richiedere informazioni, il modo migliore per prevenire le violazioni dei dati sensibili è assicurarsi di non richiedere informazioni personali. Per saperne di più su come rimuovere questo tipo di richieste dal sondaggio, consulta Risoluzione dei problemi relativi ai dati sensibili.

Se sei un Amministratore della licenza, considera la possibilità di aggiungere una redazione alla tua Politica sui dati sensibili. Questo può aiutare a garantire che i creatori del tuo sondaggio non abbiano accesso a informazioni sensibili sui partecipanti. È possibile scegliere quali argomenti sensibili vengono oscurati e quali no.

Testo ambiguo

Gli intervistati che immettono testo ambiguo nei campi di immissione di testo verranno contrassegnati. Il testo ambiguo include “gibberish,” o casi in cui il partecipante ha digitato lettere e/o simboli casuali per rispondere a una domanda. Il testo ambiguo può essere rilevato in inglese (US, UK), spagnolo (ES, ES-ES), francese (FR, FR-CA), tedesco (DE), portoghese (PT, PT-BR) e italiano (IT). Le risposte fornite in un’altra lingua e le risposte che contengono acronimi (es. CX) non sono contrassegnate.

Impedire risposte ambigue

Sebbene non vi sia modo di impedire completamente questo comportamento, esistono modi per incoraggiare gli intervistati a dare risposte di qualità superiore a domande aperte.

• Nascondi domande che potrebbero non applicarsi a tutti gli intervistati: A volte gli intervistati immetteranno testo ambiguo perché hai forzato la risposta, ma il contenuto della domanda non è rilevante per loro. Ad esempio, se stai effettuando un sondaggio su una popolazione generale, ma inizia a fare domande ai tuoi intervistati sui loro figli, probabilmente ci sono persone che partecipano al sondaggio a cui queste domande non si applicano. Puoi nascondere le domande sui bambini nel nucleo familiare se inizi con una domanda generale (Hai figli?) e quindi utilizza la risposta del partecipante per configurare la diramazione, la visualizzazione o la logica di salto nelle seguenti domande.
  
• Assicurati che la tua domanda non sia troppo generica: quando fornisci ai partecipanti un campo di immissione di testo, spesso hanno bisogno di una guida sul tipo di dati che stai cercando. Se il prompt è troppo ampio, gli intervistati potrebbero non sapere come rispondere.
  Esempio: “Ci sono ulteriori commenti che vorresti fornire?” non è quasi così specifico come “Ci sono ulteriori feedback che vorresti fornire sulla tua esperienza con il supporto?” Quest’ultimo specifica che non stai cercando un feedback generale di prodotto o azienda, ma un feedback su un’esperienza specifica con il tuo team di supporto.
• Se applicabile, richiedere che le risposte corrispondano a un determinato formato: ad esempio, se stai chiedendo un indirizzo e-mail, puoi aggiungere la convalida del contenuto alla tua domanda.
  

Contrassegnare risposte contenenti testo ambiguo

Anche se ExpertReview non contrassegnerà questi tipi di risposte per impostazione predefinita, è possibile attivarla con la seguente procedura:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Qualità delle risposte.
3. Fare clic su Suggerimento.
   
4. Attivare Testo ambiguo.

Se non vuoi contrassegnare le risposte in base a questa metrica, puoi disattivare questa impostazione utilizzando gli stessi passi. Quando abiliti questa analisi, è solo per il sondaggio in cui ti trovi attualmente, non per tutti i sondaggi del tuo account, quindi puoi personalizzare l’analisi della qualità delle risposte in base alle esigenze.

Identificazione delle domande con risposte ambigue

Indipendentemente dal fatto che la risposta sia stata contrassegnata, è possibile ottenere informazioni più specifiche sulla presenza o meno di un testo ambiguo in una risposta e sulle domande specifiche interessate. Per visualizzare i tuoi dati direttamente all’interno di Qualtrics:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Scelta colonna.
3. Seleziona Dati incorporati.
4. Selezionare i seguenti campi:
   • Q_AmbiguousTextPresent: indicare se nella risposta al sondaggio è presente o meno un testo ambiguo. Questo può essere in risposta a qualsiasi domanda a risposta aperta nel sondaggio. 0 indica no, e 1 indica sì.
   • Q_AmbiguousTextQuestions: le domande specifiche che hanno ricevuto una risposta ambigua. Questo viene fornito come QID interno, non come numero di domanda modificabile.
     Qtip: per trovare i QID, numera automaticamente le domande con Numerazione ID interna. È sempre possibile ripristinare la numerazione in un secondo momento o scegliere di non pubblicare queste modifiche.
5. Queste colonne verranno visualizzate nei dati.
   

Modello di domande senza risposta

Le risposte verranno contrassegnate se l’intervistatore non ha risposto a molte delle domande, anche se le ha viste. Le risposte vengono contrassegnate quando almeno il 30% delle domande viste sono rimaste senza risposta; in questo modo, pochi errori o la decisione deliberata di ignorare una domanda irrilevante non è contrassegnata.

Impedire modelli di domande senza risposta

Se gli intervistati sono contrassegnati per avere una tendenza a saltare le domande, le cause potrebbero essere le seguenti:

• Le tue domande non sono pertinenti per il pubblico: scegliere il tuo campione è un passo estremamente importante nella conduzione della ricerca. Se distribuisci il tuo sondaggio a un pubblico molto generalizzato, potresti finire per porre domande a cui il pubblico non ha modo di rispondere. Ad esempio, se stai effettuando un sondaggio su una popolazione sull’ergonomia del loro workspace, probabilmente non dovresti includere intervistati attualmente disoccupati. Se non hai il controllo sul tuo campione di distribuzione, considera di impostare degli screen-out per rimuovere gli intervistati irrilevanti.
• Le tue domande non sono chiare: potresti fare le domande giuste, ma la tua formulazione potrebbe essere un po’ fuorviante per gli intervistati. Provate a riscrivere queste domande per renderle il più brevi e chiare possibile. Assicurarsi di usare la voce attiva invece della voce passiva.
• Il partecipante sta deliberatamente cercando di terminare il sondaggio il prima possibile: ciò può essere indicato anche dall’uso di testo ambiguo e semplice. Per incoraggiare gli intervistati a rispondere a tutte le domande del sondaggio, prendere in considerazione l’aggiunta della convalida alle domande. Puoi forzare i partecipanti a rispondere a ogni domanda o chiedere un messaggio per chiedere di tornare alle domande senza risposta quando terminano una pagina del sondaggio.
  Qtip: È anche importante considerare se la stanchezza degli intervistati sia un fattore.

Contrassegnare le risposte con uno schema di domande senza risposta

Anche se ExpertReview non contrassegnerà questi tipi di risposte per impostazione predefinita, è possibile attivarla con la seguente procedura:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Qualità delle risposte.
3. Fare clic su Suggerimento.
   
4. Attivare Domande senza risposta.

Se non vuoi contrassegnare le risposte in base a questa metrica, puoi disattivare questa impostazione utilizzando gli stessi passi. Quando abiliti questa analisi, è solo per il sondaggio in cui ti trovi attualmente, non per tutti i sondaggi del tuo account, quindi puoi personalizzare l’analisi della qualità delle risposte in base alle esigenze.

L’identificazione delle domande a cui gli intervistati non hanno risposto

È possibile ottenere informazioni più specifiche su quali domande sono state ignorate e sulla percentuale di domande nel sondaggio rimaste senza risposta, indipendentemente dal fatto che la risposta sia stata contrassegnata. Per visualizzare i tuoi dati direttamente all’interno di Qualtrics:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Scelta colonna.
3. Seleziona Dati incorporati.
4. Selezionare i seguenti campi:
   • Q_UnRappresaPercentuale: la percentuale di domande del sondaggio per cui il partecipante non ha fornito risposta. Solo le domande che hanno visto vengono conteggiate per questo valore. Questo viene presentato come un rapporto. Ad esempio, 100% è 1 e 66,7% è 0,667.
   • Q_UnansweredQuestions: Le domande specifiche a cui non è stata data risposta. Questo viene fornito come QID interno, non come numero di domanda modificabile.
     Qtip: per trovare i QID, numera automaticamente le domande con Numerazione ID interna. È sempre possibile ripristinare la numerazione in un secondo momento o scegliere di non pubblicare queste modifiche.
5. Queste colonne verranno visualizzate nei dati.
   

Semplificazione

La semplificazione è la pratica di fornire le stesse risposte lungo una tabella matrice per superare rapidamente le domande. Ad esempio, un intervistato può sempre scegliere la prima risposta a ogni affermazione, indipendentemente da come si sente.

Gli intervistati possono essere allineati perché sono affaticati, specialmente se non sono un velocista o un bot, e le loro risposte all’inizio del sondaggio erano normali.

Contrassegnare le risposte che contengono semplici

Anche se ExpertReview non contrassegnerà questi tipi di risposte per impostazione predefinita, è possibile attivarla con la seguente procedura:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Qualità delle risposte.
3. Fare clic su Suggerimento.
   
4. Abilita semplificazione.

Se non vuoi contrassegnare le risposte in base a questa metrica, puoi disattivare questa impostazione utilizzando gli stessi passi. Quando abiliti questa analisi, è solo per il sondaggio in cui ti trovi attualmente, non per tutti i sondaggi del tuo account, quindi puoi personalizzare l’analisi della qualità delle risposte in base alle esigenze.

Identificazione delle domande in cui gli intervistati si sono limitati

Per essere contrassegnati come semplici, un intervistato deve avere entrambi:

• Linee lineate da almeno 3 tabelle di matrice likert (non affermazioni, ma tutte le domande)
• Raddrizzato l’80% delle tabelle matrice nel sondaggio

Tuttavia, se si desidera eseguire un’analisi più approfondita, è possibile valutare il numero di matrici semplici e quali domande sono state risolte. Per modificare i tuoi dati direttamente all’interno di Qualtrics:

1. Assicurarsi di trovarsi nella sezione Dati della scheda Dati e analisi.
   
2. Fare clic su Scelta colonna.
3. Seleziona Dati incorporati.
4. Selezionare i seguenti campi:
   • Q_StraightliningCount: il numero di domande matrice dirette al partecipante.
   • Q_StraightliningPercentuale: la percentuale di tabelle matrice nel sondaggio allineate direttamente al partecipante. Questo viene presentato come un rapporto. Ad esempio, 100% è 1 e 66,7% è 0,667.
   • Q_StraightliningQuestions: le domande specifiche più semplici. Questo viene fornito come QID interno, non come numero di domanda modificabile.
     Qtip: per trovare i QID, numera automaticamente le domande con Numerazione ID interna. È sempre possibile ripristinare la numerazione in un secondo momento o scegliere di non pubblicare queste modifiche.
5. Queste colonne verranno visualizzate nei dati.