Qualità della risposta
Cosa puoi trovare in questa pagina
Informazioni sulla qualità delle risposte
ExpertReview quality è una funzione della piattaforma Qualtrics che controlla la qualità complessiva dei dati raccolti prima di iniziare ad analizzarli. Fornirà suggerimenti su come pulire al meglio i dati per garantire un'analisi della massima qualità possibile. Di seguito sono riportati i possibili messaggi di errore che si possono ricevere durante l'analisi delle risposte e i modi per risolverli.
Per istruzioni su come utilizzare ExpertReview in "Dati e analisi", consultare la sezione " Funzionalità relativa alla qualità delle risposte".
Consiglio Q: le risposte importate vengono analizzate nei sondaggi in cui è stata attivata la funzione di verifica della qualità delle risposte. Le uniche eccezioni sono rappresentate dalla determinazione di acceleratori, tassi di completamento, dati sensibili, rilevamento di bot e rilevamento di duplicati.
Le anteprime dei sondaggi, le risposte del test e le risposte sintetiche sono state escluse da tutte le analisi.
L'intervistato ha terminato il sondaggio in modo anormalmente veloce
I partecipanti che completano il sondaggio troppo rapidamente verranno contrassegnati come "velocisti". Ciò implica che hanno scelto le risposte a caso per completare rapidamente il sondaggio, invece di fornire risposte di qualità.
Le risposte vengono segnalate quando si discostano di oltre due deviazioni standard dalla durata mediana di partecipazione al sondaggio dei vostri intervistati e dovete aver raccolto almeno 100 risposte nel vostro sondaggio. Le risposte escluse, quelle in anteprima e quelle del testnon vengono conteggiate ai fini del raggiungimento delle 100 risposte.
Attenzione: Poiché l'eccesso di velocità viene giudicato in relazione al tempo impiegato dagli altri rispondenti per completare il sondaggio, chi è considerato un eccesso di velocità può cambiare man mano che si raccolgono altre risposte. Per garantire la massima qualità dei dati, ti consigliamo di non utilizzare i filtri né eliminare i trasgressori fino a quando non avrai completato l' e la raccolta dei dati.
Possibile Bot
Consiglio Q: le risposte possono essere segnalate come bot solo se si è selezionato Rilevamento bot nelle opzioni del sondaggio.
Grazie alla tecnologia reCAPTCHA invisibile di Google , siamo in grado di individuare la probabilità che una risposta provenga da un bot anziché da un utente umano. Quando è attivato il rilevamento dei bot, a ciascun intervistato viene assegnato un punteggio nel campo dati integrati Q_RecaptchaScore, che indica la probabilità che la risposta provenga da un bot. Se questo punteggio è inferiore a 0,5, la risposta sarà contrassegnata come bot.
Consiglio Q: le risposte importate non sono compatibili con il sistema di rilevamento dei bot e non verranno controllate per individuare eventuali bot.
Consiglio Q: sebbene sia la domanda Captcha sia il rilevamento dei bot utilizzino la tecnologia Google reCAPTCHA, il modo in cui la utilizzano è molto diverso. La domanda Captcha richiede che il rispondente interagisca con successo con essa e completi la sfida proposta per poter procedere. D'altra parte, il rilevamento dei bot utilizza reCAPTCHA V3 per contrassegnare la risposta con la probabilità che sia stata presa da un bot. Questo non richiede alcuna interazione da parte del rispondente, ma non lo blocca se si tratta effettivamente di un bot. (Anche se un utente può aggiungere un flusso del sondaggio per espellere il rispondente dal sondaggio in base alla probabilità che sia un bot)
Prevenzione dei bot
Esistono diversi modi per ridurre la probabilità che un bot si faccia strada nel vostro sondaggio.
- Utilizzate il Q_RecaptchaScore nella logica diramazione per inviare i bot alla fine del sondaggio o per escluderli del tutto.
- Utilizzare una domanda di verifica codice captcha all'inizio del sondaggio.
- Se si distribuisce a un panel, utilizzare un autenticatore o una password per limitare chi può accedere al sondaggio.
- Prova a modificare le opzioni di sicurezza del sondaggio.
Il rispondente ha partecipato al sondaggio più di una volta
Consiglio Q: le risposte che potrebbero essere duplici possono essere segnalate solo se nelle opzioni del sondaggio è selezionata almeno una delle seguenti opzioni:
A volte gli utenti di potrebbero provare a compilare il tuo sondaggio più di una volta. A seconda dell'obiettivo della tua ricerca, le dupliche possono compromettere la qualità dei dati, influenzando i risultati a favore dei feedback forniti da chi ha inviato più di una risposta.
A seconda dell'opzione sondaggio attivata, ci sono due modi diversi in cui una risposta può essere segnalata come duplicata:
- Il rilevamento dei duplicati è impostato su “Segnala le risposte”: il campo Q_DuplicateRespondent è pari a “true”.
- L'opzione "Evita invii multipli" è impostata su "Segnala le risposte": il campo Q_BallotBoxStuffing ha un valore pari a "true".
Prevenzione delle risposte duplicate
A seconda di come si imposta il sondaggio, si possono evitare risposte duplicate prima ancora di iniziare a raccogliere i dati.
Se conoscete i vostri intervistati, inviate il sondaggio tramite e-mail.
Suggerimento: per assicurarti che nessuno possa utilizzare il collegamento anonimo, imposta l'accesso al sondaggio su " Solo su invito".
- Se conoscete i vostri rispondenti o utilizzate il single sign-on (SSO) nella vostra organizzazione, utilizzate un autenticatore con l'opzione di ripetizione disabilitata.
Quando si utilizza la funzione per impedire l'invio multiplo tramite un collegamento anonimo, scegliere l'opzione " Fine sondaggio " o " Reindirizza".
Consiglio Q: quando si utilizza un collegamento anonimo, l'attivazione del rilevamento dei duplicati non comporta l'eliminazione immediata dei duplicati, ma migliora la qualità dei dati consentendo di eliminarli al termine della raccolta.
Scarso tasso di completamento nelle 24 ore
Se un partecipante non completa il sondaggio entro 24 ore dall'inizio, è probabile che non torni a completarlo. Più questo accade, più è probabile che qualcosa nel modo in cui il sondaggio è scritto o formattato stia allontanando i rispondenti.
Il sondaggio può essere segnalato come scarso tasso di completamento solo dopo aver raccolto almeno 100 risposte complete. (Sono escluse le risposte incomplete e quelle in corso.) Inoltre, un basso tasso di completamento non verrà segnalato se nelle ultime 24 ore non è stata avviata alcuna risposta. (Ciò include le risposte completate, quelle incomplete e le risposte in corso.) In questo modo si evita che si verifichino falsi positivi relativi a un completamento insufficiente, dato che lo studio ha smesso di raccogliere risposte già da mesi.
Quando viene segnalato il tasso di completamento di 24 ore
Si stabilisce che un sondaggio abbia un basso tasso di completamento calcolando quanto segue:
(Numero di sondaggi avviati 24 ore fa e completati) / (Numero di sondaggi avviati 24 ore fa)
- Minore: Solo dall'1 al 9% delle risposte iniziate nelle ultime 24 ore non sono state completate.
- Moderato: dal 10 al 20% delle risposte avviate nelle ultime 24 ore non sono state completate.
- Grave: il 21% o più delle risposte avviate nelle ultime 24 ore non sono state completate.
Revisione del sondaggio
Tassi di completamento bassi possono indicare che vi sia un problema nella struttura del sondaggio. Quando si rivede il sondaggio per migliorarne il tasso di completamento, è importante tenere conto del punteggio iQ Score che ExpertReview ha inizialmente assegnato al sondaggio. Le pagine seguenti contengono consigli su tutti i problemi segnalati da ExpertReview.
- Metodologia del sondaggio e pratiche ottimali per la conformità
- Errori comuni nel sondaggio
- Richieste di dati sensibili
Tasso di completamento complessivo scarso
Più basso è il tasso di completamento di un sondaggio, maggiore è la probabilità che sia proprio il modo in cui il sondaggio è redatto o strutturato a scoraggiare i partecipanti.
Il sondaggio può essere segnalato come scarso tasso di completamento solo dopo aver raccolto almeno 100 risposte complete. (Sono escluse le risposte importate, quelle incomplete e quelle in corso di elaborazione.)
Quando il tasso di completamento complessivo è segnalato
Si stabilisce che un sondaggio abbia un basso tasso di completamento calcolando quanto segue:
(Numero totale di risposte complete al sondaggio) / (Numero totale di risposte registrate + Numero totale di risposte in corso)
Consiglio q: In questo caso, il numeratore (risposte complete al sondaggio) si riferisce alle risposte che si sono concluse perché il rispondente ha cliccato fino alla fine del sondaggio. Le risposte in corso che sono state chiuse manualmente non vengono conteggiate. Le risposte in corso chiuse manualmente sono incluse nel denominatore.
- Minore: Solo dall'1 al 9% delle risposte iniziate nelle ultime 24 ore non sono state completate.
- Moderato: dal 10 al 20% delle risposte avviate nelle ultime 24 ore non sono state completate.
- Grave: il 21% o più delle risposte avviate nelle ultime 24 ore non sono state completate.
Revisione del sondaggio
Tassi di completamento bassi possono indicare che vi sia un problema nella struttura del sondaggio. Quando si rivede il sondaggio per migliorarne il tasso di completamento, è importante tenere conto del punteggio iQ Score che ExpertReview ha inizialmente assegnato al sondaggio. Le pagine seguenti contengono consigli su tutti i problemi segnalati da ExpertReview.
- Metodologia del sondaggio e pratiche ottimali per la conformità
- Errori comuni nel sondaggio
- Richieste di dati sensibili
Le risposte contengono dati sensibili
CONSIGLIO Q: I dati considerati sensibili sono stabiliti dal Brand Administrator in una Politica sui dati sensibili.
A volte le risposte contengono informazioni sensibili sul rispondente. Può trattarsi di qualsiasi cosa, dal numero di telefono al codice fiscale. Ogni organizzazione ha un proprio standard di contenuti considerati sensibili e in alcuni casi è possibile escludere questi dati dal set di dati perché le informazioni fornite dagli intervistati sono troppo sensibili per essere incluse nell'analisi.
A seconda delle impostazioni del tuo brand, le informazioni sensibili potrebbero essere oscurate nella risposta. In questo caso, le informazioni sensibili saranno sostituite da asterischi e non sarà possibile recuperare le informazioni sensibili. Sta a voi decidere se includere nella vostra analisi le risposte con informazioni ridotte.
Consiglio Q: le informazioni che sono state modificate per essere censurate non vengono contrassegnate come contenuti sensibili e, pertanto, non saranno incluse nei filtri di ExpertReview. Anche le risposte importate saranno escluse dalla rielaborazione.
Prevenzione della raccolta di dati sensibili
Sebbene gli intervistati possano fornire informazioni sensibili in una risposta aperta senza che venga loro richiesto, il modo migliore per prevenire violazioni relative ai dati sensibili è assicurarsi di non richiedere informazioni personali. Per ulteriori informazioni su come rimuovere questo tipo di richieste dal sondaggio, consultare la sezione Risoluzione dei problemi relativi ai dati sensibili.
Se sei un brand administrator, valuta la possibilità di includere la cancellazione dei dati sensibili nella tua politica sui dati sensibili. Questo può aiutare a garantire che i creatori del sondaggio non abbiano accesso a informazioni sensibili sui loro rispondenti. È possibile scegliere quali argomenti sensibili vengono eliminati e quali no.
Testo ambiguo
Attenzione: Questa funzione non è attualmente disponibile per tutti i clienti.
Gli intervistati che inseriscono un testo ambiguo nei campi di immissione di testo saranno segnalati. Il testo ambiguo comprende le “frasi senza senso” o i casi in cui l’intervistato ha digitato lettere e/o simboli a caso per rispondere a una domanda. È possibile individuare testi ambigui in inglese (USA, Regno Unito), spagnolo (ES, ES-ES), francese (FR, FR-CA), tedesco (DE), portoghese (PT, PT-BR) e italiano (IT). Le risposte fornite in un'altra lingua e quelle che contengono acronimi (ad esempio, CX) non vengono segnalate.
Prevenzione di risposte ambigue
Sebbene non sia possibile prevenire completamente questo comportamento, esistono modi per incoraggiare gli intervistati a fornire risposte di qualità superiore alle domande aperte.
Nascondi le domande che potrebbero non essere pertinenti per tutti gli intervistati: a volte gli intervistati inseriscono un testo ambiguo perché hai imposto una risposta, ma il contenuto della domanda non è rilevante per loro. Ad esempio, se stai conducendo un sondaggio rivolto alla popolazione in generale, ma inizi a porre ai partecipanti domande sui loro figli, è probabile che ci siano persone che rispondono al sondaggio per le quali queste domande non applicano. È possibile nascondere le domande relative ai figli presenti in famiglia se si inizia con una domanda generica (Hai figli?) e poi si utilizza la risposta dell'intervistato per configurare la logica di diramazione, visualizzazione o esclusione nelle domande successive.
Assicurati che la tua domanda non sia troppo generica: quando metti a disposizione degli intervistati un campo di immissione di testo, spesso hanno bisogno di indicazioni sul tipo di dati che stai cercando. Se la richiesta è troppo ampia, gli intervistati potrebbero non sapere come rispondere.
Esempio: “Ci sono altri commenti che vorresti fornire?” non è affatto specifico quanto “Ci sono altri commenti che vorresti fornire sul tuo feedback sull’esperienza con l’assistenza?” Quest'ultima specifica che non si sta cercando un feedback generale sul prodotto o sull'azienda, ma un feedback su un'esperienza specifica con il team di assistenza.
Se del caso, richiedi che le risposte rispettino un determinato formato: ad esempio, se chiedi un indirizzo e-mail, puoi aggiungere la convalida del contenuto alla tua domanda.
Segnalazione di risposte contenenti testo ambiguo
Sebbene ExpertReview non segnali questo tipo di risposte per impostazione predefinita, è possibile attivarlo con i seguenti passaggi:
Assicurati di trovarti nella sezione Dati della scheda Dati e analisi.
Fare clic su Qualità delle risposte.
Scorri fino alla sezione “Testo ambiguo”.
Attiva questa funzione.
Se non si desidera contrassegnare le risposte in base a questa metrica, è possibile disattivare questa impostazione utilizzando gli stessi passaggi. Quando attivi questa analisi, essa si applica solo al sondaggio in cui ti trovi in quel momento, non a tutti i sondaggi presenti nel tuo account; in questo modo puoi personalizzare l'analisi della qualità delle risposte in base alle tue esigenze.
Individuare le domande con risposte ambigue
Indipendentemente dal fatto che la risposta sia stata contrassegnata, è possibile ottenere informazioni più specifiche sulla presenza o meno di testo ambiguo in una risposta e sulle domande specifiche interessate. Per visualizzare i dati direttamente all'interno di Qualtrics:
- Q_AmbiguousTextPresent: Se nella risposta al sondaggio era presente o meno un testo ambiguo. Può essere una risposta a qualsiasi domanda a risposta aperta del sondaggio. 0 indica no e 1 indica sì.
- Q_Domande ambigue: Le domande specifiche che hanno ricevuto una risposta ambigua. Si tratta di un QID interno, non del numero della domanda modificabile. Consiglio q: per trovare i QID, numerare automaticamente le domande con la numerazione interna degli ID. È sempre possibile modificare la numerazione in un secondo momento o scegliere di non pubblicare queste modifiche.
Consiglio q: anche senza seguire le indicazioni di cui sopraQ_AmbiguousTextPresent e Q_AmbiguousTextQuestions saranno inclusi nelle esportazioni di dati. Questi campi possono essere utilizzati anche per filtrare i dati.
Schema di domande senza risposta
Attenzione: Questa funzione non è attualmente disponibile per tutti i clienti.
Le risposte saranno segnalate se il partecipante al sondaggio non ha risposto a molte domande, pur avendole viste. Le risposte vengono segnalate quando il 30% o più delle domande visualizzate è rimasto senza risposta; in questo modo, piccoli errori o la scelta deliberata di saltare una domanda irrilevante non vengono segnalati.
Suggerimento: le risposte non verranno contrassegnate in base alle domande a cui l'intervistato non ha risposto perché nascoste dalla logica di diramazione, di visualizzazione o di esclusione. Se le risposte sono incomplete, le pagine del sondaggio che il rispondente non ha mai visto non vengono segnalate.
Prevenire i modelli di domande senza risposta
Se i rispondenti vengono segnalati per la loro tendenza a saltare le domande, ciò potrebbe essere dovuto a quanto segue:
- Le domande non sono pertinenti per il pubblico: La scelta del campione è un passo estremamente importante nella conduzione di una ricerca. Se si distribuisce il sondaggio a un pubblico molto generico, si può finire per porre domande a cui il pubblico non ha modo di rispondere. Ad esempio, se si sta conducendo un sondaggio su una popolazione in merito all’ergonomia dell’area di lavoro, probabilmente non si dovrebbero includere gli intervistati che al momento sono disoccupati. Se non avete il controllo sul vostro campione di distribuzione, prendete in considerazione la possibilità di impostare delle esclusioni per rimuovere i rispondenti non pertinenti.
- Le vostre domande non sono chiare: potreste porre le domande giuste, ma la vostra formulazione potrebbe essere un po' confusa per i rispondenti. Provate a riscrivere queste domande per renderle più brevi e chiare possibile. Assicuratevi di usare la voce attiva invece di quella passiva.
L'intervistato sta deliberatamente cercando di concludere il sondaggio il prima possibile: Questo può essere indicato anche dall'uso di testo ambiguo e di linearizzazioni. Per incoraggiare i rispondenti a rispondere a tutte le domande del sondaggio, considerate la possibilità di aggiungere una convalida alle vostre domande. È possibile obbligare i rispondenti a rispondere a ogni domanda, oppure far sì che un messaggio chieda loro di tornare alle domande non risposte quando terminano una pagina del sondaggio.
Consiglio Q: È importante anche valutare se la stanchezza degli intervistati possa rappresentare un fattore determinante.
Segnalazione di Risposte con uno schema di domande senza risposta
Sebbene ExpertReview non segnali questo tipo di risposte per impostazione predefinita, è possibile attivarlo con i seguenti passaggi:
Assicurati di trovarti nella sezione Dati della scheda Dati e analisi.
Fare clic su Qualità delle risposte.
Scorri fino alla sezione " Domande senza risposta".
Attiva l'impostazione.
Se non si desidera contrassegnare le risposte in base a questa metrica, è possibile disattivare questa impostazione utilizzando gli stessi passaggi. Quando attivi questa analisi, essa si applica solo al sondaggio in cui ti trovi attualmente, non a tutti i sondaggi del tuo account; in questo modo puoi personalizzare l'analisi della qualità delle risposte in base alle tue esigenze.
Domande di identificazione a cui gli intervistati non hanno risposto
È possibile ottenere informazioni più specifiche su quali domande sono state saltate e su quale percentuale di domande del sondaggio è rimasta senza risposta, indipendentemente dal fatto che la risposta sia stata segnalata. Per visualizzare i dati direttamente all'interno di Qualtrics:
- Q_Percentuale senza risposta: La percentuale di domande del sondaggio per le quali il rispondente non ha fornito una risposta. Solo le domande che hanno visto sono conteggiate per questo valore. Questo dato viene presentato come rapporto. Ad esempio, il 100% corrisponde a 1 e il 66,7% corrisponde a 0,667.
- Q_Domande senza risposta: Le domande specifiche a cui non è stata data risposta. Si tratta di un QID interno, non del numero della domanda modificabile. Consiglio q: Per trovare i QID, fare clic sul menu a tendina Strumenti nell'editor del sondaggio e selezionare Mostra ID interni.
Consiglio Q: anche senza seguire le indicazioni di cui sopra, Q_UnansweredQuestions e Q_UnansweredPercentage saranno inclusi nelle esportazioni di dati. Questi campi possono essere utilizzati anche per filtrare i dati.
Semplificazione
Attenzione: Questa funzione non è attualmente disponibile per tutti i clienti.
L'allineamento è la pratica di fornire le stesse risposte lungo una tabella matrice per superare rapidamente le domande. Ad esempio, un intervistato può scegliere sempre la prima risposta a ogni affermazione, indipendentemente da come si sente.
Gli intervistati potrebbero rispondere in modo meccanico perché sono stanchi, soprattutto se non sono né dei " speeder " né dei "bot" e le loro risposte all'inizio del sondaggio erano normali.
Segnalazione delle Risposte che contengono linee guida
Sebbene ExpertReview non segnali questo tipo di risposte per impostazione predefinita, è possibile attivarlo con i seguenti passaggi:
Assicurati di trovarti nella sezione Dati della scheda Dati e analisi.
Fare clic su Qualità delle risposte.
Scorri fino alla sezione “Straightlining”.
Enable the setting.
Se non si desidera contrassegnare le risposte in base a questa metrica, è possibile disattivare questa impostazione utilizzando gli stessi passaggi. Quando attivi questa analisi, essa si applica solo al sondaggio in cui ti trovi attualmente, non a tutti i sondaggi del tuo account; in questo modo puoi personalizzare l'analisi della qualità delle risposte in base alle tue esigenze.
Identificare le domande in cui gli intervistati hanno risposto in modo diretto
Per essere segnalato come straightlining, un intervistato deve avere entrambe le caratteristiche:
- Matrice di almeno 3 tabelle a matrice di likert (non le affermazioni, ma le domande intere)
- Ha regolato l'80% delle tabelle della matrice nel sondaggio
Tuttavia, se desideri effettuare un’analisi più approfondita, puoi valutare il numero di matrici contrassegnate con una linea retta e quali domande sono state contrassegnate in questo modo. Per scremare i dati direttamente all'interno di Qualtrics:
- Q_StraightliningCount: Il numero di domande della matrice che l'intervistato ha risposto in modo diretto.
- Q_StraightliningPercentage: Percentuale di tabelle di matrici nel sondaggio che il rispondente ha rettificato. Questo dato viene presentato come rapporto. Ad esempio, il 100% corrisponde a 1 e il 66,7% corrisponde a 0,667.
- Q_StraightliningQuestions: Le domande specifiche che sono state rettificate. Si tratta di un QID interno, non del numero della domanda modificabile. Consiglio q: per trovare i QID, numerare automaticamente le domande con la numerazione interna degli ID. È sempre possibile modificare la numerazione in un secondo momento o scegliere di non pubblicare queste modifiche.
Consiglio q: anche senza seguire le indicazioni di cui sopra, CONSIGLIO Q, Percentuale Q e Domande Q saranno inclusi nelle esportazioni di dati. Questi campi possono essere utilizzati anche per filtrare i dati.
È fantastico! Grazie per il tuo feedback!
Grazie per il tuo feedback!