Toen Tony Richards, het hoofd van het betalingsbeleid bij de Reserve Bank of Australia (RBA), de recente onderzoeksresultaten van Finder's Crypto Report las waarin stond dat bijna een op de vijf Australiërs crypto bezat, geloofde hij het geen moment.
De resultaten waren echter al op grote schaal gepubliceerd in het hele land en haalden wekenlang de krantenkoppen. Ze hebben zelfs hun weg gevonden naar de recente Senaatscommissie voor Australië als het eindrapport van een technologie- en financieel centrum in oktober.
Onze beste handelsrobots
Welkom in de statistisch dubieuze wereld van cryptocurrency-enquêtes - een gemakkelijke manier voor bedrijven om publiciteit te krijgen door enquêteresultaten te verspreiden, maar niet per se een geweldige manier om op de hoogte te blijven.
De Finder-enquête van augustus beweerde dat 17% van de Australiërs ten minste één cryptocurrency bezit - 9% bezit Bitcoin, 8% bezit Ether en 5% bezit Dogecoin.
Is het cijfer aannemelijk?
Richards trok deze cijfers in twijfel in zijn toespraak tot de Australia Corporate Treasury Association op 18 november en zei dat hij ze "enigszins onwaarschijnlijk" vindt.
"Ik kan het niet helpen te denken dat de online-enquêtes waarop ze zijn gebaseerd misschien niet representatief zijn voor de bevolking", zei hij.
Hij verwees naar "belangrijke delen van de bevolking", waaronder ouderen, mensen die in regionale gebieden wonen en mensen zonder betrouwbare toegang tot internet, die online enquêtepanels "niet goed vastleggen".
Zijn punt weerspiegelt een soortgelijk gevoel dat geschetst is door Dr. Chittaranjan Andrade in zijn 2020-rapport voor de Indian Journal of Psychological Medicine, waar hij beweert dat online-enquêtes vaak niet representatief zijn, ongeacht het onderwerp.
Online-enquêtes worden alleen ingevuld door mensen die “voldoende bevooroordeeld zijn om in het onderwerp geïnteresseerd te zijn; waarom zouden ze anders de tijd en moeite nemen om te reageren?” Hij schreef.
Maar het hoofd van consumentenonderzoek bij Finder, Graham Cooke, verdedigde de methodologie en vertelde Cointelegraph:
"De respondenten worden geselecteerd op basis van leeftijd, geslacht en locatie om een steekproef samen te stellen die een getrouwe weergave is van de resultaten die van een volledig nationaal onderzoek zouden worden verwacht."
"We zijn ervan overtuigd dat dit een betrouwbare steekproef oplevert die representatief is voor de populatie", voegde hij eraan toe.
In het 15 pagina's tellende rapport met een samenvatting van de onderzoeksresultaten, zijn er slechts een paar regels aan het einde om de methodologie uit te leggen. Er staat: "Finder's Consumer Sentiment Tracker is een doorlopend landelijk representatief onderzoek onder 1.000 Australiërs per maand, met meer dan 27.400 respondenten tussen mei 2019 en juli 2021."
Het onderzoek is uitgevoerd door Qualtrics, een bedrijf in Systems Applications and Products in Data Processing (SAP). De website van Qualtrics pronkt met: "In slechts tien weken heeft Finder de merkbekendheid met 23 procent vergroot", maar er was geen aanvullende informatie over de onderzoeksmethodologie en verstrekte geen informatie op verzoek van Cointelegraph.
Een woordvoerder van Finder kon aan Cointelegraph bevestigen dat: “Qualtrics respondenten uit verschillende panels verzamelt en op verschillende manieren kan worden gestimuleerd. Sommigen krijgen een kleine vergoeding voor hun deelname, sommigen verdienen bijvoorbeeld een donatie aan een goed doel.”
Verschillende onderzoeken hebben schattingen van 2 miljoen mensen uit elkaar
Dit is niet om de enquête van Finder uit te kiezen voor specifieke kritiek: er lijkt elke dag een nieuwe enquête te zijn en vaak staan hun bevindingen op gespannen voet met elkaar.
Neem de YouGov-enquête in opdracht van de Australische crypto-uitwisseling Swyftx, waaruit bleek dat het aantal Australiërs dat crypto bezit dichter bij 25% ligt. De enquête van juli verzamelde reacties van 2.768 volwassen Australiërs en de cijfers werden gewogen op basis van schattingen van het Australische Bureau voor de Statistiek. Dit onderzoek bleek in overeenstemming te zijn met de Code van de Australische Polling Council.
Beide onderzoeken kunnen echter niet correct zijn. De bevolking van Australië is 25,69 miljoen. Dit betekent dat Finder's 17% van de Australische bevolking gelijk staat aan ongeveer 4,37 miljoen mensen. Ondertussen is de 25% van Swyftx ongeveer 6,42 miljoen mensen.
Het verschil tussen de twee schattingen vertaalt zich naar iets meer dan twee miljoen mensen - dat is meer dan de hele bevolking van Zuid-Australië.
De cijfers lijken ook niet te worden weerspiegeld op lokale platforms. Crypto-handelsplatform Binance Australia vertelde Cointelegraph dat het 700.000 gebruikers had, Easy Crypto Australia zei dat het ongeveer 15.000 gebruikers had, Swyftx heeft 470.000 gebruikers (veel uit het buitenland). BTC Markets heeft meer dan 330.000 Australische gebruikers en de site van Independent Reserve claimt 200.000 gebruikers.
Digital Surge, eToro, Coinspot en Coinmama hebben niet gereageerd met gebruikersnummers.
Niet alle Australiërs gebruiken natuurlijk een lokale beurs om hun crypto te verhandelen, maar aan de andere kant is een aanzienlijk deel van de gebruikers aangemeld bij meerdere lokale beurzen. Er lijkt een mismatch te zijn van honderdduizenden, zo niet miljoenen, tussen enquêteresultaten en exchange-accounts.
Dat gezegd hebbende, zei Jonathon Miller, de Australische directeur Kraken Exchange, dat zijn platform in mei met vergelijkbare cijfers als Finder kwam in YouGov-marktonderzoek.
De steekproef in dat onderzoek omvatte 1.027 Australiërs van 18 jaar en ouder, de gegevens gewogen op leeftijd, geslacht en regio om de laatste schattingen van de ABS-populatie weer te geven.
Het bleek dat een op de vijf (19%) Aussies een cryptocurrency heeft gehad of momenteel bezit, en 14% (2,78 miljoen) heeft momenteel een cryptoportfolio.
Tegen de Finder-enquête zei Miller: "Ik denk niet dat het zo ver weg zal zijn. Het punt is dat deze onderzoeken waarschijnlijk representatief zijn.”
“Als die cijfers vandaag niet precies kloppen, zijn ze dat morgen wel. Ik denk dat het waar is dat een op de vijf Australiërs crypto heeft.”
Hoeveel BTC moet ik u betalen om te zeggen dat u BTC vertrouwt?
Een probleem dat van invloed kan zijn op de resultaten van cryptogerelateerde enquêtes, is dat respondenten van sommige van deze enquêtes daadwerkelijk in crypto worden betaald.
Op 18 november beweerde een Premise Data-enquête onder 11.000 deelnemers in 76 landen dat 41% van de mensen wereldwijd Bitcoin (BTC) vertrouwt boven lokale valuta.
De vangst was dat een afzonderlijk onderzoek van Premise's "bijdragers" twee maanden eerder meldde dat 23% van zijn bijdragersbestand is betaald in BTC, en sinds 2016 heeft het bedrijf voor gegevensverzameling via Coinbase meer dan $ 1 miljoen in Bitcoin uitbetaald aan enquêtedeelnemers in 137 landen wereldwijd.
Principal Research Fellow aan het Melbourne Institute of Applied Economic and Social Research Nicole Watson vertelde Cointelegraph dat "iemand Bitcoin betalen om een enquête over cryptocurrency in te vullen, het resultaat zou vertekenen."
"Mensen die weten wat Bitcoin is en wat willen, zullen eerder deelnemen", zei ze. Kortom, ze zullen geen afspiegeling zijn van de bredere bevolking.
Cointelegraph nam contact op met Premise over zijn onderzoeksmethodologie, maar ontving geen reactie.
Wat maakt een betrouwbaar onderzoek?
Volgens Watson zijn online-enquêtes niet representatief voor de bredere bevolking.
"Het online rekruteren van een steekproef zal de steekproef waarschijnlijk vertekenen naar mensen die meer tijd online doorbrengen, bepaalde websites bezoeken of bepaalde apps gebruiken, afhankelijk van waar de uitnodiging om deel te nemen werd geplaatst en wie deze zou kunnen zien."
Ze legde uit dat de deelname van iemand aan een enquête kan worden beïnvloed door wie de enquête uitvoert, waar het over gaat, hoe lang het zal duren en welke (eventuele) prikkels worden aangeboden - dit alles kan de resultaten vertekenen.
"Voor een nieuwe technologie als cryptocurrency kun je zien hoeveel van deze factoren kunnen leiden tot een vertekend resultaat."
Voor onderzoek dat in Australië is uitgevoerd, is een goede manier om te bepalen of de bevindingen betrouwbaar zijn, te controleren of het een 'Australian Polling Council Quality Mark' heeft gekregen. In het VK kun je kijken of het peilingsbedrijf lid is van de British Polling Council (BPC) en in de VS van de National Council on Public Polls.
De Australian Polling Council zegt dat elke enquête of peiling die zijn gewicht waard is, een 'lange methodologische verklaring' moet bevatten, inclusief aanvullende informatie zoals wegingsmethoden, effectieve steekproefomvang en foutenmarge.
Lees verder met CoinTelegraph
