"Essas descobertas fornecem evidências claras de que os dados coletados no MTurk simplesmente não podem ser confiáveis." Pesquisadores há muito tempo discutem se os dados da pesquisa Amazon Mechanical Turk (MTurk) podem ser confiáveis. Este artigo adota uma abordagem simples para avaliar a qualidade dos dados atualmente produzidos pelo MTurk. O autor apresenta aos respondentes pares de perguntas que são obviamente contraditórias. Por exemplo: "Eu falo muito" e "Raramente falo." Ou: "Eu gosto de ordem" e "Eu anseio pelo caos." Se as pessoas estão prestando atenção, concordar com uma deveria significar discordar da outra. No mínimo, as duas respostas não deveriam se encaixar. A mesma pesquisa exata é realizada em três plataformas: Prolific, CloudResearch Connect e MTurk. Em Prolific e Connect, as coisas se comportam normalmente: a maioria dos itens contraditórios está correlacionada negativamente, exatamente como o bom senso prevê. No MTurk, porém, os resultados são o oposto. Mais de 96% desses pares claramente opostos de itens estão positivamente correlacionados. Em outras palavras, muitos entrevistados dão respostas semelhantes a afirmações que literalmente se contradizem. Os autores então tentam o que a maioria dos pesquisadores faria a seguir: - restringir a amostra a trabalhadores MTurk "de alta reputação" - aplicar os testes padrão de atenção - lançar rápidos e retos...