Efeitos dos <i>Softwares</i> de Análise de Dados Qualitativos na Qualidade de Pesquisas

Souza, Rômulo Andrade de; Dias, Gabriela Figueiredo; Silva, Rafael Rodrigues da; Ramos, Anatália Saraiva Martins

doi:10.1590/1982-7849rac2019170357

person Rômulo Andrade de Souza Neto

schoolUniversidade Federal do Rio Grande do Norte, Programa de Pós-graduação em Administração, Natal, RN, Brasil

0000-0003-1810-939X

person Gabriela Figueiredo Dias

schoolUniversidade Federal do Rio Grande do Norte, Programa de Pós-graduação em Administração, Natal, RN, Brasil

0000-0003-1912-5148

person Rafael Rodrigues da Silva

schoolUniversidade Federal do Rio Grande do Norte, Programa de Pós-graduação em Administração, Natal, RN, Brasil

0000-0002-1836-7340

person Anatália Saraiva Martins Ramos

schoolUniversidade Federal do Rio Grande do Norte, Programa de Pós-graduação em Administração, Natal, RN, Brasil

0000-0002-8578-2018

Autores

Rômulo Andrade de Souza Neto Programa de Pós-Graduação em Administração, Edifício do Centro de Ciências Sociais Aplicadas, Campus Universitário, Lagoa Nova, 59078-970, Natal, RN, Brasil E-mail: romuloandrade@ufrn.edu.br

Gabriela Figueiredo Dias Programa de Pós-Graduação em Administração, Edifício do Centro de Ciências Sociais Aplicadas, Campus Universitário, Lagoa Nova, 59078-970, Natal, RN, Brasil E-mail: gabrielafigr.dias@gmail.com

Rafael Rodrigues da Silva Programa de Pós-Graduação em Administração, Edifício do Centro de Ciências Sociais Aplicadas, Campus Universitário, Lagoa Nova, 59078-970, Natal, RN, Brasil E-mail: rafaelrodges@outlook.com

Anatália Saraiva Martins Ramos Programa de Pós-Graduação em Administração, Edifício do Centro de Ciências Sociais Aplicadas, Campus Universitário, Lagoa Nova, 59078-970, Natal, RN, Brasil E-mail: anataliasaraiva@gmail.com

Contribuições

1º autor: Definição da questão de pesquisa; Construção da fundamentação teórica; Desenho da estratégia metodológica; Coleta e análise dos dados; Elaboração do texto e; Revisão final.

2º autor: Definição da questão de pesquisa; Construção da fundamentação teórica; Desenho da estratégia metodológica; Coleta e análise dos dados; Elaboração do texto e; Revisão final.

3º autor: Definição da questão de pesquisa; Construção da fundamentação teórica; Desenho da estratégia metodológica; Coleta e análise dos dados; Elaboração do texto e; Revisão final.

4º autor: Definição da questão de pesquisa; Construção da fundamentação teórica; Desenho da estratégia metodológica; Coleta e análise dos dados; Elaboração do texto e; Revisão final

Conflito de Interesses

Os autores informaram que não há conflito de interesses.

Verificação de Plágio

A RAC mantém a prática de submeter todos os documentos aprovados para publicação à verificação de plágio, mediante o emprego de ferramentas específicas, e.g.: iThenticate.

Material Suplementar

Todos os dados e materiais foram disponibilizados publicamente por meio da plataforma Mendeley e podem ser acessados em: Andrade de Souza Neto, Rômulo; Dias, Gabriela; Silva, Rafael; Ramos, Anatalia (2019),“Data for: Effects of Qualitative Data Analysis Softwares on the Quality of Researches published by RAC-Revista de Administração Contemporânea”, Mendeley Data,v1. Recuperado de http://dx.doi.org/10.17632/fcm3bmk7v5.1

Critério de qualidade	Definição
Confirmabilidade	Medida em que os resultados da pesquisa expressam as ideias e experiências dos sujeitos investigados, ao invés das preferências do pesquisador. Se existem vieses inevitáveis, o pesquisador deve explicitá-los no relatório.
Credibilidade	Medida em que resultados do estudo são coerentes, fazem sentido e são acreditáveis às pessoas estudadas e aos leitores. Os resultados devem ser um retrato fiel e coerente da realidade investigada.
Dependabilidade/ Consistência	Medida em que o processo da pesquisa é consistente e, razoavelmente, estável ao longo do tempo e entre pesquisadores e métodos. As mudanças ocorridas devem ser indicadas e justificadas pelo pesquisador.
Transferibilidade	Medida em que os resultados de um estudo podem ser aplicados a outros contextos. O pesquisador deve fornecer dados descritivos suficientes para permitir que o leitor julgue a transferência dos resultados para outros contextos.

Categoria	Descrição	Estratégias agrupadas
Coerência do pesquisador	Coerência e a clareza do posicionamento do pesquisador na pesquisa.	Adequação do referencial, análise comparativa constante, coerência estrutural, estabelecimento de coerência, esclarecimento do viés do pesquisador, reflexividade.
Construção do corpus da pesquisa	Representatividade dos dados e tamanho da amostra.	Amostra teórica, casos negativos, indução analítica, máxima variação.
Descrição detalhada da investigação	Descrição clara dos procedimentos realizados (coleta, análise e interpretação dos dados).	Descrição densa e rica, descrição grossa, procedimento de codificação, trilha de auditagem.
Envolvimento com o campo	Engajamento do pesquisador na coleta dos dados.	Coleta de dados grossos, envolvimento prolongado com o campo, estabelecimento da autoridade do pesquisador, observação persistente, riqueza dos dados, tempo de amostra.
Validação dos respondentes	Validação dos resultados com os participantes/ informantes da pesquisa.	Checagem pelos membros, checagem pelos participantes, validação dos participantes, validação dos respondentes.
Validação por pesquisadores	Revisão das análises e resultados por atores internos e/ou externos à pesquisa.	Auditoria de confirmabilidade, auditoria de dependabilidade, auditoria de expert, auditoria externa, exame por pares, validação pelos pares.
Triangulação	Uso de múltiplas e diferentes fontes, métodos, investigadores e teorias.	Comparação da amostra com dados demográficos, coleta de materiais adequados, divisão dos investigadores, triangulação, técnicas de entrevista.

Critérios	Confirmabilidade	Credibilidade	Dependabilidade/ consistência	Transferibilidade
Estratégias	Confirmabilidade	Credibilidade	Dependabilidade/ consistência	Transferibilidade
Coerência do pesquisador	1, 2, 3* e 4*	1, 2, 3, 4 e 5*	4* e 5*	-
*Construção do corpus* da pesquisa**	-	3* e 4*	4*	1, 2, 3, 4 e 5*
Descrição detalhada da investigação	1, 3 e 4*	3* e 4*	1, 2, 3* e 5*	1, 2, 3, 4 e 5*
Envolvimento com o campo	-	1, 2, 3* e 5*	-	2*
Validação dos respondentes	-	1, 2, 3, 4 e 5*	-	-
Validação por pesquisadores	1* e 2*	1, 2, 3* e 5*	1, 2, 4* e 5*	-
Triangulação	1, 2, 3*	1, 2, 3* e 5*	1, 2, 3* e 5*	-

Tipo de efeito	Descrição do efeito	Autor(es)	Estratégia afetada
Negativo	Limita a criatividade dos pesquisadores ao restringir o processo de análise em torno das ferramentas permitidas	Goble, Austin, Larsen, Kreitzer e Brintnell (2012), Holbrook e Butcher (1996), MacMillan (2005) e Morison e Moir (1998)	Coerência do pesquisador
	Distancia os pesquisadores dos dados ao apresentar os dados (listas de citações, códigos e fragmentos de textos) fora de seus contextos	Goble et al. (2012), Holbrook e Butcher (1996), MacMillan (2005) e Morison e Moir (1998)	Coerência do pesquisador
	Prejudica a reflexividade ao mecanizar o processo de análise e promover a ideia de que esse processo é linear e rápido	Woods, Paulus, Aktins e Macklin (2016) e Goble et al. (2012)	Coerência do pesquisador
Positivo	Estimula a reflexividade ao disponibilizar ferramentas que permitem registrar reflexões (memo), visualizar as relações entre os dados e realizar experimentos com os dados	Aljunid (1996), Ang, Embi e Yunus (2016), Bazeley e Jackson (2013), Cope (2014), Gibbs (2014), Merriam e Tisdell (2016), Miles et al. (2014), Rambaree (2007), Sinkovics e Alfoldi (2012), Taft (1993), Tracy (2013) e Woods, Macklin e Lewis (2016)	Coerência do pesquisador
	Estimula a criatividade ao gerenciar as tarefas mecânicas da análise e liberar tempo para o pensar criativamente	Bazeley e Jackson (2013), Cope (2014), Merriam e Tisdell (2016), Morison e Moir (1998), Taft (1993), Tracy (2013) e Woods, Macklin et al. (2016)	Coerência do pesquisador
	Facilita a identificação da saturação teórica e de casos desviantes ao disponibilizar ferramentas de comparação dos dados e de representação gráfica	Richards (2002)	Construção do corpus da pesquisa
	Melhora a transparência do processo de pesquisa ao registrar automaticamente o histórico das atividades realizadas pelo pesquisador (trilhas de auditagem)	Ang et al. (2016), Flick (2009), Gibbs (2014), Kelle (1997), Richards (2002), Sinkovics e Alfoldi (2012) e Wolfe, Gephart e Johnson (1993)	Descrição detalhada da investigação
	Facilita o compartilhamento de informações com terceiros ao produzir relatórios automáticos dos resultados da pesquisa	Ang et al. (2016)	Validação dos respondentes
	Melhora o trabalho em equipe ao possibilitar o compartilhamento on-line do banco de dados e da análise entre os pesquisadores	Bazeley e Jackson (2013), Merriam e Tisdell (2016), Rambaree (2007), Sinkovics e Alfoldi (2012), Stewart (2012), Taft (1993) e Tracy (2013)	Validação por pesquisadores
	Permite analisar diferentes tipos de dados (documentos, imagens, vídeos, transcrições de entrevistas e outros), que não poderiam ser analisados sem o seu uso	Ang et al. (2016), Flick (2009), Gibbs (2014), Rambaree (2007), Saldaña (2009), Sinkovics e Alfoldi (2012), Stewart (2012), Wolfe et al. (1993) e Tracy (2013)	Triangulação

Perguntas	Estratégias de qualidade
1. O que levou você a usar o QDAS?	Perguntas introdutórias
2. Compare sua experiência de pesquisa sem e com o auxílio de QDAS.
3. Para você, o que confere qualidade à uma pesquisa qualitativa?
Checklist	------------
4. Comparando as duas experiências, você acredita que o uso do software influenciou para o uso de mais de uma fonte de dados/ métodos/ teorias/ investigadores? Por quê?	Triangulação
5. Comparando as duas experiências de análise, em qual você considera que conseguiu refletir melhor sobre os dados e os resultados? Por quê?	Reflexividade
6. Na sua opinião, qual o papel do software na identificação da saturação teórica?	Construção do corpus da pesquisa
7. Comparando as duas experiências, em qual você conseguiu detalhar melhor a metodologia de pesquisa realizada? Por quê/ como?	Descrição clara, rica e detalhada
8. A validação da análise pelos pares teve alguma relação com o uso do QDAS? Se sim, explique.	Validação com os pares
9. Você relaciona o uso do software com o surgimento de resultados inesperados? Por quê?	Surpresa na pesquisa
10. Na sua opinião, o uso do QDAS confere qualidade às pesquisas qualitativas? Por quê?	------------
11. Imagine a pesquisa que usou software, o que mudaria se você não tivesse usado?	------------
12. Você pretende utilizar o QDAS nas suas próximas pesquisas?	------------

Nome	Idade	Formação	Região do doutoramento	Software	Motivo da adoção	Tempo de uso	Técnica de Análise
Alice	25	Doutoranda	Nordeste	ATLAS.ti^®, NVivo^®	Limitação do método manual	3,5 anos	Análise de Conteúdo
Dinah	29	Doutoranda	Nordeste	ATLAS.ti^®	Disciplina	6 meses	Análise de Conteúdo
Laura	40	Doutora	Nordeste	NVivo^®	Limitação do método manual	3 meses	Análise de conteúdo
Levi	32	Doutorando	Nordeste	QDA Miner^®	Disciplina	1 ano	Análise de conteúdo
Lívia	34	Doutora	Sudeste	NVivo^®, Alceste^®	Grupo de pesquisa	2 anos	Análise de Conteúdo
Luan	43	Doutorando	Sudeste	ATLAS.ti^®, NVivo^®	Limitação do método manual	1 ano	Análise de conteúdo
Lucas	27	Doutorando	Sudeste	ATLAS.ti^®	Limitação do método manual	10 meses	Análise de conteúdo
Marcos	39	Doutorando	Sudeste	NVivo^®	Limitação do método manual	1 ano	Análise de conteúdo
Mônica	56	Doutoranda	Sudeste	ATLAS.ti^®	Disciplina	3 meses	Análise de conteúdo
Théo	35	Doutor	Nordeste	ATLAS.ti^®	Disciplina	1 ano	Análise de conteúdo

	Ali.	Din.	Lau.	Lev.	Lív.	Lua.	Luc.	Mar.	Môn.	Thé.	Total
Coerência do pesquisador	+	+	+	+	+ \| -	+	+		+	+	9
Construção do corpus da pesquisa	+		+			+	+	+		+	6
Descrição detalhada da investigação	+						+	+	+		4
Envolvimento com o campo											0
Validação dos respondentes	+				+	+					3
Validação por pesquisadores	+			+		+	+	+	+		6
Triangulação	+		+	+	+	+	+	+			7
Total	6	1	3	3	3	5	5	4	3	2

[1] Nota. Fonte: Elaborada pelos autores a partir de Flick, U. (2009). Introdução à pesquisa qualitativa (3a ed.). Porto Alegre: Artmed.; Guba, E. G. (1981). Criteria for assessing the trustworthiness of naturalistic inquiries. Educational Communication and Tecnology, 29(2), 75-91. Retrieved from https://link.springer.com/article/10.1007/BF02766777; Krefting, L. (1991). Rigor in qualitative research: the assessment of trustworthiness. The American Journal of Occupational Therapy, 45(3), 214-222. https://doi.org/doi:10.5014/ajot.45.3.214; Lincoln, Y. S., & Guba, E. G. (1985). Naturalistic inquiry. Newbury Park, CA: SAGE.; Merriam, S. B., & Tisdell, E. J. (2016). Qualitative research: a guide to design and implementation (4th ed.). San Francisco: Jossey-Bass.; Miles, M. B., Huberman, A. M., & Saldana, J. (2014). Qualitative data analysis: A methods sourcebook (3rd ed.). Thousand Oaks: SAGE.; Shenton, A. K. (2004). Strategies for ensuring trustworthiness in qualitative research projects. Education for Information, 22(2), 63-75. https://doi.org/10.3233/EFI-2004-22201

[TFN1] Apesar da falta de consenso quanto aos critérios, os estudos concordam que existe um método para julgar a capacidade das pesquisas atenderem tais critérios: verificar a adoção de estratégias de qualidade (Creswell, 2014; Flick, 2009; Gibbs, 2009; Guba, 1981; Krefting, 1991; Lincoln & Guba, 1985; Merriam & Tisdell, 2016; Miles et al., 2014; Patton, 2002; Shenton, 2004; Tracy, 2013; Yin, 2011). Estratégias de qualidade são procedimentos de coleta, análise e apresentação de dados aceitos na comunidade acadêmica para documentar a precisão dos estudos (Creswell, 2014). A lógica do método citado é que cada estratégia afeta elementos da pesquisa relacionados aos critérios de qualidade específicos, de forma que a verificação das estratégias adotadas indica se os critérios foram atendidos (Guba, 1981; Krefting, 1991; Merriam & Tisdell, 2016; Miles et al., 2014; Shenton, 2004).

Efeitos dos Softwares de Análise de Dados Qualitativos na Qualidade de Pesquisas

Effects of Qualitative Data Analysis Softwares in the Quality of Researches