Page Comparison

1.         Congruity between the stated philosophical perspective and the research methodology

Does the report clearly state the philosophical or theoretical premises on which the study is based? Does the report clearly state the methodological approach adopted on which the study is based? Is there congruence between the two? For example:

A report may state that the study adopted a critical perspective and participatory action research methodology was followed. Here there is congruence between a critical view (focusing on knowledge arising out of critique, action and reflection) and action research (an approach that focuses on firstly working with groups to reflect on issues or practices, then considering how they could be different; then acting to create a change; and finally identifying new knowledge arising out of the action taken). However, a report may state that the study adopted an interpretive perspective and used survey methodology. Here there is incongruence between an interpretive view (focusing on knowledge arising out of studying what phenomena mean to individuals or groups) and surveys (an approach that focuses on asking standard questions to a defined study population); a report may state that the study was qualitative or used qualitative methodology (such statements do not demonstrate rigor in design) or make no statement on philosophical orientation or methodology.

2.        Congruity between the research methodology and the research question or objectives

Is the study methodology appropriate for addressing the research question? For example:
A report may state that the research question was to seek understandings of the meaning of pain in a group of people with rheumatoid arthritis and that a phenomenological approach was taken. Here, there is congruity between this question and the methodology. A report may state that the research question was to establish the effects of counselling on the severity of pain experience and that an ethnographic approach was pursued. A question that tries to establish cause-and effect cannot be addressed by using an ethnographic approach (as ethnography sets out to develop understandings of cultural practices) and thus, this would be incongruent.

3.        Congruity between the research methodology and the methods used to collect data

Are the data collection methods appropriate to the methodology? For example:

A report may state that the study pursued a phenomenological approach and data was collected through phenomenological interviews. There is congruence between the methodology and data collection; a report may state that the study pursued a phenomenological approach and data was collected through a postal questionnaire. There is incongruence between the methodology and data collection here as phenomenology seeks to elicit rich descriptions of the experience of a phenomena that cannot be achieved through seeking written responses to standardized questions. There is congruity between the research methodology and the representation and analysis of data.

4.        Congruity between the research methodology and the representation and analysis of data

Are the data analyzed and represented in ways that are congruent with the stated methodological position? For example:

A report may state that the study pursued a phenomenological approach to explore people’s experience of grief by asking participants to describe their experiences of grief. If the text generated from asking these questions is searched to establish the meaning of grief to participants, and the meanings of all participants are included in the report findings, then this represents congruity; the same report may, however, focus only on those meanings that were common to all participants and discard single reported meanings. This would not be appropriate in phenomenological work.

5.        There is congruence between the research methodology and the interpretation of results

Are the results interpreted in ways that are appropriate to the methodology? For example:

A report may state that the study pursued a phenomenological approach to explore people’s experience of facial disfigurement and the results are used to inform practitioners about accommodating individual differences in care. There is congruence between the methodology and this approach to interpretation; a report may state that the study pursued a phenomenological approach to explore people’s experience of facial disfigurement and the results are used to generate practice checklists for assessment. There is incongruence between the methodology and this approach to interpretation as phenomenology seeks to understand the meaning of a phenomenon for the study participants and cannot be interpreted to suggest that this can be generalized to total populations to a degree where standardized assessments will have relevance across a population.

6.        Locating the researcher culturally or theoretically

Are the beliefs and values, and their potential influence on the study declared? For example:

The researcher plays a substantial role in the qualitative research process and it is important, in appraising evidence that is generated in this way, to know the researcher’s cultural and theoretical orientation. A high quality report will include a statement that clarifies this.

7.        Influence of the researcher on the research, and vice-versa, is addressed

Is the potential for the researcher to influence the study and for the potential of the research process itself to influence the researcher and her/his interpretations acknowledged and addressed? For example:

Is the relationship between the researcher and the study participants addressed? Does the researcher critically examine her/his own role and potential influence during data collection? Is it reported how the researcher responded to events that arose during the study?

8.        Representation of participants and their voices

Generally, reports should provide illustrations from the data to show the basis of their conclusions and to ensure that participants are represented in the report.

9.        Ethical approval by an appropriate body

A statement on the ethical approval process followed should be in the report.

10.    Relationship of conclusions to analysis, or interpretation of the data

This criterion concerns the relationship between the findings reported and the views or words of study participants. In appraising a paper, appraisers seek to satisfy themselves that the conclusions drawn by the research are based on the data collected; data being the text generated through observation, interviews or other processesCongruencia entre la perspectiva filosófica y la metodología de investigación

¿Se exponen claramente en el informe las premisas filosóficas o teóricas en las que se basa el estudio? ¿Establece claramente el informe el enfoque metodológico adoptado en el que se basa el estudio? ¿Hay congruencia entre ambos? Por ejemplo:

Un informe puede afirmar que el estudio adoptó una perspectiva crítica y que se siguió una metodología de investigación-acción participativa. En este caso hay congruencia entre una perspectiva crítica (centrada en el conocimiento que surge de la crítica, la acción y la reflexión) y la investigación-acción (un enfoque que se centra, en primer lugar, en trabajar con grupos para reflexionar sobre problemas o prácticas, luego considerar cómo podrían ser diferentes; a continuación, actuar para crear un cambio y, por último, identificar los nuevos conocimientos que surgen de la acción realizada). Sin embargo, un informe puede afirmar que el estudio adoptó una perspectiva interpretativa y utilizó una metodología de encuesta. Aquí hay una incongruencia entre una perspectiva interpretativa (centrada en el conocimiento que surge del estudio de lo que significan los fenómenos para los individuos o grupos) y las encuestas (un enfoque que se centra en formular preguntas estándar a una población de estudio definida); un informe puede indicar que el estudio fue cualitativo o utilizó metodología cualitativa (tales afirmaciones no demuestran rigor en el diseño) o no hacer ninguna declaración sobre la orientación filosófica o la metodología.

2. Congruencia entre la metodología de investigación y la pregunta u objetivos de la investigación

¿Es la metodología del estudio adecuada para abordar la pregunta de investigación? Por ejemplo:

En un informe puede indicarse que la pregunta de investigación era buscar la comprensión del significado del dolor en un grupo de personas con artritis reumatoide y que se adoptó un enfoque fenomenológico. En este caso, hay congruencia entre la pregunta y la metodología. Un informe puede indicar que la pregunta de investigación era establecer los efectos del asesoramiento sobre la gravedad de la experiencia del dolor y que se siguió un enfoque etnográfico. Una pregunta que intenta establecer la causa y el efecto no puede ser abordada mediante un enfoque etnográfico (ya que la etnografía se propone desarrollar la comprensión de las prácticas culturales) y, por tanto, esto sería incongruente.

3. Congruencia entre la metodología de investigación y los métodos utilizados para la recopilación de datos

¿Son los métodos de recopilación de datos adecuados para la metodología? Por ejemplo:

Un informe puede indicar que el estudio siguió un enfoque fenomenológico y que los datos se recopilaron mediante entrevistas fenomenológicas; en este caso, hay congruencia entre la metodología y la recopilación de datos. Un informe puede afirmar que el estudio siguió un enfoque fenomenológico y que los datos se recopilaron mediante un cuestionario vía correo postal. En este caso, hay incongruencia entre la metodología y la recopilación de datos, ya que la fenomenología trata de obtener descripciones ricas de la experiencia de un fenómeno que no se pueden conseguir buscando respuestas escritas a preguntas estandarizadas. Existe congruencia entre la metodología de investigación y la representación y el análisis de los datos.

4. Congruencia entre la metodología de investigación y la representación y el análisis de los datos

¿Se analizan y representan los datos de forma congruente con la posición metodológica declarada? Por ejemplo:

Un informe puede afirmar que el estudio siguió un enfoque fenomenológico para explorar la experiencia de duelo de las personas, pidiendo a los participantes que describieran sus experiencias de duelo. Si el texto generado a partir de estas preguntas se busca para establecer el significado del duelo para los participantes, y los significados de todos los participantes se incluyen en los hallazgos del informe, entonces esto representa congruencia; el mismo informe puede, sin embargo, centrarse solo en los significados que fueron comunes a todos los participantes y descartar significados reportados de manera individual. Esto no sería apropiado en un trabajo fenomenológico.

5. Congruencia entre la metodología de investigación y la interpretación de los resultados

¿Se interpretan los resultados de forma adecuada para la metodología? Por ejemplo:

Un informe puede afirmar que el estudio siguió un enfoque fenomenológico para explorar la experiencia de las personas con la desfiguración facial y los resultados se utilizan para informar a los profesionales sobre la adaptación de las diferencias individuales en la atención. Hay congruencia entre la metodología y este enfoque de interpretación; un informe puede afirmar que el estudio siguió un enfoque fenomenológico para explorar la experiencia de las personas con la desfiguración facial y que los resultados se utilizan para generar listas de verificación prácticas para la evaluación. Existe incongruencia entre la metodología y este enfoque de interpretación, ya que la fenomenología busca comprender el significado de un fenómeno para los participantes del estudio y no puede interpretarse para sugerir que esto puede generalizarse a poblaciones totales en un grado en el que las evaluaciones estandarizadas tengan relevancia en una población.

6. Situar al investigador cultural o teóricamente

¿Se declaran las creencias y valores, así como su posible influencia en el estudio? Por ejemplo:

El investigador desempeña un papel sustancial en el proceso de investigación cualitativa y es importante, a la hora de valorar la evidencia que se genera de este modo, conocer la orientación cultural y teórica del investigador. Un informe de alta calidad incluirá una declaración que lo aclare.

7. Se aborda la influencia del investigador en la investigación, y viceversa

¿Se reconoce y aborda la posibilidad de que el investigador influya en el estudio y de que el propio proceso de investigación influya en el investigador y en sus interpretaciones? Por ejemplo:

¿Se aborda la relación entre el investigador y los participantes del estudio? ¿Analiza el investigador de forma crítica su propio papel y su posible influencia durante la recopilación de datos? ¿Se informa sobre cómo respondió el investigador a los acontecimientos que surgieron durante el estudio?

8. Representación de los participantes y sus voces

Por lo general, los informes deben incluir ilustraciones a partir de los datos para mostrar la base de sus conclusiones y garantizar que los participantes estén representados en el informe.

9. Aprobación ética por parte de un organismo adecuado

El informe debe incluir una declaración sobre el proceso de aprobación ética seguido.

10. Relación de las conclusiones con el análisis o la interpretación de los datos

Este criterio se refiere a la relación entre los hallazgos comunicados y las opiniones o palabras de los participantes del estudio. Al valorar un artículo, los evaluadores tratan de cerciorarse de que las conclusiones extraídas por la investigación se basan en los datos recopilados, entendiendo por datos el texto generado mediante la observación, las entrevistas u otros procesos.