Concordancia en la evaluación de tratamientos de endodoncia preclínica: un estudio en diferentes unidades académicas
Agreement in the evaluation of preclinical endodontic treatments: a study at different academic units
ENDODONCIA EDUCACIÓN | INVESTIGACIÓN CIENTÍFICA | OPEN ACCESS | PEER-REVIEWED
Concordancia en la evaluación de tratamientos de endodoncia preclínica: un estudio en diferentes unidades académicasAgreement in the evaluation of preclinical endodontic treatments: a study at different academic units
Autor/es: Carlos Cantarini, Ricardo Luis Macchi, Denise Alfie, Fernando Goldberg
Vol: 109 | Nº 3 | Dic 2021 | Páginas: 158-163
Presentado: 24/11/2020 | Aceptado: 26/08/2021 | Publicado: 15/12/2021
DOI: https://doi.org/10.52979/raoa.1141 copiar
PDF | Citar este artículo | Volver
X Twitter | WhatsApp | Facebook | E-mail
INVESTIGACIÓN - ENDODONCIA - EDUCACIÓN
Concordancia en la evaluación de tratamientos de endodoncia preclínica: un estudio en diferentes unidades académicas
Agreement in the evaluation of preclinical endodontic treatments: a study at different academic units
Presentado: 24 de noviembre de 2020
Aceptado: 26 de agosto de 2021
Carlos Cantarini(a)
, Ricardo Luis Macchi(b) , Denise Alfie(c) , Fernando Goldberg(a,b,c)
a) Cátedra de Endodoncia I, Escuela de Odontología USAL/AOA, Facultad de Medicina, Universidad del Salvador, Buenos Aires, Argentina
b) Cátedra de Materiales Dentales, Facultad de Odontología, Universidad de Buenos Aires, Argentina
c) Cátedra de Endodoncia, Facultad de Odontología, Universidad de Buenos Aires, Argentina
Resumen
Objetivo: El objetivo del presente estudio fue analizar el grado de concordancia entre alumnos y docentes de diferentes unidades académicas en la evaluación radiográfica de tratamientos endodónticos realizados en dientes humanos “ex vivo”.
Materiales y métodos: Un docente y un alumno de grado pertenecientes a siete unidades académicas, dos cátedras de Endodoncia de Argentina y una de México, Ecuador, España, Chile y Portugal evaluaron radiográficamente 357 tratamientos endodónticos realizados “ex vivo” por estudiantes de grado. De acuerdo con su criterio individual, determinaron si cada uno de esos tratamientos podía ser considerado como correcto o incorrecto. El coeficiente Kappa fue utilizado para el análisis estadístico.
Resultados: El valor de Kappa fue entre 0,04 y 0,30 considerado como indicador de escasa concordancia y varió según la unidad académica en la que se habían registrado los datos.
Conclusión: El nivel de concordancia en la categorización del resultado de la evaluación radiográfica de tratamientos endodónticos varía entre alumnos de grado y docentes de las distintas unidades académicas.
Palabras clave: Educación en odontología, endodoncia, evaluación educacional.
Abstract
Aim: To analyse the degree of agreement between students and teachers at different academic units regarding the radiographic evaluation of endodontic treatments performed on human teeth “ex vivo”.
Materials and methods: One teacher and one student from seven Academic units, two Departments of Endodontics in Argentina and one each in Mexico, Ecuador, Spain, Chile and Portugal conducted a radiographic evaluation of 357 endodontic treatments performed by undergraduate students. According to their individual criteria, they determined whether the treatments were adequate or inadequate. Kappa coefficient was used for statistical analysis.
Results: The Kappa value was between 0.04 and 0.30, considered as an indicator of poor agreement, and varied according to the academic institution where the data had been recorded.
Conclusion: The level of agreement in classifying the results of the radiographic evaluation of endodontic treatments varies between undergraduate students and teachers at the different academic units.
Key words: Dental education, educational assessment, endodontics.
Introducción
La evaluación es un proceso complejo que incluye la subjetividad de las partes implicadas. Es necesario analizarla profundamente no solo porque pueden existir discrepancias con los resultados alcanzados durante el proceso, sino también para identificar las posibles desviaciones que se puedan haber cometido durante su transcurso.(1)
De este modo surge el interés de comparar los resultados obtenidos por docentes y alumnos de diferentes Facultades de Odontología para implementarle validez y fiabilidad.
Según Stufflebeam,(2) el objetivo primordial de la evaluación es comparar los resultados de los estudiantes con los estándares preestablecidos y determinar si estos han sido logrados. La problemática surge a partir de valorar si dichos estándares preestablecidos son universales o por el contrario reflejan solo miradas personales. Al respecto, el Comité Conjunto de Estándares para la Evaluación Educativa en su segunda edición señala que la evaluación en sí misma debe ser formativa y sumativa. Asimismo, debe ser analizada en relación con estándares ya preestablecidos para que su conducta sea guiada en forma apropiada y completa, a fin de que puedan examinarse detenidamente sus fortalezas y sus debilidades.(1)
La realización de una correcta práctica odontológica requiere de conocimientos y habilidades que son adquiridos durante la etapa estudiantil, en cada una de las asignaturas, para lograr el título que acredita y certifica el ejercicio de la profesión con idoneidad. Legalmente dicho título universitario habilita para realizar tratamientos en un amplio espectro de las diferentes disciplinas odontológicas, incluida la endodoncia, especialidad a la que nos referiremos en el presente artículo.
En la literatura se encuentran trabajos publicados que evalúan, por medio de imágenes radiográficas, la calidad de los tratamientos endodónticos realizados por alumnos de grado en el área preclínica y clínica.(3-11) Si bien entendemos que la radiografía posoperatoria no es un elemento determinante por si solo para valorar la calidad del tratamiento endodóntico, es en general el instrumento utilizado para tal fin.(12) Además, es imprescindible considerar que su análisis varía de acuerdo con quien lo realiza.(13-14)
Durante el desarrollo curricular, los estudiantes reciben información teórica y práctica sobre los estándares de calidad que deben alcanzar para considerar correcto el tratamiento endodóntico efectuado y los docentes evalúan los tratamientos realizados por los alumnos a través de las imágenes radiográficas obtenidas.
Es importante enfatizar en el modelo educativo la importancia de la evaluación formativa como una herramienta pedagógica de aprendizaje de uso continuo.(15,16)
En relación con ello, Barell(15) destaca como estrategia que los alumnos y los docentes realicen la misma evaluación por separado, empleando los mismos criterios y al final se reúnan, comparen y lleguen a un acuerdo.
El objetivo del presente estudio fue analizar el grado de concordancia entre alumnos y docentes de diferentes unidades académicas en la evaluación radiográfica de tratamientos endodónticos realizados en dientes humanos “ex vivo”.
Materiales y métodos
Se evaluaron por medio de radiografías peripicales 357 tratamientos endodónticos realizados por alumnos de grado de la Cátedra de Endodoncia I de la Escuela de Odontología de la Universidad del Salvador/Asociación Odontológica Argentina durante los años 2015, 2016 y 2017 en incisivos, caninos y premolares inferiores y superiores con uno o dos conductos radiculares, de dientes humanos que habían sido extraídos por motivos de ortodoncia o periodontales. Las piezas dentarias debían presentar raíces completamente desarrolladas, sin reabsorciones apicales, con coronas clínicas íntegras o restauración coronaria, sin tratamientos endodónticos previos y/o instrumentos fracturados.
Al inicio del año lectivo los alumnos reciben información teórica sobre los contenidos de la asignatura, luego realizan sus prácticas sobre dientes humanos extraídos y documentan cada caso con las radiografías correspondientes (preoperatoria, intraoperatoria y posoperatoria).
Para este estudio los alumnos habían realizado los tratamientos endodónticos según los pasos que se describen en los párrafos siguientes.
Los dientes fueron montados en un arco de acrílico a fin de facilitar el procedimiento endodóntico.(17)
Se tomaron radiografías preoperatorias en sentido de las caras libres y proximales y se descartaron aquellas piezas dentarias que presentaban un alto grado de complejidad (conductos calcificados, con doble curvatura, etc.). Posteriormente, se realizaron las aperturas coronarias convencionales con alta velocidad y refrigeración, localización, acceso a los conductos radiculares y cateterismo con limas tipo K (Dentsply Maillefer, Ballaigues, Suiza), seleccionadas de acuerdo al calibre del conducto radicular.
Para los incisivos y caninos superiores e inferiores la preparación del tercio cervical del conducto radicular se realizó con fresas Gates Glidden (Dentsply Maillefer). Luego se efectuó la conductometría electrónica y/o radiográfica, instrumentación manual con limas tipo K (Dentsply Maillefer) del tercio apical, con movimiento horario-antihorario. La última lima utilizada fue seleccionada según el calibre y la anatomía del conducto radicular. Posteriormente, se procedió a la técnica del paso atrás con limas tipo K (Dentsply Maillefer) de mayor calibre hasta unificar la conicidad de los diferentes tercios.
Los premolares superiores e inferiores con uno o dos conductos radiculares fueron instrumentados con el sistema ProTaper Universal (Dentsply Maillefer), siguiendo las indicaciones del fabricante. La última lima empleada fue seleccionada en relación con el calibre del conducto radicular. En todos los grupos dentarios, la irrigación se llevó a cabo con agua destilada a cada cambio de instrumento y al finalizar la preparación quirúrgica. A continuación, los conductos radiculares fueron secados con conos de papel absorbentes y posteriormente obturados con la técnica de condensación lateral o con la técnica híbrida de Tagger.(18) El sellador usado fue el cemento de Grossman (Farmadental Laboratorio Ultra D SRL, CABA, Argentina). En el transcurso del procedimiento endodóntico se tomaron las radiografías correspondientes (conductometría, conometría y prefinal). Al finalizar la obturación se cortaron los conos de gutapercha con un atacador caliente en la entrada del conducto radicular, se limpiaron las cavidades de acceso, se obturaron con CavitTM G (3M ESPE AG, Seefeld, Alemania) y se tomaron las radiografías posoperatorias en sentido ortorradial. Las radiografías pre y posoperatorias de los 357 tratamientos realizados fueron incluidas como diapositivas en una plantilla del programa de presentaciones PowerPoint (versión 2007, Microsoft®) en formato 16x9.
Se envió el material a 7 unidades académicas: dos cátedras de Endodoncia de Argentina y una de México, Ecuador, España, Chile y Portugal. A los fines del registro y análisis de los datos y del informe de los resultados, esas unidades fueron identificadas con las letras A a G, asignadas de forma aleatoria. Un docente y un alumno de cada unidad, que ya había cursado la asignatura (preclínica o clínica), evaluaron las imágenes radiográficas de los tratamientos endodónticos y de acuerdo con su juicio individual, determinaron si podían ser considerados “correctos” o “incorrectos”. No se dio ningún criterio pautado, solo se les especificó que quienes habían realizado los tratamientos endodónticos eran alumnos de grado.
Para el análisis estadístico de la concordancia entre la evaluación de cada docente y el correspondiente alumno se calculó el valor de Kappa y el respectivo intervalo de confianza (95%), así como la frecuencia relativa (porciento) de concordancia total y según categorización.
Resultados
Los resultados obtenidos se expresan en las Tablas 1 y 2.
Tabla 1. Resultados descriptivos de frecuencias
absolutas de presencia y ausencia de
concordancia entre docentes y alumnos en
la categorización para cada una de las
unidades académicas incluidas en el análisis, así
como los correspondientes valores de coeficiente
Kappa y los valores mínimos y máximos para los
intervalos de confianza (95%).
* Valores de concordancia no significativos
Tabla 2. Frecuencia relativa
(porciento sobre el total de casos)
de concordancia según categorización
de correcto e incorrecto
Puede observarse que en dos de las unidades académicas (B y D) la presencia de concordancia no es estadísticamente significativa (valor del límite inferior del intervalo asociado al valor de Kappa con signo negativo). En las restantes esa concordancia puede ser considerada estadísticamente significativa aunque de baja magnitud (valores de Kappa entre 0,07 y 0,20).
Discusión
Los resultados de frecuencia indican que en las distintas unidades académicas hubo en la mayoría de los casos concordancia entre el criterio de categorización entre docentes y alumnos (más del 60% de casos con concordancia). Sin embargo, es importante destacar que en un porcentaje de entre un cuarto y un tercio de los casos esa concordancia estuvo ausente. Si se parte de la suposición de que la categorización realizada por el docente representa una aproximación a la realidad (tal como es entendida en función de los criterios establecidos por la unidad académica), puede considerarse que es necesario en el proceso de enseñanza-aprendizaje poner mayor énfasis en la capacitación y en la evaluación de los resultados de los tratamientos, ya que ello puede derivar en decisiones clínicas incorrectas.
Asimismo, es interesante observar que ese valor porcentual está representado en su mayor parte por concordancia en la categorización del tratamiento como correcto (véase la columna correspondiente en la tabla 2). Seguramente debido a que la muestra de casos seleccionados incluía una amplia mayoría de procedimientos correctamente realizados. Esto explica los bajos valores de coeficiente Kappa obtenidos (Tabla 1), ya que este procedimiento estadístico realiza una corrección en función de la probabilidad de concordancia por azar, que es alta cuando los casos incluidos corresponden mayoritariamente a una de las categorías. Un valor de Kappa más representativo del nivel de concordancia podría obtenerse con una muestra con distribución más simétrica de casos en la categorización dicótoma (correcto/incorrecto).
También es importante destacar que en este estudio los resultados solo se refieren a la concordancia entre un alumno y uno de los docentes que se desempeñaron en su capacitación. Por ello es aventurado generalizar esta situación a la totalidad de los alumnos y docentes que forman parte de cada uno de los procesos educativos en las diferentes unidades académicas incluidas en el análisis.
El examen radiográfico posoperatorio representa la forma más utilizada por los profesionales para identificar errores o impedimentos que puedan ocurrir durante la intervención endodóntica.
En la formación universitaria tradicional el docente es el encargado de fijar los criterios y fundamentos de la evaluación radiográfica, el alumno recibe esa información, muy probablemente la repita en un examen, pero no tenemos la certeza de que su interpretación y su valoración del tratamiento realizado coincidan con la información recibida.
La evaluación que realizan los docentes de diferentes latitudes está vinculada a su propia formación académica y a la de su entorno. Prima en esas circunstancias el criterio personal de valoración de sus propios tratamientos endodónticos y el de sus alumnos. La pregunta que surge es si se puede aplicar el mismo juicio en ambas situaciones.
En base a la disparidad de resultados obtenidos en este estudio no sería posible aplicar un razonamiento adecuado que nos permita fundamentar cómo han valorado docentes y alumnos los tratamientos endodónticos analizados. De modo tal que no resulta sencillo establecer un resultado lógico de estos datos en el sentido de que el docente fija un mayor nivel de exigencia que el alumno en la evaluación radiográfica en la enseñanza de grado, o bien el alumno malinterpreta en las imágenes posoperatorias elementos que no tienen relevancia clínica e incrementa la exigencia en su autoevaluación.
Al respecto, AlRahabi et al.(19) encontraron una diferencia significativa entre la autoevaluación realizada por estudiantes de grado y docentes de la disciplina en relación con tratamientos endodónticos efectuados por los primeros. La evaluación de los estudiantes mostró una fiabilidad débil comparada con la de los docentes, por lo cual recomiendan intensificar en la educación preclínica el entrenamiento de los estudiantes en la autoevaluación de sus tratamientos.
Asimismo, estos autores consideraron diferentes ítems para la evaluación: preparación de la cavidad de acceso, determinación de la longitud de trabajo, densidad de la obturación, longitud de la obturación y su conicidad. En contraposición, en el presente estudio se establecieron solo dos niveles de categorización: correcto o incorrecto, a fin de disminuir las variables a considerar por alumnos y docentes.
Es preocupante observar publicaciones científicas de diferentes países en las que se destaca un alto porcentaje de tratamientos endodónticos realizados en pacientes juzgados como deficientes.(20-23) Esto permite suponer que además de la falta de capacitación de quienes realizaron esas prácticas, probablemente también podrían existir diferentes interpretaciones sobre qué se considera correcto e incorrecto en el análisis radiográfico final. A la luz de los resultados del presente estudio, se resalta en la discrepancia entre docentes y alumnos de la misma unidad académica la diferencia existente entre lo que se enseña y lo que el alumno aprende de ese mensaje.(24,25) En relación con ello, Ali y Feil(26) señalan que en los primeros años de grado los estudiantes tienen dificultad para juzgar con exactitud sus resultados, por lo cual las habilidades de la autoevaluación deben ser enseñadas y aprendidas. Es importante citar también en este aspecto la subjetividad del evaluador, ya mencionada en diferentes publicaciones.(13-14) Al respecto, Reit y Hollender(14) observaron que un mismo evaluador puede dar dos opiniones opuestas al analizar una misma radiografía en el transcurso del tiempo.
En relación con la interpretación radiográfica en el diagnóstico de las enfermedades periapicales, Reit(27) señala la importancia de la calibración de los observadores a fin de mejorar la concordancia. En dicho estudio se evaluaron dos grupos sometidos a diferentes métodos de calibración y otro no calibrado. El autor observó mayor concordancia en ambos grupos calibrados y menor en el no calibrado. Esta situación relacionada con los resultados obtenidos en el presente estudio nos refiere a la necesidad de establecer un estándar universal, aceptado por las diferentes unidades académicas formadoras de profesionales, a fin de generar un cuadro de valoración precisa que permita establecer qué se entiende radiográficamente por un tratamiento endodóntico correcto o incorrecto.
En ese sentido, Anijovich y Cappelletti(18) resaltan el concepto de que la evaluación constituye la oportunidad de observar los propios procesos de enseñanza para poder reconstruir los procesos de aprendizaje de los estudiantes.
Sería recomendable elaborar un protocolo de evaluación radiográfica que promueva la concordancia, con el fin de establecer estándares universales de valoración en el ámbito universitario.
Conclusión
El nivel de concordancia en la categorización del resultado de la evaluación radiográfica de tratamientos endodónticos varía entre alumnos de grado y docentes de las distintas unidades académicas.
Declaración de conflicto de intereses: Los autores declaran no tener conflicto de intereses en relación con este artículo científico.
Fuentes de financiamiento: Este estudio fue financiado exclusivamente por los autores.
Contribución de roles de autoría: CC y FG contribuyeron en la concepción de la idea y el diseño del estudio; CC, RLM, DA y FG participaron en el proceso de investigación y recolección de los datos; CC y FG contribuyeron en el análisis e interpretación de los datos; todos los autores contribuyeron en la redacción del artículo y aprobaron la versión final para ser publicada.
Contacto:
Fernando Goldberg
fgoldberg@fibertel.com.ar
Gascón 1205, dpto. “A” (C1181ACT)
Ciudad Autónoma de Buenos Aires, Argentina
Referencias
- Fournier, D. M. Review of the program evaluation standards: how to assess evaluations of educational programs, by The Joint Committee on Standards for Educational Evaluation. J Educ Meas 1994 [citado el 2 de noviembre de 2020];31:363-67. Disponible en: http://www.jstor.org/stable/1435400
- Stufflebeam DL. Evaluation Models. New Directions for Evaluation 2001;89:1-106. https://doi.org/10.1002/ev.3
- Hayes SJ, Gibson M, Hammond M, Bryant ST, Dummer MH. An audit of root canal treatment performed by undergraduate students. Int Endod J 2001;34:501-505. https://doi.org/10.1046/j.1365-2591.2001.00421.x
- Barrieshi-Nusair KM, Al-Oman Ma, Al-Hiyasat AS. Radiographic technical quality of root canal treatment performed by dental students at the Dental Teaching Center in Jordan. J Dent 2004;32:301-307. https://doi.org/10.1016/j.jdent.2004.01.002
- Eleftheriadis GI, Lambrianidis TP. Technical quality of root canal treatment and detection of iatrogenic errors in an undergraduate dental clinic. Int Endod J 2005;38:725- 734. https://doi.org/10.1111/j.1365-2591.2005.01008.x
- Er O, Sagsen B, Maden M, Cinar S, Kahraman Y. Radiographic technical quality of root fillings performed by dental students in Turkey. Int Endod J 2006;39:867-72. https://doi.org/10.1111/j.1365-2591.2006.01158.x
- Lynch CD, Burke FM. Quality of root canal filling performed by undergraduate dental students on single-rooted teeth. Eur J Dent Educ 2006;10:67-72. https://doi.org/10.1111/j.1600-0579.2006.00397.x
- Rafeek RN, Smith WA, Mankee MS, Coldero LG. Radiographic evaluation of the technical quality of root canal fillings performed by dental students. Aust Endod J 2010;38:64-69. https://doi.org/10.1111/j.1747-4477.2010.00270.x
- Khabbaz MG, Protogerou E, Douka E. Radiographic quality of root fillings performed by undergraduate students. Int Endod J 2010;43:499-508. https://doi.org/10.1111/j.1365-2591.2010.01706.x
- Elsayed RO, Abu-Bakr NH, Ibrahim YE. Quality of root canal treatment performed by undergraduate dental students at the University of Khartoum, Sudan. Aust Endod J 2011;37:56-60. https://doi.org/10.1111/j.1747-4477.2010.00273.x
- Cantarini C, Macchi R, Goldberg F. Evaluación radiográfica de los tratamientos realizados por alumnos de grado con dos técnicas de obturación endodóntica. Rev Asoc Odontol Argent 2019 [citado el 2 de noviembre de 2019];107:42-8. Disponible en: https://raoa.aoa.org.ar/revistas?roi=1072000017
- Ralph L. Radiography. The deciding factor in endodontic success or failure. NZ Endod J 1999;25:1-6.
- Gelfand M, Sunderman EJ, Goldman M. Reliability of radiographical interpretations. J Endod 1983;9:71-75. https://doi.org/10.1016/S0099-2399(83)80079-X
- Reit C, Hollender L. Radiographic evaluation of endodontic therapy and the influence of observer variation. Scand J Dent Res 1983;91:205-212. https://doi.org/10.1111/j.1600-0722.1983.tb00803.x
- Barell J. El aprendizaje basado en problemas. Buenos Aires. Editorial Manantial, 2007, pp. 242-6.
- Anijovich R, Cappelletti G. La evaluación como oportunidad. Buenos Aires. Editorial Paidós, 2017, pp. 20-3.
- García G, Cantarini C, Goldberg F. Un modelo experimental in vitro para la enseñanza del uso de localizadores apicales en el pregrado y posgrado. Rev Asoc Odontol Argent 2008 [citado el 21 de julio de 2019];96:301-4. Disponible en: https://raoa.aoa.org.ar/revistas?roi=964000320
- Tagger, M. Use of thermo-mechanical compactors as an adjunct to lateral condensation. Quintessence Int Dent Dig 1984;15:27-30.
- AlRahabi MK, AlKady AM, Ghabbani HM. Agreement between faculty member assessments and student self-assessments in a preclinical endodontic programme. Aust Endod J 2019;45:346-51. https://doi.org/10.1111/aej.12324
- Kabak Y, Abbott PV. Prevalence of apical periodontitis and the quality of endodontic treatment in an adult Belarusian population. Int Endod J 2005;38:238-45. https://doi.org/10.1111/j.1365-2591.2005.00942.x
- Moreno JO, Alves FRF, Gonçalves LS, Martínez AM, Rôças IN, Siqueira JF Jr. Periradicular status and quality of root canal fillings and coronal restorations in an urban Colombian population. J Endod 2013;39:600-4. https://doi.org/10.1016/j.joen.2012.12.020
- Gomes AC, Nejaim Y, Silva AIV, Haiter-Neto F, Cohenca N, Zaia AA, et al. Influence of endodontic treatment and coronal restoration on status of periapical tissues: a cone-beam computed tomography study. J Endod 2015;41:16148. https://doi.org/10.1016/j.joen.2015.07.008
- Cantarini C, Macchi R, Goldberg F. Estudio radiográfico de la calidad de 700 tratamientos endodónticos de piezas dentarias unirradiculares. Rev Asoc Odontol Argent 2016 [citado el 4 de enero de 2019];104:143-9. Disponible en: https://raoa.aoa.org.ar/revistas?roi=1044000124
- Anijovich R, Camilloni ARW de, Cappelletti G, Hoffmann J, Katzkowicz R, Mottier López L. La evaluación significativa. Buenos Aires. Editorial Paidós, 2016, p. 59.
- Lewin L. Que enseñes no significa que aprendan. Neurociencias, liderazgo docente e innovación en el aula en el siglo XXI. Buenos Aires. Editorial Bonum, 2017, p. 166.
- Ali R, Feil P. Rater reliability: short and long term effects of calibration training. J Dent Educ 2006;70:428-33.
- Reit C. The influence of observer calibration on radiographic periapical diagnosis. Int Endod J 1987;20:75-81. https://doi.org/10.1111/j.1365-2591.1987.tb00592.x
Educación en odontología endodoncia evaluación educacional Dental education educational assessment endodontics
Citar este artículo
Cantarini C, Macchi R, Alfie D, Goldberg F. Concordancia en la evaluación de tratamientos de endodoncia preclínica: un estudio en diferentes unidades académicas. Rev Asoc Odontol Argent. 2021 12 15;109(3):158-163. https://doi.org/10.52979/raoa.1141
Copiar Cita
PDF | Subir | Home
X Twitter | WhatsApp | Facebook | E-mail
Las obras publicadas en este sitio están bajo una Licencia Creative Commons Atribución-NoComercial 4.0 Internacional
Revista indexada en:
Los artículos científicos de RAOA se identifican con DOI (Digital Object Identifier) Crossref.
Descargas / Visitas: 3.849
Lecturas en línea: 1.270
Accesos por DOI: 197
Auspiciantes del Website:
Revista de la Asociación Odontológica Argentina
La Revista de la Asociación Odontológica Argentina, RAOA, es la principal vía de expresión de la producción científica argentina en odontología y un vínculo de unión y medio de información para los colegas e instituciones del país y del exterior.
Versión impresa ISSN 0004-4881
Versión electrónica ISSN 2683-7226.
DOI: 10.52979/raoa.1898
Título abreviado: Rev Asoc Odontol Argent