ISSN: 0210-1696
DOI: https://doi.org/10.14201/scero.32055

VALIDACIÓN DE PROFESIONALES EXPERTOS DE UN INSTRUMENTO SOBRE COMUNIDADES VIRTUALES DE ATENCIÓN TEMPRANA

Evaluation by Expert Professionals of a Tool on Virtual Early Intervention Communities

Pilar Ibáñez-Cubillas1

Universidad de Málaga. España

pcubillas@uma.es

https://orcid.org/0000-0001-7117-5746

María-Jesús Gallego-Arrufat

Universidad de Granada. España

mgallego@ugr.es

http://orcid.org/0000-0002-2296-5431

 

Recepción: 5 de junio de 2024

Aceptación: 3 de octubre de 2024

Resumen: Las interacciones y el aprendizaje online influyen en el desempeño laboral, proliferando comunidades virtuales de práctica que respaldan el desarrollo profesional. Este estudio persigue evaluar, mediante el método Delphi, un instrumento que mide la percepción de especialistas en atención temprana sobre la incidencia de comunidades virtuales en su desarrollo profesional. Se diseñó un cuestionario basado en la literatura y se contactó con 13 expertos, aplicando el Coeficiente de competencia experta (K). Un panel Delphi de alta experticia (K =.86) evaluó en dos rondas la relevancia y la exactitud de los ítems con una escala Likert de 1 a 5 y su pertinencia con respuestas dicotómicas. La evidencia de validez de contenido se evaluó mediante la V de Aiken y sus intervalos de confianza, estableciendo V ≥.81 e IC ≥.50 como criterios para mantener los ítems. Como resultado, en la primera ronda, se evaluaron 60 ítems, seleccionando 49; en la segunda, estos alcanzaron V ≥.81, resultando en un cuestionario final de 49 ítems. Se concluye que los resultados del cuestionario muestran suficientes evidencias de validez de contenido en términos de relevancia, exactitud y pertinencia, confirmando la utilidad del Coeficiente K y el método Delphi para el objetivo propuesto.

Palabras clave: Evidencia de validez de contenido; juicio de expertos; técnica Delphi; coeficiente V de Aiken; comunidades virtuales de práctica; atención temprana; desarrollo profesional.

Abstract: Online interactions and learning influence job performance, proliferating virtual communities of practice that support professional development. This study aims to evaluate, using the Delphi method, an instrument that measures the perception of early intervention specialists regarding the impact of virtual communities on their professional development. A questionnaire based on the literature was designed, and 13 experts were contacted, applying the Expert Competence Coefficient (K). A highly expert Delphi panel (K =.86) conducted two rounds of item evaluation, measuring relevance and accuracy with a Likert scale from 1 to 5, and pertinence with dichotomous responses. Content validity evidence was assessed using Aiken’s V and its confidence intervals, with V ≥.81 and CI ≥.50 set as criteria for items retention. As a result, in the first round, 60 items were evaluated, with 49 selected; in the second round, these items achieved V ≥.81, resulting in a questionnaire of 49 items. The study concludes that the results of the questionnaire show sufficient content validity evidences in terms of relevance, accuracy, and pertinence, confirming the utility of the K Coefficient and the Delphi method for the proposed objective.

Keywords: Content validity; experts judgment; Delphi technique; Aiken V Coefficient; virtual communities of practice; early intervention; professional development.

1. Introducción

En la era digital, la proliferación de Internet y la expansión de las redes sociales han transformado radicalmente la manera en que los individuos interactúan y colaboran en entornos virtuales, ejerciendo un impacto en el ámbito profesional. Las plataformas digitales han propiciado la formación de grupos autoorganizados que respaldan el desarrollo profesional a través de redes sociales, dando lugar a las comunidades virtuales de práctica (CVP) (Lantz-Andersson et al., 2018). Estas comunidades sirven como espacios colaborativos en los cuales los miembros interaccionan entre sí intercambiando ideas, inquietudes o intereses similares. A través de la participación activa en estas comunidades, los profesionales refuerzan su identidad profesional, establecen lazos más sólidos de pertenencia y bienestar, adquieren otras perspectivas y superan las barreras para implementar cambios en su práctica profesional, lo que facilita un aprendizaje más profundo (Luhanga et al., 2022).

El uso de estas plataformas ha permitido a los profesionales optimizar su desempeño y adquirir nuevas perspectivas, pese a los riesgos que pueden comprometer a los participantes, tales como la vulneración de la privacidad por la exposición de datos personales, la difuminación de los límites profesionales y la posible violación de información confidencial (Bogdanovskaya et al., 2024). También se asocian con un incremento del estrés, el riesgo de adicción a los foros y el aislamiento de las relaciones en el ámbito offline (Graziani y Petrini, 2018). A pesar de estos desafíos, las comunidades virtuales facilitan una solución eficaz para superar las barreras geográficas y facilitar el intercambio de conocimientos, permitiendo a los profesionales mantenerse actualizados y fomentar la reflexión sobre la profesión y el autoaprendizaje (Ibáñez-Cubillas et al., 2017; Widman, 2021); de ahí la importancia de adoptar un enfoque equilibrado que permita mitigar los riesgos mientras se aprovechan los aspectos positivos de las interacciones en línea (Bogdanovskaya et al., 2024; Graziani y Petrini, 2018).

En el contexto de la economía del conocimiento, las CVP destacan como un modelo rentable para el desarrollo profesional, permitiendo a los profesionales adquirir y desarrollar habilidades a demanda, sin costos de tutorización, infraestructuras o salarios. Al ser autogestionadas, virtuales y operar fuera del horario laboral (Schroeder, 2018), integran el aprendizaje entre pares en la práctica personal y profesional, basándose en casos reales y experiencias prácticas (Trust et al., 2016).

A pesar del reconocimiento de las CVP en el desarrollo profesional, existe una brecha en la investigación sobre su aplicación en áreas especializadas como la atención temprana. La atención temprana, entendida como el conjunto de intervenciones dirigidas a niños de 0 a 6 años con trastornos en el desarrollo o con riesgo de padecerlos (GAT, 2005), ha experimentado una creciente demanda en los últimos años (GAT, 2019, p. 26). En este contexto, la formación continua y el intercambio de conocimientos son cruciales para estos profesionales, pero las barreras geográficas y de tiempo pueden dificultar el acceso a oportunidades profesionales.

La literatura reporta diferentes investigaciones que estudian las CVP como herramientas para el desarrollo profesional en distintos campos, incluyendo el ámbito docente y el sector sanitario. Investigaciones previas destacan el papel de las CVP como medio para apoyar y promover el desarrollo profesional (Barry et al., 2017; Khalid y Strange, 2016), identificando elementos clave para la construcción de CVP, la gestión del conocimiento (Alonso e Izquierdo, 2022) y la transferencia del aprendizaje a la práctica (Luhanga et al., 2022), reseñando la colaboración y el apoyo mutuo como factores esenciales para la mejora profesional (Akinyemi et al., 2019) en estos entornos. Así, comienzan a emerger iniciativas de CVP de especialistas de atención temprana promovidas por el Banco Interamericano de Desarrollo para América Latina y el Caribe (BID, 2022), la Asociación Española de Intervención en la Primera Infancia (AEIPI, s/f) o ubicadas en redes sociales como Facebook o LinkedIn (Ibáñez-Cubillas, 2018; Plena inclusión, 2020).

A pesar del creciente reconocimiento de las CVP en el desarrollo profesional, la percepción y la participación de los especialistas de atención temprana en estos entornos no ha sido ampliamente explorada en la literatura científica. Aunque existen estudios que han examinado la efectividad de las comunidades virtuales en campos como la medicina (Brazil et al., 2023; Rolls et al., 2016) y la educación (Ghamrawi, 2022; Widman, 2021), es necesario comprender cómo estos especialistas perciben y utilizan estas plataformas específicamente en el contexto de la intervención temprana.

Este estudio persigue evaluar un cuestionario para investigar la incidencia de las comunidades virtuales en el desarrollo profesional dentro del ámbito de la atención temprana. La evidencia de validez de contenido se estableció mediante el juicio de expertos, utilizando el método Delphi. Los expertos se seleccionaron aplicando el Coeficiente de competencia experta (Coeficiente K). Se realizaron dos rondas sucesivas para alcanzar el consenso entre los expertos y se aplicó el Coeficiente V de Aiken y sus intervalos de confianza para cuantificar la evidencia de validez de contenido.

Al abordar esta cuestión, el estudio persigue aportar a la comunidad científica una herramienta con evidencias basadas en el contenido que contribuya al conocimiento sobre el papel de las CVP en el desarrollo profesional, ofreciendo posibilidades de aplicación en la atención temprana. Esto podría generar aportaciones prácticas y políticas que optimicen la formación y el apoyo continuo a estos profesionales, impactando positivamente en la calidad de los servicios prestados.

1.1. Elección del método Delphi

El método Delphi es ampliamente reconocido por su capacidad para diseñar instrumentos de investigación con evidencias fiables y válidas, gracias a su estructura iterativa y a la integración de juicios expertos en múltiples rondas de retroalimentación (Drumm et al., 2022a, 2022b). Este proceso permite la revisión y el refinamiento del contenido del cuestionario, asegurando que las puntuaciones de cada ítem sean validadas y ajustadas según el consenso de los expertos. La implementación del método Delphi requiere una cuidadosa planificación que incluye la selección de un panel de expertos adecuado, el uso de escalas Likert para medir opiniones y la determinación precisa del consenso y del número de rondas necesarias para alcanzarlo (Montes et al., 2023; Parejo et al., 2024). Estos elementos son esenciales para garantizar la precisión y la consistencia interna del instrumento.

El método Delphi ha sido efectivo en la recolección de opiniones de expertos de manera remota y anónima, lo que facilita un amplio alcance geográfico y promueve una retroalimentación honesta y sin sesgos, incrementando así la evidencia de validez de contenido (Dašić, 2023; Hernández-Peña et al., 2024). Estas características hacen del método Delphi una opción valiosa para las CVP, donde es necesario integrar perspectivas diversas y geográficamente dispersas sin requerir interacciones presenciales. Estudios previos han aplicado con éxito este método en CVP, como el trabajo de Murua et al. (2015), que definieron cibercomunidades de aprendizaje para la formación del profesorado, o el estudio de Ismail et al. (2021), que diseñaron un modelo de Comunidad de Aprendizaje Profesional.

El método Delphi ofrece un valor añadido, en comparación con otras metodologías, por su capacidad para recopilar opiniones de expertos de manera remota, garantizando un proceso inclusivo y de amplio alcance geográfico sin necesidad de interacciones presenciales (Dašić, 2023). Este enfoque iterativo permite realizar rondas controladas de retroalimentación, mejorando la evidencia de validez y fiabilidad del contenido al alcanzar un consenso entre los expertos (Hernández-Peña et al., 2024; Parejo et al., 2024). La flexibilidad del método Delphi en la selección del panel y la determinación del consenso lo distingue de otras técnicas convirtiéndolo en una herramienta eficaz para desarrollar cuestionarios que reflejen con precisión las dimensiones del constructo (Drumm et al., 2022a, 2022b).

El valor añadido del método Delphi frente a otras metodologías radica en su enfoque sistemático para agregar respuestas desde diversas perspectivas, su capacidad para reducir sesgos mediante la anonimidad y su efectividad en la evidencia de validación de las puntuaciones de los instrumentos en áreas de incertidumbre. Este método no solo permite mejorar la evidencia de validez y fiabilidad, sino que también facilita la inclusión de una amplia gama de expertos, resultando en investigaciones más robustas y completas (Lotfaliany et al., 2024; Sablatzky, 2022).

1.2. Las comunidades virtuales de práctica en el desarrollo profesional de atención temprana

La atención temprana se define como el “conjunto de intervenciones, dirigidas a la población infantil de 0 a 6 años, sus familias y entorno, que tienen por objetivo dar respuesta lo más pronto posible a las necesidades transitorias o permanentes que presentan los niños con trastornos en su desarrollo o que tienen el riesgo de padecerlos. Estas intervenciones, que deben considerar la globalidad del niño, han de ser planificadas por un equipo de profesionales de orientación interdisciplinar o transdisciplinar” (GAT, 2005, p. 12). Este enfoque multidisciplinario, que involucra a profesionales de diversas áreas, como fisioterapeutas, pedagogos, psicólogos o médicos, subraya la importancia de integrar conocimientos y experiencias para proporcionar un apoyo efectivo.

En este contexto, las CVP proporcionan un espacio clave donde los profesionales pueden compartir prácticas, resolver dudas y discutir casos complejos, facilitando una actualización continua y un intercambio de mejores prácticas (Ibáñez-Cubillas et al., 2017; Luhanga et al., 2022; Nuuyoma, 2024; Trust et al., 2016). Las CVP actúan como catalizadores del desarrollo profesional al brindar oportunidades para la formación continua, el apoyo mutuo, la colaboración y el intercambio de conocimientos. Las investigaciones sugieren que estas comunidades mejoran las habilidades y las competencias profesionales mediante el apoyo entre pares y las experiencias compartidas, elementos esenciales en un campo que requiere adaptabilidad e innovación en la práctica (Bagnato et al., 2023).

Nuuyoma (2024) enfatiza que las CVP proporcionan una plataforma para la práctica reflexiva, permitiendo a los profesionales abordar desafíos y soluciones en tiempo real, promoviendo una cultura de mejora continua. Lawler et al. (2023) destacan que la participación en estas comunidades puede incrementar la confianza y la eficacia de los profesionales al exponerlos a diversas perspectivas y experiencias. Por ende, integrar las CVP en las estrategias de desarrollo profesional resulta esencial para optimizar los servicios de intervención en la primera infancia (Damjanovic y Ward, 2023).

La integración de CVP en el desarrollo profesional en atención temprana ofrece múltiples beneficios. Las CVP promueven el aprendizaje continuo y el intercambio de conocimientos entre profesionales, aspectos fundamentales en un campo en constante evolución (Bagnato et al., 2023). Estas comunidades proporcionan una plataforma para la colaboración, el intercambio de experiencias y la discusión de desafíos, mejorando las habilidades de resolución de problemas y fomentando un sentido de pertenencia (Nuuyoma, 2024). Además, las CVP superan barreras geográficas facilitando la conexión y el aprendizaje entre profesionales de diferentes regiones, enriqueciendo el aprendizaje y fomentando la adopción de prácticas innovadoras. Asimismo, estas comunidades respaldan la práctica reflexiva, permitiendo a los profesionales evaluar críticamente sus métodos y resultados, contribuyendo a mejorar la prestación de servicios para niños y familias (Lawler et al., 2023).

No obstante, es crucial considerar las posibles limitaciones de las CVP. Entre estas, se destaca la variabilidad en los niveles de alfabetización digital entre los participantes, lo que puede generar desigualdades en la participación y en los resultados del aprendizaje (Andrade y Carvalho, 2015). Además, las CVP pueden provocar una sobrecarga de información, dado que el gran volumen de recursos y discusiones compartidas puede resultar abrumador para los participantes, dificultando la extracción de información procesable (Harjusola-Webb et al., 2014).

2. Material y método

La evidencia de validez de contenido es fundamental en la evaluación de instrumentos de medición y no debe considerarse como evidencia de menor rigor (Slocumb y Cole, 1991), dado que constituye un requisito previo para evaluar otros tipos de evidencias de validez (Berk, 1990). A diferencia de la evidencia de validez basada en la estructura interna o en el proceso de respuesta, que dependen de las respuestas de la población diana (AERA et al., 2014, p. 15), la evidencia de validez de contenido puede ser evaluada directamente a través de datos proporcionados por un panel de expertos.

Este estudio utiliza un diseño descriptivo y psicométrico para presentar la evidencia de validez de contenido obtenida mediante juicio de expertos, a través del método Delphi, en relación con la conexión entre las partes de la prueba y el constructo (AERA et al., 2014, p. 14). Los resultados de la prueba se interpretan en función de las respuestas de los expertos sobre los ítems de las distintas dimensiones. La fiabilidad entre evaluadores juega un papel crucial para la evaluación de la evidencia de validez de contenido, ya que garantiza la consistencia y el acuerdo entre los evaluadores en cuanto a la relevancia y la precisión de las herramientas de evaluación (Indarwati et al., 2023; Permana y Widodo, 2022). Esta fiabilidad actúa como un indicador del grado en que diferentes evaluadores emiten juicios similares, mejorando la credibilidad y la confiabilidad del proceso de evaluación (Indarwati et al., 2023). Una alta fiabilidad entre evaluadores refuerza la evidencia de validez, lo que conduce a resultados más fiables y válidos (Indarwati et al., 2023; Permana y Widodo, 2022).

2.1. Instrumento

El Cuestionario de Percepción de Especialistas en Atención Temprana sobre la Incidencia de Comunidades Virtuales en el Desarrollo Profesional consta de una sección dedicada a datos personales y profesionales (6 ítems) y 60 ítems distribuidos en cinco dimensiones: a) Identificación y ubicación de las comunidades virtuales de atención temprana (7 ítems); b) Motivos de participación para el desarrollo profesional (14 ítems); c) Oportunidades de aprendizaje en el ámbito laboral (12 ítems); d) Influencia en la construcción del conocimiento sobre atención temprana (22 ítems), y e) Promoción del desarrollo profesional en comunidades virtuales (5 ítems).

Las dimensiones del cuestionario fueron determinadas a través de un análisis documental realizado por la doctoranda bajo la supervisión de la directora de la tesis. Exceptuando la primera dimensión, diseñada para identificar y localizar las principales CVP de atención temprana con el fin de alcanzar uno de los objetivos de la tesis, las restantes dimensiones están alineadas con aspectos clave del desarrollo profesional. La literatura señala que tanto los motivos intrínsecos como extrínsecos, como el crecimiento personal y el avance en la carrera, son cruciales para la implicación de los profesionales en actividades de desarrollo (Zhang et al., 2021). Las oportunidades de aprendizaje son igualmente esenciales, ya que proporcionan el contexto necesario para mejorar habilidades y adquirir conocimientos fundamentales para una práctica profesional efectiva (Krille, 2020). La construcción de conocimientos, facilitada por experiencias de aprendizaje colaborativo, es un componente crítico que permite una comprensión y una aplicación más profundas de nuevos conceptos (Silwal y Panta, 2021). Asimismo, la promoción profesional está asociada con la finalización exitosa de programas de formación y otros factores que facilitan o dificultan el avance profesional (Imbernón y Canto, 2013).

Los ítems y las dimensiones del cuestionario fueron diseñados de la siguiente manera: los ítems referidos a la identificación de las CV (dimensión a) se diseñaron ad hoc para mapear las CV a las que pertenecen los profesionales de atención temprana que completan el cuestionario. Los ítems sobre los motivos de participación (dimensión b) y las oportunidades de aprendizaje (dimensión c) fueron adaptados a partir del cuestionario sobre desarrollo profesional docente de Ferreira (2013). Los ítems referidos a la construcción del conocimiento sobre atención temprana (dimensión d) se sustentan en las 13 áreas de formación específica que recoge el Libro Blanco de la Atención Temprana (GAT, 2005), así como los ítems específicos de esta disciplina. Los ítems sobre la promoción del desarrollo profesional (dimensión e) aluden a otros factores del desarrollo profesional como la compensación económica, el reconocimiento profesional o la formación (Imbernón y Canto, 2013). Para responder a los ítems de las dimensiones a) y e), se solicitan respuestas abiertas y cerradas, mientras que para las dimensiones restantes se emplea una escala Likert de cinco opciones (“nada”, “poco”, “algo”, “bastante”, “mucho”). Esta elección se fundamenta en las ventajas que ofrece la escala Likert de cinco opciones, como una mayor confiabilidad, un nivel detallado de información recopilada y una mayor facilidad de respuesta para los encuestados (Aybek y Toraman, 2022).

Tras diseñar el instrumento, se valoraron los ítems de cada dimensión utilizando la plantilla de juicio de expertos elaborada en Google Forms. Los expertos evaluaron los ítems basándose en tres criterios: 1) Relevancia: importancia del ítem en el conjunto del instrumento; 2) Exactitud: grado de adecuación, claridad y precisión lingüística del ítem formulado, y 3) Pertinencia: grado de relación entre los ítems de la misma dimensión y el constructo general. Los criterios de relevancia y exactitud se valoraron utilizando una escala cualitativa con valores numéricos exactos (1 “nada”; 2 “poco”; 3 “bastante”; 4 “mucho”), mientras que el criterio de pertinencia se evaluó dicotómicamente (sí o no). Además, se permitió a los expertos realizar observaciones cualitativas sobre cada ítem.

2.2. Selección del panel de expertos. Coeficiente de Competencia Experta

Se confeccionó un listado previo de 35 expertos potenciales, es decir, individuos con un profundo conocimiento sobre el objeto de estudio (Bisquerra, 2009), a través de la búsqueda en Internet. Para la selección, se aplicaron dos criterios fundamentales: primero, que fuesen expertos en una o varias de las áreas de conocimiento relativas al cuestionario; y segundo, que los expertos perteneciesen al ámbito académico o profesional2.

Se contactó por correo electrónico con 35 personas expertas en comunidades virtuales, atención temprana y/o desarrollo profesional, invitándoles a participar como miembros del panel de expertos para evaluar el contenido del cuestionario e informándoles de los objetivos de la investigación, los criterios de selección, el anonimato y la confidencialidad de los datos. La aceptación de la invitación implicaba completar el cuestionario online en Google Forms de Competencia Experta (Coeficiente K) y marcar la casilla de consentimiento informado.

La selección definitiva de los expertos estuvo determinada por el Coeficiente de competencia experta, también llamado “Coeficiente K”. Consiste en una técnica centrada en “la autoevaluación realizada por la persona para determinar su competencia experta en la materia objeto de la investigación” (Cabero Almenara y Barroso Osuna, 2013, p. 29). El Coeficiente K se calcula utilizando dos componentes: el “Coeficiente de conocimiento” (Kc) y el “Coeficiente de argumentación” (Ka), aplicando la fórmula K = ½ (Kc + Ka) indicada por Cabero Almenara y Barroso Osuna (2013, p. 29), quienes señalan en cada caso que:

Una vez obtenidas las puntuaciones de cada experto, el nivel de competencia experta de cada experto está determinado por el valor obtenido en su Coeficiente K, de manera que: a) Si K es mayor a.8 hay un nivel alto de experticia; b) Si K es menor o igual a.8 y mayor a.7 hay un nivel medio de experticia; y c) Si K es menor o igual a.7 y mayor que.5 hay un nivel bajo de experticia (Cabero Almenara y Barroso Osuna, 2013, p. 29).

2.3. Método Delphi

En este estudio se aplicó el método Delphi basado en una serie de rondas estructuradas para recopilar las opiniones de expertos y medir el grado de consenso (Landeta, 2002). Se utilizaron métodos digitales (correo electrónico y plataformas de cuestionarios online) para recopilar los datos y estructurar el estudio, adoptando la modalidad e-Delphi (Gill et al., 2013). El consenso se determinó basándose en los valores del coeficiente V de Aiken (Aiken, 1980, 1985).

2.3.1. Ronda 1. Evidencia de validez de contenido

Durante la primera ronda, los expertos recibieron un correo electrónico con el cuestionario y la información necesaria para evaluar el contenido de los ítems a través del enlace a la plantilla de juicio de expertos. Tras analizar los datos, el número de ítems a evaluar en la segunda ronda se redujo, otros ítems se desdoblaron y se reformularon de acuerdo con los comentarios y sugerencias de los expertos.

2.3.2. Ronda 2. Evidencia de validez de contenido

En la segunda ronda, se volvió a contactar con el panel de expertos (N = 13). Cada experto recibió un correo electrónico con la información necesaria para evaluar el contenido de cada uno de los ítems a través del enlace a la plantilla de juicio de expertos.

En la segunda ronda Delphi se evaluaron los ítems derivados de la primera ronda. Aunque las puntuaciones de algunos ítems presentaban una validez adecuada, estos fueron reevaluados.

2.4. Análisis de las evidencias de la validez de contenido

Los datos obtenidos se almacenaron y procesaron estadísticamente con el programa Microsoft Excel 365 (versión 2312). A continuación, se determinaron las evidencias de validez orientadas al contenido por juicio de expertos aplicando el coeficiente de la V de Aiken (Aiken, 1980) para comprobar la concordancia entre jueces respecto a la relevancia de los ítems. Se calculó el intervalo de confianza de V de Aiken al 95% por medio del método Wilson (Wilson, 1927), conocido como método score, para conocer el grado de imprecisión asociada al ítem.

El coeficiente V de Aiken (ecuación 1) y sus intervalos de confianza (ecuaciones 2 y 3) se han calculado aplicando las ecuaciones de Penfield y Giocobbi (2004):

a) V de Aiken (1)

V=X¯lk

donde V es el valor del coeficiente de Aiken, X¯ es la media de las calificaciones de los jueces, l es la calificación mínima en la escala y k es el rango de la escala de medida utilizada.

b) Nivel inferior de V (2)

L=2nkV+z2z4nkV(1V)+z22(nk+z2)

c) Nivel superior de V (3)

U=2nkV+z2+z4nkV(1V)+z22(nk+z2)

siendo z el valor de la distribución normal de probabilidad, V el coeficiente de Aiken calculado en la ecuación (1) y n el número de jueces.

La significancia estadística del coeficiente V se obtuvo de la tabla de probabilidad binomial de Aiken (1985, p. 133), que proporciona "probabilidades cercanas, pero no superiores a 0.05 y 0.01".

Ronda 1: Como criterio de decisión para mantener un ítem se consideró un valor V ≥.81 estadísticamente significativo (p ≥.05), así como un valor de intervalo de confianza inferior ≥.50 (Cicchetti, 1994; Penfield y Giacobbi, 2004) para cada uno de los criterios, salvo aquellos ítems que no superan el valor de corte para el criterio de exactitud, que se revisan atendiendo a las sugerencias de los expertos y se mantuvieron en la segunda ronda. Los ítems seleccionados con una alta carga de sugerencias se sometieron a un proceso de revisión y mejora.

Ronda 2: Se consideraron válidas las puntuaciones de los ítems que presentaron un valor V ≥.81 estadísticamente significativo (p ≥.05), así como un valor de intervalo de confianza inferior ≥.50 (Cicchetti, 1994; Penfield y Giacobbi, 2004) para cada criterio, excepto las puntuaciones de aquellos ítems que no superaron el valor de corte para el criterio de exactitud, que se revisaron atendiendo a las sugerencias de los expertos y se incluyeron en el cuestionario final.

3. Resultados

3.1. Resultados del Coeficiente de Competencia Experta

De los 35 expertos considerados inicialmente, 15 (académicos) aceptaron participar y completaron el cuestionario de competencia experta (Cabero Almenara y Barroso Osuna, 2013). Tras analizar los datos del Coeficiente K se seleccionaron únicamente aquellos expertos con una puntuación ≥.75, excluyendo a 2 expertos de nivel bajo de experticia con un Coeficiente K de.65 y.6.

El panel final, compuesto por 13 expertos, obtuvo una puntuación media de .86 en el Coeficiente K, lo que indica un alto nivel de competencia experta en las áreas de conocimiento. Concretamente, el panel de expertos (ver Tabla 1) se conforma con 9 expertos de alto nivel de experticia (K >.8) y 4 de nivel medio de experticia (K ≤.8 y >.7).

Tabla 1. Caracterización del panel de expertos

Sexo

Categoría docente

Área de conocimiento

Coeficiente K

Experto 1

Hombre

Catedrático de universidad

CV

0.80*

Experto 2

Mujer

Profesora ayudante doctora

AT

0.85

Experto 3

Mujer

Catedrática de universidad

CV; DP

0.90

Experto 4

Hombre

Catedrático de universidad

DP; AT

0.75*

Experto 5

Mujer

Titular de universidad

CV

0.80*

Experto 6

Hombre

Catedrático de universidad

CV; AT

0.90

Experto 7

Hombre

Catedrático de universidad

CV

0.95

Experto 8

Mujer

Profesora ayudante doctora

DP

0.85

Experto 9

Hombre

Profesor ayudante doctor

CV; DP; AT

0.95

Experto 10

Hombre

Catedrático de universidad

CV; DP

0.95

Experto 11

Mujer

Titular de universidad

CV; DP

0.85

Experto 12

Hombre

Catedrático de universidad

CP

0.95

Experto 13

Mujer

Titular de universidad

CV

0.80*

CV: Comunidades Virtuales; AT: Atención Temprana; DP: Desarrollo Profesional;
*Coeficiente K de nivel medio de experticia.

3.2. Resultados del método Delphi

La Figura 1 muestra el proceso de desarrollo para la obtención de evidencias de validez de contenido para cada una de las rondas Delphi. Durante la ronda 1 se valoraron 60 ítems. Los ítems con una V <.81 en relevancia, exactitud y pertinencia (N = 4), en dos de los criterios (N = 3), o solo en pertinencia (N = 2) fueron eliminados; los ítems con un valor V <.81 en exactitud (N = 2) se retuvieron para la segunda ronda tras ser revisados y modificados. A continuación, y tras excluir los 9 ítems, se llevó a cabo una revisión exhaustiva de los 24 ítems (incluidos aquellos con una V <.81 en exactitud) atendiendo a las recomendaciones de los expertos para mejorar su adecuación, claridad y precisión lingüística, resultando en 49 ítems (3 ítems fueron unificados y 1 ítem se desdobló).

Figura 1. Diagrama de flujo del método Delphi

Elaboración propia a partir de Bull et al. (2022).

Los 49 ítems evaluados en la ronda 2 obtuvieron una puntuación V ≥.81 en los criterios de relevancia, exactitud y pertinencia, excepto el ítem E1, que presentó un valor de V =.74 en exactitud, exigiendo una reformulación del enunciado de acuerdo con las observaciones de los expertos para su inclusión en el cuestionario final. Por lo tanto, el cuestionario final comprende 49 ítems.

3.3. Análisis de la evidencia de validez de contenido

El criterio utilizado para seleccionar los ítems del cuestionario final fue que el valor inferior del intervalo de confianza fuese ≥.50 y la puntuación del coeficiente V de Aiken fuera ≥.81.

En la primera ronda participaron 13 expertos. Tras la revisión de la primera ronda, se seleccionaron aquellos ítems que habían obtenido un valor V ≥.81 (N = 49) y un IC inferior ≥.50 para cada criterio de relevancia, exactitud y pertinencia, así como los ítems con puntuaciones inferiores a las establecidas, únicamente, en el criterio de exactitud (N = 2). De los 60 ítems que componían inicialmente el cuestionario (Anexo 1), 51 cumplían dichos criterios y 9 fueron eliminados. A continuación, se procedió al análisis de las observaciones de los expertos para la reformulación de 24 ítems, de manera que se unifican los ítems A3 y A4, B10 y B13, y E2 y E3, y el ítem C5 se desglosa en otro más, quedando un total de 49 ítems tras la primera ronda.

La segunda ronda fue completada por 13 expertos. Se mantuvieron los mismos criterios de la primera ronda, el coeficiente de V debía ser V ≥.81, según la tabla de probabilidad binomial de Aiken (1985, p. 133) para 13 expertos. De los 49 ítems del cuestionario, 48 cumplían los valores de corte para los tres criterios, excepto el ítem E1, que obtuvo una V =.74 en exactitud, pero los otros dos criterios estaban por encima de V.80 y IC.50, por lo que tuvo que ser revisado y reformulado para su inclusión. Finalmente, se obtuvo un cuestionario con 49 ítems (el material suplementario proporciona la versión final del cuestionario con ítems y opciones de respuesta). Los valores de V y su IC para cada uno de los ítems que componen el cuestionario se muestran en la Tabla 2.

Tabla 2. Resultados del análisis de evidencia de validez de contenido, por criterio e ítem, en la segunda ronda del método Delphi

Relevancia

Exactitud

Pertinencia

Dimensión

Ítem Ronda 1

Ítems Ronda 2

V

IC 95 %

V

IC 95 %

V

IC 95 %

A. Identificación y ubicación de las comunidades virtuales de atención temprana

1

1. ¿Participa en alguna comunidad virtual sobre atención temprana asociada a las redes sociales? Indique el número

1

.91-1

.85

.70-.93

.92

.67-.99

2

2. Marque las redes sociales en las que se encuentran sus comunidades virtuales sobre atención temprana: Indique otras

.97

.87-1

.92

.80-.97

1

.77-1

3+4

3. Indique el nombre de las comunidades virtuales sobre atención temprana a las que pertenece y el tiempo de permanencia

.97

.87-1

.92

.80-.97

1

.77-1

7

4. ¿Forma parte de otras comunidades virtuales sobre atención temprana que no estén ubicadas en las redes sociales? Por ejemplo, en blogs, listas de distribución… Indique su nombre

.97

.87-1

.92

.80-.97

1

.77-1

5

5. ¿Se considera dinamizador de alguna comunidad virtual sobre atención temprana a la que pertenece? Indique su nombre

.95

.83-.99

.87

.73-.94

1

.77-1

6

6. ¿Cómo conoció las comunidades virtuales sobre atención temprana?

.95

.83-.99

.95

.83-.99

1

.77-1

B. Motivos de participación para el desarrollo profesional

1

1. Aumentan las oportunidades profesionales

1

.91-1

.90

.76-.96

1

.77-1

2

2. Desarrollan nuevos propósitos para mi trabajo o formación

.95

.83-.99

.95

.83-.99

1

.77-1

3

3. Incrementan mi autoestima

.95

.83-.99

.90

.76-.96

1

.77-1

4

4. Cubren las nuevas necesidades (formas de actuación, metodologías, recursos, etc.) relacionadas con mi trabajo

97

.87-1

.85

.70-.93

1

.77-1

5

5. Mejoran mis conocimientos para ejercer mi profesión

1

.91-1

.87

.73-.94

1

.77-1

6

6. Conozco otras perspectivas y otras personas que me permiten ejercer mi labor de forma más eficaz

1

.91-1

.87

.73-.94

1

.77-1

8

7. Desarrollan mis competencias profesionales

.92

.80-.97

.87

.73-.94

1

.77-1

9

8. Adquiero conocimientos que me permiten llevar a cabo funciones más específicas en mi trabajo

.95

.83-.99

.95

.83-.99

.92

.67-.99

12

9. Genero una red de contactos

1

.91-1

1

.91-1

1

.77-1

13+10

10. Genero conocimiento a partir de las ideas y experiencias compartidas con los miembros de la comunidad virtual

1

.91-1

.97

.87-1

1

.77-1

C. Oportunidades de aprendizaje en el ámbito laboral

1

1. Ofrecen oportunidades para desarrollar mi trabajo de forma creativa

.95

.83-.99

.87

.73-.94

1

.77-1

2

2. Ofrecen la oportunidad de aprender algo nuevo sobre mi trabajo

.87

.73-.94

.97

.87-1

.85

.58-.96

3

3. Permiten una actualización constante de acuerdo con las necesidades de mi trabajo

.97

.87-1

.95

.83-.99

1

.77-1

4

4. Responden a los cambios y necesidades que surgen en la vida laboral

1

.91-1

.97

.87-1

1

.77-1

4

5. Facilitan la formación y el desarrollo profesional

.97

.87-1

.95

.83-.99

1

.77-1

7

6. Favorecen el desarrollo profesional a través de la reflexión y la crítica constructiva

1

.91-1

.97

.87-1

.92

.67-.99

8

7. Facilitan una formación centrada en el desarrollo individual o personal

.95

.83-.99

.90

.76-.96

1

.77-1

9

8. Facilitan una formación generalizada a partir de las necesidades de los miembros

.97

.87-1

.90

.76-.96

1

.77-1

10

9. Capacitan para dar respuesta a necesidades que surgen a corto y largo plazo

.95

.83-.99

.95

.83-.99

1

.77-1

D. Influencia en la construcción del conocimiento sobre atención temprana

1

1. Mantiene actualizados mis conocimientos teóricos sobre desarrollo infantil (etapas evolutivas, ámbitos del desarrollo, etc.)

.97

.87-1

.95

.83-.99

1

.77-1

2

2. Mantiene actualizados mis conocimientos teóricos sobre las corrientes filosóficas y científicas que han influido históricamente en la atención temprana

.95

.83-.99

.95

.83-.99

1

.77-1

3

3. Aumenta mi conocimiento teórico-práctico sobre el rol de los profesionales que componen los equipos de atención temprana

.95

.83-.99

.97

.87-1

1

.77-1

4

4. Me mantiene informado sobre la realidad legislativa, normativa e institucional

1

.91-1

.95

.83-.99

1

.77-1

5

5. Aumenta mis conocimientos sobre los factores que influyen en el desarrollo infantil (factores de riesgo biológico y social)

.95

.83-.99

.95

.83-.99

.85

.58-.96

6

6. Aumenta mi conocimiento sobre las alteraciones en el desarrollo infantil (causas, naturaleza, características, evolución y pronóstico), así como las medidas preventivas y terapéuticas más eficaces en cada caso

1

.91-1

1

.91-1

.92

.67-.99

7

7. Incorporo mecanismos de compensación, de eliminación de barreras y de adaptación para favorecer el desarrollo del niño

.95

.83-.99

.92

.80-.97

1

.77-1

8

8. Adquiero conocimientos sobre las medidas de prevención primaria en mi ámbito de actuación

.97

.87-1

.95

.83-.99

1

.77-1

9

9. Adquiero conocimientos sobre las medidas de prevención secundaria en mi ámbito de actuación

.97

.87-1

.92

80-.97

1

.77-1

10

10. Adquiero conocimientos sobre las medidas de prevención terciaria en mi ámbito de actuación

.97

.87-1

.95

.83-.99

1

.77-1

11

11. Aumenta mi conocimiento sobre nuevas tecnologías (por ejemplo, tecnologías de rehabilitación o bioingeniería) que pueden ser aplicadas en mi ámbito de actuación y otros

1

.91-1

1

.91-1

1

.77-1

12

12. Incorporo nuevas técnicas de evaluación e intervención de mi ámbito de actuación

.97

.87-1

.97

.87-1

1

.77-1

13

13. Permiten una aproximación a la investigación y a la búsqueda de información sobre modelos de evaluación e intervención

1

.91-1

1

.91-1

1

.77-1

14

14. Permiten contrastar empíricamente las distintas posibilidades de evaluación e intervención

.97

.87-1

.92

.80-.97

1

.77-1

17

15. Mantiene informado sobre los nuevos protocolos de actuación

.97

.87-1

.97

.87-1

1

.77-1

18

16. Adquiero conocimientos sobre otros instrumentos de evaluación y diagnóstico utilizados (escalas, test, cuestionarios, pruebas de cribado, entrevistas diagnósticas, etc.)

.97

.87-1

.97

.87-1

1

.77-1

19

17. Incrementa mis conocimientos sobre el sistema familiar, sus peculiaridades culturales, económicas, organizativas, etc.

.97

.87-1

1

.91-1

1

.77-1

20

18. Mantiene actualizados mis conocimientos sobre los principales modelos de intervención familiar

.97

.87-1

.97

.87-1

1

.77-1

21

19. Promueve el análisis del rol de los padres, demás miembros de la familia y profesionales en los distintos modelos

.95

.83-.99

.87

.73-.94

1

.77-1

22

20. Fomenta el espíritu crítico y la reflexión sobre los servicios de atención temprana y su utilidad para el contexto familiar y social

.97

.87-1

.97

.87-1

1

.77-1

E. Promoción del desarrollo profesional en comunidades virtuales

1

1. ¿En su ámbito laboral se potencia el desarrollo profesional a través de las comunidades virtuales? ¿Cómo? Número de horas invertidas al año

.95

.83-.99

.74*

.59-.85

.92

.67-.99

2+3

2. ¿Aporta algún reconocimiento en su carrera profesional? ¿Qué tipo de reconocimiento?

1

.91-1

.87

.73-.94

1

.77-1

4

3. ¿Recibe alguna compensación por el uso de las comunidades virtuales? ¿Qué compensación recibe?

.92

.80-.97

.87

.73-.94

.92

.67-.99

5

4. ¿Realiza otro tipo de acciones formativas para favorecer su desarrollo profesional? Por ejemplo, cursos, participación en jornadas, proyectos… Indique el tipo y número de horas al año

.97

.87-1

.87

.73-0,94

1

.77-1

V: V de Aiken (p..05); IC: Intervalo de confianza; *Valores inferiores a.81 para un p >.05.

4. Discusión

El análisis de la literatura revela una ausencia de instrumentos específicos para medir la percepción de los profesionales sobre su desarrollo profesional en comunidades virtuales. Para cubrir esta brecha, se diseñó un cuestionario que podría guiar futuras investigaciones en este campo, proporcionando una valiosa herramienta para comprender mejor este aspecto crucial del desarrollo profesional. Tras su construcción, el cuestionario se someterá a una aplicación piloto para evaluar la fiabilidad y la validez de las puntuaciones obtenidas y someterse a un escrutinio adicional para verificar las puntuaciones (Stribing et al., 2022), lo que podría conducir a mejoras y refinamientos adicionales en su diseño y aplicación.

Dada la relevancia de las CVP para favorecer el desarrollo profesional de los especialistas a través de diversas formas de participación (Brazil et al., 2023; Ibáñez-Cubillas, 2018; Luhanga et al., 2022), nos propusimos diseñar y validar las evidencias basadas en el contenido del cuestionario para obtener una comprensión más profunda de la percepción de los especialistas en atención temprana sobre la incidencia de estas comunidades en su desarrollo profesional, cuya aplicación podría contribuir significativamente al avance de investigación en este campo.

Las evidencias de validez de contenido son fundamentales para asegurar que el cuestionario evalúe adecuadamente el constructo pretendido y que los ítems sean claros y relevantes para los participantes. De esta forma, la evidencia de validez de contenido establece la relación entre el concepto teórico que se desea medir y los indicadores empíricos utilizados, indicando el grado en que los indicadores abarcan la variedad de significados del concepto (Cea D’Ancona, 2001).

Se empleó un riguroso proceso de validación basado en el contenido por juicio de expertos, cuyo objetivo es evaluar la relevancia y la representatividad de los ítems del instrumento para el propósito a evaluar (Ding y Hershberger, 2002). La utilización del método Delphi junto con el Coeficiente de competencia experta (K) permitió asegurar la calidad del panel de expertos y la integridad del proceso de validación. Además, el establecimiento de criterios claros para la selección de los ítems, como valores mínimos de la V de Aiken y los intervalos de confianza al 95%, garantizó un estándar elevado en la evaluación de la validez de las evidencias orientadas al contenido y aseguró la inclusión de ítems con suficiente relevancia.

En el proceso de la evidencia de validez de contenido por juicio de expertos, se seleccionó una muestra diversa de expertos con conocimientos sobre una o varias áreas del instrumento y experiencia en diferentes sistemas. Para evitar la inclusión de no expertos, el panel se configuró aplicando el Coeficiente de competencia experta (Cabero Almenara y Barroso Osuna, 2013), que ha sido empleado en numerosos contextos de investigación durante el último quinquenio (Cruz y Martínez, 2020). La validación se realizó con un número de expertos suficientemente amplio (Landeta, 2002) y con un nivel medio-alto de experticia para lograr un nivel óptimo de validez, de manera que todos los indicadores representativos que se pretenden evaluar están incluidos en el cuestionario (Gill et al., 2013). Además, los expertos de diversas especialidades garantizaron la representación de una amplia variedad de perspectivas y conocimientos, fortaleciendo la validez y la relevancia de los resultados en el ámbito de la atención temprana.

En segundo lugar, se aplicó el método Delphi, reconocido por su relevancia y utilidad en la investigación para obtener opiniones razonadas, consensuadas e individualizadas sobre un objeto de estudio (Bull et al., 2022; Gill et al., 2013; Ismail et al., 2021; Stribing et al., 2022). Este método es particularmente eficaz en contextos que requieren la integración de diversas perspectivas y la gestión de conocimientos emergentes, como es el caso de las CVP (Drumm et al., 2022a, 2022b; Dašić, 2023). Al contactar con los expertos por correo electrónico, el método permitió obtener estimadores cuantitativos a través del grado de acuerdo entre los participantes, consolidando así el consenso dentro del grupo (Gill et al., 2013).

La relevancia del contenido del ítem representa una consideración fundamental para los investigadores al desarrollar escalas destinadas a medir constructos (Penfield y Giocobbi, 2004). Dunn et al. (1999) sugirieron el uso del estadístico V de Aiken (Aiken, 1980, 1985) por su capacidad para resumir la magnitud de las calificaciones de los expertos y para probar hipótesis sobre dichas calificaciones en la población. De manera que, en tercer lugar, se aplicó la V de Aiken para evaluar el grado de acuerdo entre los expertos. Sin embargo, se adoptó el método de Wilson (1927), conocido como método score, que supera las limitaciones de este enfoque tradicional al ofrecer una alta precisión y no depender de la distribución normal de la variable.

En relación con las características de este estudio, podemos afirmar que la evidencia de la validación orientada al contenido es alta. A lo largo de las rondas Delphi se observó un incremento progresivo en la coherencia de las decisiones del grupo de expertos reflejado en el aumento del coeficiente V de Aiken y en el intervalo de confianza de los ítems seleccionados (Aiken, 1980; Gill et al., 2013). Los expertos consideraron que los 49 ítems del cuestionario, al demostrar un elevado nivel de validez de contenido, abordan de manera adecuada aspectos sobre las percepciones del desarrollo profesional en las CVP, lo que refuerza la evidencia de validez orientada al contenido (Aiken, 1980).

5. Conclusiones, limitaciones, implicaciones y prospectiva

Los resultados del presente estudio permiten concluir que las puntuaciones del cuestionario diseñado para medir la percepción de los especialistas en atención temprana sobre la incidencia de las comunidades virtuales en el desarrollo profesional tienen una evidencia de validez de contenido elevada. Las puntuaciones de este novedoso instrumento muestran evidencias de validez de contenido, evidenciado por la alta experticia de los jueces a través del Coeficiente K; la aplicación del método Delphi para establecer un consenso prospectivo entre los jueces, y el coeficiente V de Aiken ≥.81 con una significancia de.05 y sus intervalos de confianza al 95% para determinar la relevancia, exactitud y pertinencia de cada ítem. Además, estas técnicas y estadísticos proporcionan calidad al instrumento.

Una limitación del presente estudio radica en que las comunidades virtuales para el desarrollo profesional de los especialistas en atención temprana es un tema de estudio reciente. Sin embargo, este artículo proporciona un instrumento útil para futuros estudios empíricos que podrían contribuir a la elaboración de un modelo de referencia a implementar. Además, es fundamental señalar que, si bien se han incluido evidencias de validez basadas en el contenido, se debe también considerar la incorporación de otras formas de evidencia, tales como aquellas relacionadas con los procesos cognitivos, la estructura interna, las relaciones con constructos conceptualmente relacionados, los criterios externos y las consecuencias de la administración de la prueba. Es crucial entender que la evidencia basada en el contenido representa solo una parte del concepto más amplio de la validez de una medida. En consecuencia, el contenido del artículo no pretende referirse a la validez en su totalidad, sino específicamente a ciertas evidencias de validez basadas en el contenido obtenidas a través de la participación de expertos independientes. La aplicación del instrumento podría tener implicaciones prácticas diversas y significativas, abarcando desde la mejora de la formación profesional hasta el apoyo a la toma de decisiones a nivel organizativo y político en este campo. Además, el proceso metodológico empleado podría aplicarse a nuevos estudios.

Estas implicaciones abren nuevas líneas de investigación. En primer lugar, se sugiere la realización de estudios longitudinales para examinar el impacto de las comunidades virtuales en el desarrollo profesional a lo largo del tiempo. Este enfoque permitirá obtener una visión más detallada de los efectos a largo plazo y de la evolución en la percepción de los profesionales. En segundo lugar, se recomienda explorar la aplicación del cuestionario en profesionales específicos de la atención temprana, como fisioterapeutas o pedagogos, con el objetivo de enriquecer la comprensión del impacto de las CVP en distintos ámbitos de actuación y de establecer comparaciones entre ellos. Finalmente, se recomienda adaptar el cuestionario para incorporar tecnologías y métodos emergentes, asegurando así su relevancia y utilidad en un entorno en constante evolución. Una vez administrado a una muestra representativa se calcularán los parámetros de calidad según los principios de la Teoría Clásica del Test (TCT) y la Teoría de Respuesta al Ítem (TRI).

6. Financiación

Estudio financiado por la ayuda para contratos predoctorales Ref. FPU13/04744. Ministerio de Educación, Cultura y Deporte, España.

7. Referencias bibliográficas

Aiken, L. R. (1980). Content validity and reliability of single items or questionnaires. Educational and Psychological Measurement, 40, 955-959. https://doi.org/10.1177/001316448004000419

Aiken, L. R. (1985). Three coefficients for analyzing the reliability and validity of rating. Educational and Psychological Measurement, 45(1), 131-142. https://doi.org/10.1177/0013164485451012

Akinyemi, A. F., Rembe, S., Shumba, J. y Adewumi, T. M. (2019). Collaboration and mutual support as processes established by communities of practice to improve continuing professional teachers’ development in high schools. Cogent Education, 6(1), 1685446. https://doi.org/10.1080/2331186X.2019.1685446

Alonso, P. e Izquierdo, T. (2022). Integración de herramientas web 2.0 en los sitios de especialidades y temas de salud para el desarrollo de comunidades virtuales de práctica en la red Infomed. Salud, Ciencia y Tecnología, 2(1,121). https://doi.org/10.56294/saludcyt2022121

American Educational Research Association, American Psychological Association and National Council on Measurement in Education. (AERA) (2014). Standards for Educational and Psychological Testing. American Educational Research Association.

Andrade, A. y Carvalho, C. V. (2015). To enliven virtual communities of practice through gamification. EAI Endorsed Transactions on Serious Games, 1(4), 1-7. https://doi.org/10.4108/sg.1.4.e6

Asociación Española de Intervención en la Primera Infancia. (s/f). Teams. Comunidad AEIPI. https://aeipiorg.wordpress.com/teams-comunidad-aeipi/

Aybek, E. C. y Toraman, C. (2022). How many response categories are sufficient for Likert type scales? An empirical study based on the Item Response Theory. International Journal of Assessment Tools in Education, 9(2), 534-547. https://doi.org/10.21449/ijate.1132931

Bagnato, S. J., Macy, M., Dionne, C., Smith, N., Brock, J. R., Larson, T. K., Londono, T., Fevola, A., Bruder, M. B. y Cranmer, J. (2023). Authentic Assessment for Early Childhood Intervention: In-Vivo and virtual practices for interdisciplinary professionals. Perspectives on Early Childhood Psychology Education, 8(1), 1-34. https://doi.org/10.58948/2834-8257.1066

Banco Interamericano de Desarrollo (BID). (2022/06/27). Primeros Pasos. Desarrollo Infantil. https://blogs.iadb.org/desarrollo-infantil/es/comunidad-de-practica-que-pasa-cuando-se-reunen-expertos-comprometidos-con-el-desarrollo-infantil-temprano/

Barry, M., Kuijer‐Siebelink, W., Nieuwenhuis, L. y Scherpbier‐de Haan, N. (2017). Communities of practice: A means to support occupational therapists’ continuing professional development. A literature review. Australian Occupational Therapy Journal, 64(2), 185-193. https://doi.org/10.1111/1440-1630.12334

Berk, R. A. (1990). Importance of expert judgment in content-related validity evidence. Western Journal of Nursing Research, 12(5), 659-671. https://doi.org/10.1177/019394599001200507

Bisquerra, R. (2009). Metodología de la investigación educativa. La Muralla.

Bogdanovskaya, I. M., Uglova, A. B., Nizomutdinov, B. A. y Petrova, J. V. (2024). Analysis of ethical risks in interactions within professional networking communities for helping professionals. En 2024 Communication Strategies in Digital Society Seminar (ComSDS) (pp. 16-20). IEEE. https://ieeexplore.ieee.org/document/10502104

Brazil, V., Stokes-Parish, J. y Spurr, J. (2023). Role of social media in health professions education. En D. Nestel, G. Reedy, L. McKenna y S. Gough (Eds.), Clinical education for the health professions (pp. 765-776). Springer. https://doi.org/10.1007/978-981-15-3344-0_119

Bull, C., Crilly, J., Latimer, S. y Gillespie, B. M. (2022). Establishing the content validity of a new emergency department patient-reported experience measure (ED PREM): A Delphi study. BMC Emergency Medicine, 22(1), 1-10. https://doi.org/10.1186/s12873-022-00617-5

Cabero Almenara, J. y Barroso Osuna, J. (2013). La utilización del juicio de expertos para la evaluación de TIC: El coeficiente de competencia experta. Bordón. Revista de Pedagogía, 65(2), 25-38. https://recyt.fecyt.es/index.php/BORDON/article/view/brp.2013.65202

Cea D’Ancona, M. A. (2001). Metodología cuantitativa. Estrategias y técnicas de investigación social. Síntesis.

Cicchetti, D. V. (1994). Guidelines, criteria, and rules of thumb for evaluating normed and standardized assessment instruments in psychology. Psychological Assesssments, 6(4), 284-290. https://psycnet.apa.org/doi/10.1037/1040-3590.6.4.284

Cruz, M. y Martínez, M. C. (2020). Origen y desarrollo de un índice de competencia experta: el coeficiente k. Revista Latinoamericana de Metodología de la Investigación Social, 19(10), 40-56. https://relmis.com.ar/ojs/index.php/relmis/article/view/origen_desarrollo_indice_competencia_experta

Damjanovic, V. y Ward, J. K. (2023). Communities of practice as a launchpad for social justice planning in early childhood education. Contemporary Issues in Early Childhood, 24(3), 363-368. https://www.doi.org/10.1177/14639491231155554

Dašić, D. R. (2023). Application of Delphi method in sports. Спорт, медији и бизнис, 9(1), 59-71. https://doi.org/10.58984/smb2301059d

Ding, C. y Hershberger, S. (2002). Assessing content validity and content equivalence using structural equation modeling. Structural Equation Modeling: A Multidisciplinary Journal, 9(2), 283-297. https://doi.org/10.1207/S15328007SEM0902_7

Drumm, S., Bradley, C. y Moriarty, F. (2022a). ‘More of an art than a science’? The development, design and mechanics of the Delphi technique. Research in Social and Administrative Pharmacy, 18(1), 2230-2236. https://doi.org/10.1016/j.sapharm.2021.06.027

Drumm, S., Bradley, C. y Moriarty, F. (2022b). An overview of the Delphi technique in social pharmacy and health services research. Contemporary Research Methods in Pharmacy and Health Services, 455-466. https://doi.org/10.1016/B978-0-323-91888-6.00001-6

Dunn, J. G. H., Bouffard, M. y Rogers, W. T. (1999). Assessing content-relevance in sport psychology scale-construction research: Issues and recommendations. Measurement in Physical Education and Exercise Science, 3(1), 15-36. https://doi.org/10.1207/s15327841mpee0301_2

Ferreira, M. M. (2013). Formação contínua de professores em contextos laborais colaborativos – seus reflexos nas conceções e práticas profissionais (Tesis doctoral, Universidade de Lisboa, Lisboa). https://hdl.handle.net/10451/8744

GAT. (2005). Libro Blanco de Atención Temprana. ARTEGRAF. https://gat-atenciontemprana.org/wp-content/uploads/2019/05/LibroBlancoAtenci%C2%A6nTemprana.pdf

GAT. (2019). Atención temprana. La visión de los profesionales. https://gat-atenciontemprana.org/wp-content/uploads/2019/05/%C3%A2%C2%81%C2%AE-La-visi%C3%B3n-de-los-profesionales.pdf

Ghamrawi, N. (2022). Teachers’ virtual communities of practice: A strong response in times of crisis or just another Fad? Education and Information Technologies, 27(5), 5889-5915. https://doi.org/10.1007/s10639-021-10857-w

Gill, F. J., Leslie, G. D., Grech, C. y Latour, J. M. (2013). Using a web-based survey tool to undertake a Delphi study: Application for nurse education research. Nurse Education Today, 33(11), 1322-1328. https://doi.org/10.1016/j.nedt.2013.02.016

Graziani, E. y Petrini, F. (2018). Online communities. Benefits and risks: A literature review. International Journal of User-Driven Healthcare (IJUDH), 8(2), 1-13. https://doi.org/10.4018/978-1-6684-4515-0.ch003

Harjusola-Webb, S., Lyons, A. y Gatmaitan, M. (2014). A community of practice pilot project for delivering early intervention professional development. Social Welfare: Interdisciplinary Approach, 4(1), 46-63. https://doi.org/10.15388/SW.2014.28246

Hernández-Peña, K., Gea-García, G. M. y Antúnez, R. M. (2024). Diseño y validación mediante el método Delphi de un cuestionario para conocer los criterios del jugador de baloncesto cuando penetra hacia la canasta. Cuadernos de Psicología del Deporte, 24(1), 275-296. https://doi.org/10.6018/cpd.544011

Ibáñez-Cubillas, P. (2018). Aspectos educativos y formativos de la atención infantil temprana en comunidades virtuales [Tesis de doctorado, Universidad de Granada]. https://hdl.handle.net/10481/52502

Ibáñez-Cubillas, P., Nogueira, F. y Gallego-Arrufat, M. J. (2017). Professional development through social network communities. In EDULEARN17 Proceedings (pp. 2930-2938). IATED. https://doi.org/10.21125/edulearn.2017.1612

Imbernón, F. y Canto, P. J. (2013). La formación y el desarrollo profesional del profesorado en España y Latinoamérica. Sinéctica, 41, 2-12. https://www.scielo.org.mx/scielo.php?pid=S1665-109X2013000200010&script=sci_arttext

Indarwati, F., Primanda, Y., Haris, F. y Sutrisno, R. Y. (2023). Content validity and inter-rater reliability of procedural skill checklists used in the online OSCE scoring management system. Bali Medical Journal, 12(1), 456-461. https://www.doi.org/10.15562/bmj.v12i1.3760

Ismail, K., Ishak, R. y Kamaruddin, S. H. (2021). Development of professional learning communities model using fuzzy Delphi approach. TEM Journal, 10(2), 872-878. https://doi.org/10.18421/TEM102-48

Khalid, M. S. y Strange, M. H. (2016). School teacher professional development in online communities of practice: A systematic literature review. En Proceedings of the 15th European Conference on e-Learning (pp. 605-614). Academic Conferences and Publishing International. https://vbn.aau.dk/en/publications/school-teacher-professional-development-in-online-communities-of-

Krille, C. (2020). Reasons for participation in professional development. En C. Krille (Ed.), Teachers’ Participation in Professional Development: A systematic review (pp. 15-25). Springer. https://www.doi.org/10.1007/978-3-030-38844-7_3

Landeta, J. (2002). El método Delphi: Una técnica de previsión del futuro. Ariel.

Lantz-Andersson, A., Lundin, M. y Selwyn, N. (2018). Twenty years of online teacher communities: A systematic review of formally-organized and informally-developed professional learning groups. Teaching and Teacher Education, 75, 302-315. https://doi.org/10.1016/j.tate.2018.07.008

Lawler, M. A., Lindsay, G. M. y Jones, R. A. (2023). From ‘quarantini party’ to academic impact: An early childhood visual arts special interest group becomes a community of practice. Practice, 5(2), 144-160. https://www.doi.org/10.1080/25783858.2023.2215937

Lotfaliany, M., Agustini, B., Walker, A. J., Turner, A., Wrobel, A. L., Williams, L. J., Dean, O. M., Miles, S., Rossell, S. L., Berk, M., Mohebbi, M. y HDQ Investigator Group. (2024). Development of a harmonized sociodemographic and clinical questionnaire for mental health research: A Delphi-method-based consensus recommendation. Australian and New Zealand Journal of Psychiatry, 58(8) 656-667. https://doi.org/10.1177/00048674241253452

Luhanga, U., Chen, W., Minor, S., Drowos, J., Berry, A., Rudd, M., Gupta, S. y Bailey, J. M. (2022). Promoting transfer of learning to practice in online continuing professional development. Journal of Continuing Education in the Health Professions, 42(4), 269-273. https://doi.org/10.1097/CEH.0000000000000393

Montes, R., Zuheros, C., Morales, J., Zermeño, N., Duran, J. y Herrera, F. (2023). Design and consensus content validity of the questionnaire for b-learning education: A 2-Tuple Fuzzy Linguistic Delphi based decision support tool. Applied Soft Computing, 147, 110755. https://doi.org/10.1016/j.asoc.2023.110755

Murua, I., Gallego, D. J. y Cacheiro, M. L. (2015). Caracterización de las cibercomunidades de aprendizaje (cCA). Revista de Educación a Distancia, 47(4), 1-18. https://revistas.um.es/red/article/view/242451/184261

Nuuyoma, V. (2024). Virtual communities of practice as mentoring tools in health professions education and practice. En D. Smerda-Mason y D. J. Koch, Utilizing virtual communities in professional practice (pp. 182-205). IGI Global. https://www.doi.org/10.4018/979-8-3693-1111-0.ch009

Parejo, J. L. L., Cáceres-Iglesias, J., Manrique-Benito, M. y Cortón-Heras, M. O. (2024). Application of the Delphi technique to a questionnaire on out-of-classroom training in initial teacher education. Journal of Adventure Education and Outdoor Learning, 1-13. https://doi.org/10.1080/14729679.2024.2310286

Penfield, R. D. y Giacobbi, P. R. (2004). Applying a score confidence interval to Aiken’s item content-relevance index. Measurement in Physical Education and Exercise Science, 8(4), 213-225. https://doi.org/10.1207/s15327841mpee0804_3

Permana, R. A. H. A. y Widodo, A. (2022). Validity and inter-rater reliability of the scoring rubrics for the science teacher TPACK test instrument. Jurnal Penelitian dan Pembelajaran IPA, 8(1), 27-44. https://www.doi.org/10.30870/jppi.v8i1.11164

Plena inclusión. (2020). Únete a la comunidad de Atención Temprana de Plena inclusión en Facebook. https://www.plenainclusion.org/noticias/unete-a-la-comunidad-de-atencion-temprana-de-plena-inclusion-en-facebook/

Rolls, K., Hansen, M., Jackson, D. y Elliott, D. (2016). How health care professionals use social media to create virtual communities: An integrative review. Journal of Medical Internet Research, 18(6), e166. https://doi.org/10.2196/jmir.5312

Sablatzky, T. (2022). The Delphi method. Hypothesis, 34(1), 1-6. https://doi.org/10.18060/26224

Schroeder, P. (2018). New technology is giving learning and development a bright future. The Startup, 13 January. https://medium.com/swlh/new-technology-is-giving-learning-and-development-a-bright-future-f0aec84dad00

Silwal, R. y Panta, S. (2021). Factors influencing participation in professional developmental activities among nursing personnel. Medical Journal of Shree Birendra Hospital, 20(1), 24-29. https://www.doi.org/10.3126/MJSBH.V20I1.29061

Slocumb, E. M. y Cole, F. L. (1991). A practical approach to content validation. Applied Nursing Research, 4(4), 192-195. https://doi.org/10.1016/S0897-1897(05)80097-7

Stribing, A., Stodden, D. F., Monsma, E., Lieberman, L. J. y Brian, A. S. (2022). Content/face validity of motor skill perception questionnaires for youth with visual impairments: A Delphi method. British Journal of Visual Impairment, 40(2), 369-377. https://doi.org/10.1177/0264619621990687

Trust T., Krutka, D. G. y Carpenter, J. P. (2016). ‘Together we are better’: Professional learning networks for teachers. Computers and Education, 102, 15-34. https://doi.org/10.1016/j.compedu.2016.06.007

Widman, F. (2021). Desarrollo profesional de profesores de matemáticas en ambientes virtuales: ventajas, aproximaciones teóricas y futuras líneas de investigación. Educación Matemática, 33(2), 227-244. https://doi.org/10.24844/em3302.09

Wilson, E. B. (1927). Probable inference, the law of succession, and statistical inference. Journal of the American Statistical Associations, 22, 209-212. https://doi.org/10.1080/01621459.1927.10502953

Zhang, X., Admiraal, W. y Saab, N. (2021). Teachers’ motivation to participate in continuous professional development: Relationship with factors at the personal and school level. Journal of Education for Teaching, 47(5), 714-731. https://doi.org/10.1080/02607476.2021.1942804

Anexo

Cuestionario de percepción de especialistas en atención temprana sobre la incidencia de comunidades virtuales en el desarrollo profesional

Ítem

Respuesta

Datos personales y profesionales

1

Sexo

Hombre

Mujer

2

Edad

3

Formación académica (Señale las opciones necesarias)

Formación Profesional

Licenciatura/Diplomatura/Grado

Máster

Doctorado

4

Ámbito de actuación en el que ejerce actualmente (Señale las opciones necesarias)

Servicios sanitarios

Servicios educativos

Servicios sociales

Centro de Desarrollo Infantil y Atención Temprana (CDIAT)

5

Puesto que desempeña actualmente

6

Años de servicio como profesional de atención temprana

A: Identificación y ubicación de las comunidades virtuales de atención temprana

1

¿Participa en alguna comunidad virtual sobre atención temprana asociada a las redes sociales? Indique el número

No

N.º:

2

Marque las redes sociales en las que se encuentran sus comunidades virtuales sobre atención temprana

Facebook

LinkedIn

Twitter

Youtube

Indique otras

Otras:

3

Indique el nombre de las comunidades virtuales sobre atención temprana a las que pertenece y el tiempo de permanencia

Nombre:

Tiempo:

4

¿Forma parte de otras comunidades virtuales sobre atención temprana que no estén ubicadas en las redes sociales? Por ejemplo, en blogs, listas de distribución… Indique su nombre

No

Nombre:

5

¿Se considera dinamizador de alguna comunidad virtual sobre atención temprana a la que pertenece? Indique su nombre

No

¿Por qué?:

6

¿Cómo conoció las comunidades virtuales sobre atención temprana?

B: Motivos de participación para el desarrollo profesional

1

Aumentan las oportunidades profesionales

Nada

Poco

Algo

Bastante

Mucho

2

Desarrollan nuevos propósitos para mi trabajo o formación

Nada

Poco

Algo

Bastante

Mucho

3

Incrementan mi autoestima

Nada

Poco

Algo

Bastante

Mucho

4

Cubren las nuevas necesidades (formas de actuación, metodologías, recursos, etc.) relacionadas con mi trabajo

Nada

Poco

Algo

Bastante

Mucho

5

Mejoran mis conocimientos para ejercer mi profesión

Nada

Poco

Algo

Bastante

Mucho

6

Conozco otras perspectivas y otras personas que me permiten ejercer mi labor de forma más eficaz

Nada

Poco

Algo

Bastante

Mucho

7

Desarrollan mis competencias profesionales

Nada

Poco

Algo

Bastante

Mucho

8

Adquiero conocimientos que me permiten llevar a cabo funciones más específicas en mi trabajo

Nada

Poco

Algo

Bastante

Mucho

9

Genero una red de contactos

Nada

Poco

Algo

Bastante

Mucho

10

Genero conocimiento a partir de las ideas y experiencias compartidas con los miembros de la comunidad virtual

Nada

Poco

Algo

Bastante

Mucho

C: Oportunidades de aprendizaje en el ámbito laboral

1

Ofrecen oportunidades para desarrollar mi trabajo de forma creativa

Nada

Poco

Algo

Bastante

Mucho

2

Ofrecen la oportunidad de aprender algo nuevo sobre mi trabajo

Nada

Poco

Algo

Bastante

Mucho

3

Permiten una actualización constante de acuerdo con las necesidades de mi trabajo

Nada

Poco

Algo

Bastante

Mucho

4

Responden a los cambios y necesidades que surgen en la vida laboral

Nada

Poco

Algo

Bastante

Mucho

5

Facilitan la formación y el desarrollo profesional

Nada

Poco

Algo

Bastante

Mucho

6

Favorecen el desarrollo profesional a través de la reflexión y la crítica constructiva

Nada

Poco

Algo

Bastante

Mucho

7

Facilitan una formación centrada en el desarrollo individual o personal

Nada

Poco

Algo

Bastante

Mucho

8

Facilitan una formación generalizada a partir de las necesidades de los miembros

Nada

Poco

Algo

Bastante

Mucho

9

Capacitan para dar respuesta a necesidades que surgen a corto y largo plazo

Nada

Poco

Algo

Bastante

Mucho

D: Influencia en la construcción del conocimiento sobre atención temprana

1

Mantiene actualizados mis conocimientos teóricos sobre desarrollo infantil (etapas evolutivas, ámbitos del desarrollo, etc.)

Nada

Poco

Algo

Bastante

Mucho

2

Mantiene actualizados mis conocimientos teóricos sobre las corrientes filosóficas y científicas que han influido históricamente en la atención temprana

Nada

Poco

Algo

Bastante

Mucho

3

Aumenta mi conocimiento teórico-práctico sobre el rol de los profesionales que componen los equipos de atención temprana

Nada

Poco

Algo

Bastante

Mucho

4

Me mantiene informado sobre la realidad legislativa, normativa e institucional

Nada

Poco

Algo

Bastante

Mucho

5

Aumenta mis conocimientos sobre los factores que influyen en el desarrollo infantil (factores de riesgo biológico y social)

Nada

Poco

Algo

Bastante

Mucho

6

Aumenta mi conocimiento sobre las alteraciones en el desarrollo infantil (causas, naturaleza, características, evolución y pronóstico), así como las medidas preventivas y terapéuticas más eficaces en cada caso

Nada

Poco

Algo

Bastante

Mucho

7

Incorporo mecanismos de compensación, de eliminación de barreras y de adaptación para favorecer el desarrollo del niño

Nada

Poco

Algo

Bastante

Mucho

8

Adquiero conocimientos sobre las medidas de prevención primaria en mi ámbito de actuación

Nada

Poco

Algo

Bastante

Mucho

9

Adquiero conocimientos sobre las medidas de prevención secundaria en mi ámbito de actuación

Nada

Poco

Algo

Bastante

Mucho

10

Adquiero conocimientos sobre las medidas de prevención terciaria en mi ámbito de actuación

Nada

Poco

Algo

Bastante

Mucho

11

Aumenta mi conocimiento sobre nuevas tecnologías (por ejemplo, tecnologías de rehabilitación o bioingeniería) que pueden ser aplicadas en mi ámbito de actuación y otros

Nada

Poco

Algo

Bastante

Mucho

12

Incorporo nuevas técnicas de evaluación e intervención de mi ámbito de actuación

Nada

Poco

Algo

Bastante

Mucho

13

Permiten una aproximación a la investigación y a la búsqueda de información sobre modelos de evaluación e intervención

Nada

Poco

Algo

Bastante

Mucho

14

Permiten contrastar empíricamente las distintas posibilidades de evaluación e intervención

Nada

Poco

Algo

Bastante

Mucho

15

Mantiene informado sobre los nuevos protocolos de actuación

Nada

Poco

Algo

Bastante

Mucho

16

Adquiero conocimientos sobre otros instrumentos de evaluación y diagnóstico utilizados (escalas, test, cuestionarios, pruebas de cribado, entrevistas diagnósticas, etc.)

Nada

Poco

Algo

Bastante

Mucho

17

Incrementa mis conocimientos sobre el sistema familiar, sus peculiaridades culturales, económicas, organizativas, etc.

Nada

Poco

Algo

Bastante

Mucho

18

Mantiene actualizados mis conocimientos sobre los principales modelos de intervención familiar

Nada

Poco

Algo

Bastante

Mucho

19

Promueve el análisis del rol de los padres, demás miembros de la familia y profesionales en los distintos modelos

Nada

Poco

Algo

Bastante

Mucho

20

Fomenta el espíritu crítico y la reflexión sobre los servicios de atención temprana y su utilidad para el contexto familiar y social

Nada

Poco

Algo

Bastante

Mucho

E: Promoción del desarrollo profesional en comunidades virtuales

1

¿En su ámbito laboral se potencia el desarrollo profesional a través de las comunidades virtuales? ¿Cómo?

No

¿Cómo?

Número de horas invertidas al año

N.º horas:

2

¿Aporta algún reconocimiento en su carrera profesional? ¿Qué tipo de reconocimiento?

No

Tipo:

3

¿Recibe alguna compensación por el uso de las comunidades virtuales? ¿Qué compensación recibe?

No

¿Cuál?

4

¿Realiza otro tipo de acciones formativas para favorecer su desarrollo profesional? Por ejemplo, cursos, participación en jornadas, proyectos… Indique el tipo y número de horas al año

No

Tipo:

N.º horas:

_______________________________

1 Autora de correspondencia.

2 Los profesionales de los Centros de Atención Infantil Temprana (CAIT) aceptaron participar en la investigación de manera limitada debido a su carga de trabajo, optando por completar el cuestionario en lugar de formar parte del panel de expertos. No obstante, varios de los académicos que conforman el panel de expertos han dirigido y/o participado en proyectos de I+D+I de Atención Temprana.