Content uploaded by Pilar Colás Bravo
Author content
All content in this area was uploaded by Pilar Colás Bravo on Apr 15, 2015
Content may be subject to copyright.
1. Introducción
No cabe duda que las denominadas
tecnologías de la información y la comuni-
cación (TIC) están contribuyendo a trans-
formar de forma acelerada la cultura cien-
tífica en las ciencias experimentales, de la
misma manera que su presencia es tam-
bien evidente en la investigación cualita-
tiva. La incorporación progresiva de inter-
net y las herramientas digitales en las
prácticas de la investigación cualitativa,
está transformando de forma silenciosa los
métodos y procedimientos de investigación
más tradicionales.
Algunos autores entre los que cabe ci-
tar a Estalella y Ardévol (2011) identifican
esta evolución con el concepto de e-rese-
arch. Este concepto se refiere al proceso de
incorporación progresiva de las tecnolo-
gías en la producción de conocimiento de
las ciencias sociales. Sus efectos se obser-
van en el aumento y facilidad de acceso a
la información, la multiplicación de las po-
sibilidades de colaboración entre sujetos y
objetos de investigación y la ampliación
de nuevos espacios y herramientas para la
obtención de datos empíricos. En este sen-
tido estamos asistiendo a un fenómeno
nuevo y único como es la transformación de
los métodos y técnicas de investigación
cualitativa, debido a las posibilidades que
ofrecen las tecnologías digitales, incorpo-
rando un abanico cada vez más amplio y
variado de herramientas digitales de in-
vestigación.
Concretamente la digitalización de los
métodos y técnicas de investigación es el
resultado de la convergencia de tres tec-
nologías: las redes de comunicación, las
bases de datos masivas y la computación
distribuida (Wouters y Beaulieu, 2006).
Las redes de telecomunicación posibilitan
mantener a distancia un intercambio de in-
formación y/o comunicación, ya sea ésta
en forma de voz, datos, imágenes o una
mezcla de los anteriores. Las bases masi-
vas de datos ofrecen información organi-
zada a la que se puede acceder y obtener
Aplicaciones de las tecnologías de la
información y la comunicación en la
investigación cualitativa
por Pilar COLÁS BRAVO y Juan DE PABLOS PONS
Universidad de Sevilla
77
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
informaciones precisas de forma selectiva
y rápida. Y por último la computación dis-
tribuida (redes de ordenadores) permite
compartir los recursos informáticos entre
investigadores. Es decir, con esta tecnolo-
gía, diferentes ordenadores dentro de una
red comparten uno o más recursos. Estas
tres tecnologías subyacen, por tanto, en
las opciones digitales que pueden utili-
zarse o aplicarse en la investigación cuali-
tativa.
De igual manera, las tecnologías digi-
tales también están afectando a lo que po-
demos denominar la cultura científica cua-
litativa, ya que no solamente se están
transformando los procedimientos cientí-
ficos, sino que se ofrecen nuevos lenguajes,
discursos, espacios, programas e interro-
gantes de investigación, cambiando sus-
tancialmente las prácticas científicas y las
formas de comunicación (Lewins y Silver,
2007; Markham, 2004). Este cambio de
cultura se concreta en la intensificación
de la comunicación entre los investigado-
res, el aumento de la difusión de la infor-
mación y el desarrollo de nuevas formas de
colaboración (Atkins, 2003; Welshons,
2006; Nentwich, 2003; Jankowski, 2007).
Por tanto, como plantea Hine (2008, 34), la
incorporación de tecnologías a la investi-
gación no queda únicamente limitada a
una aplicación instrumental de determi-
nados dispositivos, sino que abre un nuevo
escenario (científico) en el que se reformu-
lan aspectos teóricos, metodológicos y epis-
témicos.
A nivel instrumental, en la metodolo-
gía cualitativa de forma específica, las he-
rramientas digitales se incorporan prefe-
rentemente en los procesos de muestreo,
en la recogida de datos y en el análisis de
la información (Gibbs, 2002). Concreta-
mente las tecnologías que han suscitado un
mayor interés en la investigación cualita-
tiva son los programas de software para
análisis cualitativo de datos (Gibbs,
2007),las múltiples aplicaciones desarro-
lladas para internet, especialmente a par-
tir de la denominada Web 2.0 y la genera-
lización del video digital (Fielding, 2008;
Woolgar, 2004; Meyer y otros, 2008). A és-
tas se añade toda una serie de dispositivos
que han sido probados tanto en la produc-
ción de datos, como en el análisis y la re-
presentación: ordenadores portátiles
(PDA), tablets,smartphones, etc., utiliza-
dos para el registro de datos durante el tra-
bajo de campo (Gravlee, 2006; Ice, 2004),
teléfonos móviles para la distribución de
cuestionarios o tecnologías visuales (foto y
video) para el registro y la representación
de los datos audiovisuales (Knoblauch,
2008). El papel relevante asumido por in-
ternet resulta creciente y ya ha tomado
formas concretas como el denominado
cloudcomputing o computación en la nube,
una tendencia que se impondrá en los pró-
ximos años, basada en la idea de que los so-
portes tecnológicos serán ajenos al usuario.
El correo electrónico en Web o Facebook
son ejemplos ya consolidados de cómo se
utiliza una aplicación sin necesidad de ins-
talarla en servidores propios.
Sin embargo, la inclusión de las TIC
en la investigación cualitativa no ha su-
puesto su uso generalizado. Autores, como
Cisneros (2003) han señalado que dos dé-
cadas después del desarrollo inicial de
software para el análisis de datos cuali-
tativos, sólo ha sido incorporado por un
número limitado de investigadores, y aún
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
78
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
se mantiene un notable escepticismo y
distancia sobre esta tecnología (Valles,
2005, 150). En un estudio realizado en el
Reino Unido sobre la respuesta de los in-
vestigadores sociales hacia las TIC, Meyer
y otros (2008, 15) concluyen que la adop-
ción de éstas es una tendencia minoritaria
en las ciencias sociales. Otro dato de re-
ferencia son las publicaciones sobre in-
vestigación educativa realizada con me-
todología cualitativa, en ellas el uso de
las tecnologías se reduce casi siempre a
una aplicación limitada de software en el
análisis de datos.
De ahí que consideremos de interés
presentar un breve panorama de los re-
cursos y procedimientos con soporte digital
que son susceptibles de integrarse en la in-
vestigación cualitativa en el momento ac-
tual. Tal como plantean en este mismo nú-
mero de la REP, los profesores Tejedor y
García-Valcárcel [1] las TIC tienen una
enorme aplicabilidad en todas las etapas
del proceso de la investigación educativa,
desde la elaboración de los problemas de
investigación, la revisión de la literatura,
pasando por la recogida y análisis de datos,
hasta la difusión y publicación de resulta-
dos mediante los informes de investiga-
ción. Muchos de estos recursos tecnológi-
cos, aplicables a la investigación educativa
en general, son en buena medida también
aplicables a la investigación cualitativa.
En nuestro caso, nos ceñiremos a dar
cuenta de los aspectos más particulares
que atañen a la especificidad de la investi-
gación cualitativa. La particularidad o idio-
sincrasia del proceso de investigación
cualitativa nos servirá de referencia como
esquema para sistematizar dichas aporta-
ciones.
2. Características metodológicas de
la investigación cualitativa
Para comprender el valor y el potencial
de las tecnologías digitales en este campo
entendemos que es previo presentar algu-
nas de las peculiaridades del enfoque
cualitativo. En primer lugar, los estudios
cualitativos se realizan en contextos natu-
rales. En ningún caso son construidos, ni
modificados artificialmente. Es decir que
las situaciones naturales son la fuente di-
recta de los datos que se obtienen. De ahí
que el valor añadido de las TIC sea facili-
tar el acercamiento a los contextos natu-
rales.
Otro aspecto clave es que el investiga-
dor se convierte en el principal instru-
mento de recogida de datos. Guba y Lincoln
(1985) exponen como ventajas de esta fór-
mula: Su adaptabilidad para recoger in-
formación simultánea sobre múltiples fac-
tores y a varios niveles, su capacidad
holística, es decir, competencia para perci-
bir el contexto de forma global, idoneidad
para captar e interpretar respuestas idio-
sincrásicas y únicas,posibilidad de apre-
hender simultáneamente conocimiento tá-
cito (intuiciones, sentimientos, sensaciones,
etc.), proposicional y empírico.
La tercera característica es la utiliza-
ción de técnicas de recogida de datos abier-
tas, tales como, entrevistas en profundi-
dad, observaciones, relatos, discursos,
narraciones, historias de vida, etc. Estas
técnicas se orientan a recabar información
de forma global, amplia y subjetiva.
Otra peculiaridad de la metodología
cualitativa es el muestreo intencional. Su
Aplicaciones de las tecnologías de la información y la comunicación…
79
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
80
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
objetivo no es representar a una pobla-
ción, de forma estadística, sino aportar el
máximo de información partiendo de un
contexto concreto. Por tanto la calidad de
la muestra se obtiene mediante la colabo-
ración de sujetos e instituciones, que por su
posición, pueden aportar datos relevantes
al objeto de estudio.
En la fase del análisis de datos la me-
todología cualitativa utiliza preferente-
mente procedimientos inductivos con ob-
jeto de identificar variables, establecer
posibles hipótesis, y elaborar explicacio-
nes que den origen a teorías interpretati-
vas de los fenómenos. Y por último, indicar
que el proceso metodológico seguido no es
lineal sino que es emergente y en cascada.
Es decir, se va concretando y perfilando a
medida que se desarrolla la investigación,
existiendo una estrecha conexión y articu-
lación entre muestreo, recogida de datos,
hipótesis, análisis de datos, etc.
Además de la especificidad del proceso
de investigación, también la metodología
cualitativa cuenta con sus propios diseños
de investigación. De forma sintética pode-
mos decir que la fenomenología, la etno-
grafía y el interaccionismo simbólico,
constituyen tres fundamentos teó-
rico–metodológicos que dan origen y sus-
tentan los principales diseños que se apli-
can en la investigación cualitativa.
El método fenomenológico se ocupa de
la experiencia humana y de su significado,
por tanto se centra en las descripciones
que los sujetos hacen de sus vivencias. Las
investigaciones en esta línea tratan de pro-
fundizar en cómo los sujetos representan el
mundo y cómo a su vez, éste queda repre-
sentado en la persona. Su propósito es des-
cubrir las formas de comprensión que
tienen las personas de los fenómenos ex-
perimentados para encuadrarlos dentro de
categorías conceptuales. En Colás (1998)
pueden verse aplicaciones educativas de
este enfoque y su potencial como aporta-
ción al conocimiento científico pedagógico.
Los diseños etnográficos se interesan
por describir y analizar culturas y comuni-
dades para explicar las creencias y prácticas
del grupo investigado, con el objeto de des-
cubrir los patrones culturales que rigen la
actividad de los grupos. Por tanto la cultura
es la temática central. Por cultura se en-
tiende todo lo que los humanos aprenden y
generan, lo que se plasma en “patrones de
conducta” y “ patrones para la conducta”.
Los primeros son fácilmente observables y
se refieren a la estructura social y su orga-
nización. Los “patrones para la conducta”
son vistos como fenómenos o sistemas men-
tales que rigen las decisiones. Por tanto la
cultura se refiere a la suma total de conoci-
mientos, actitudes y patrones habituales de
conducta que comparten y transmiten los
miembros de una sociedad particular. Esta
metodología se aplica para comprender las
formas de vida de los grupos y su cultura,
así como los aspectos particulares de las
mismas. Por tanto esta metodología es su-
gerente y muy apropiada para investigar te-
máticas, tales como la organización cultural
y social de los centros educativos.
El Interaccionismo Simbólico es consi-
derado por los sociólogos como el principal
enfoque de la metodología cualitativa. De-
riva de la Escuela de Chicago de las déca-
das 1920 y 1930. Los principios básicos en
los que se sustenta este enfoque son: a) las
personas actúan sobre las cosas en base al
significado que las cosas tienen para ellos,
b) la atribución del significado a los objetos
es un proceso continuo que se realiza a
través de símbolos. Los símbolos son sig-
nos, lenguajes; gestos, etc. y por último c)
la atribución del significado es producto
de la interacción social en la sociedad hu-
mana. Desde este enfoque los comporta-
mientos no son provocados por fuerza in-
ternas (instintos), ni por fuerzas externas
(normas culturales y estructuras sociales),
sino que son el resultado de la reflexión in-
terpretativa personal de los significados
derivados socialmente. De ahí que las per-
sonas mantengan un proceso constante de
interpretación y definición de situaciones
que origina un cambio de percepción. Por
tanto, desde esta perspectiva, el principal
objetivo de investigación es comprender el
proceso de evolución de las percepciones e
interpretaciones. Y en este proceso la in-
teracción entre los individuos y el grupo so-
cial es un punto crucial. A través de estas
interacciones se conforman y transforman
conceptualizaciones y reinterpretaciones
que rigen las formas de acción. Resulta
una metodología muy pertinente para in-
vestigar los procesos de aprendizaje, y la
interacción educativa como herramienta
para la construcción de estructuras cogni-
tivas, entre otras.
Otro aspecto particular de la metodo-
logía cualitativa es la resolución de la va-
lidez y fiabilidad de los resultados de la in-
vestigación.La investigación cualitativa
dispone de procedimientos específicos para
garantizar la validez y fiabilidad de los re-
sultados obtenidos. En el cuadro 1 se iden-
tifican las técnicas y procedimientos que se
aplican para garantizar la rigurosidad
científica. En él consta el término acuñado
en la metodología cualitativa con su co-
rrespondencia con el utilizado en la meto-
dología cuantitativa. En dichos procedi-
Aplicaciones de las tecnologías de la información y la comunicación…
81
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
CUADRO 1: Técnicas cualitativas para garantizar la validez y fiabilidad
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
82
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
mientos las TIC ocupan un lugar relevante
porque indudablemente facilitan de forma
ostensible la triangulación, la comproba-
ción con los participantes, el muestreo te-
órico, la recogida de abundantes datos, etc.
Tras esta breve síntesis de las pecu-
liaridades de la investigación cualitativa,
en los siguientes apartados mostraremos
algunas aplicaciones de las TIC en proce-
sos de investigación cualitativa.
3. Utilización de las TIC para la selec-
ción muestral
La selección de la muestra en la in-
vestigación cualitativa adquiere un sen-
tido singular y propio, acorde con sus fun-
damentos epistemológicos. La muestra
cualitativa tiene como objetivo obtener la
máxima información posible para funda-
mentar y generar una teoría, basándose en
criterios pragmáticos y teóricos antes que
probabilísticos. De ahí que la selección
muestral no busque la uniformidad o la ge-
neralización estadística, sino las máximas
variaciones en los sujetos o muestras. Por
tanto, en los estudios cualitativos la mues-
tra tiene un carácter intencional, y no tiene
como meta la generalización de los resul-
tados (Colás y Buendía, 1992). Su inten-
cionalidad es teórica, es decir, ampliar el
abanico y rango de los datos tanto como sea
posible, a fin de obtener la máxima infor-
mación de las múltiples realidades que
pueden ser descubiertas. Patton (1980)
llega a identificar seis modalidades de
muestreo que en ningún caso tienen como
propósito generalizar los resultados: mues-
tras extremas, (casos inusuales que pro-
porcionan datos relevantes), muestras de
casos típicos o especiales, muestreo de má-
xima variación, muestreo de casos críti-
cos, muestreo de casos sensitivos y mues-
treo conveniente. De ahí que los investi-
gadores cualitativos buscan en el mues-
treo “casos” que representen la mayor
diversidad posible, a fin de lograr la canti-
dad máxima de variación en la información
(Morse, 1998).
En la selección muestral de carácter
cualitativo tres aspectos resultan de inte-
rés, la identificación de la muestra, la lo-
calización de la muestra yla información
que aporta la misma. Para la identificación
de la muestra las redes sociales tales como
Facebook,Twitter,Xing,Linked-In, etc.
agrupan colectivos que comparten intere-
ses y por tanto aglutinan comunidades que
comparten rasgos similares y por tanto
son fuentes importantes para identificar
muestras de interés para los investigado-
res. Por tanto, estas redes, planteadas
inicialmente para un uso de ocio y comu-
nicación interpersonal, pueden ser redi-
reccionadas para su aplicación científica.
De ahí que conformen espacios interesan-
tes para la localización de “casos” de inte-
rés en la investigación cualitativa. Por
tanto, a nivel científico estas redes facilitan
la tarea de localizar muestras o casos que
tengan unas determinadas características,
establecer contacto y obtener información
de ellas. Estas aplicaciones tecnológicas
son especialmente relevantes en los casos
de poblaciones o muestras de difícil acceso.
Un ejemplo de lo anteriormente plan-
teado lo encontramos en el trabajo de
Matthews y Crame (2008) que utilizan las
redes sociales para localizar colectivos es-
pecíficos y que constituyen, según los au-
tores, poblaciones ocultas o invisibles so-
cialmente; además de otros colectivos
Aplicaciones de las tecnologías de la información y la comunicación…
83
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
marginales tales como delincuentes, dro-
gadictos, inmigrantes, etc., cuya localiza-
ción y acceso son problemáticos para obte-
ner información y triangular los resultados
obtenidos. De tal manera que, en esta in-
vestigación se utiliza la videoconferencia
como un método de recolección de datos
cualitativos, y las comunidades virtuales
como un método de conexión de los parti-
cipantes del estudio, para conseguir una
triangulación de la información obtenida.
Los foros también abren espacios que
posibilitan acceder a realidades que resul-
tarían difíciles, inaccesibles o imposibles si
estas tecnologías no mediaran en el pro-
ceso de investigación cualitativa. Tal es el
caso del estudio de Illingworth (2001) que
ante la imposibilidad de conseguir la auto-
rización de un hospital para efectuar un
estudio sobre las técnicas de reproducción
asistida decide recurrir a internet y hacer
su trabajo empírico en varios foros en los
que participan mujeres que han estado so-
metidas a estos tratamientos. Muchas de
sus informantes admitieron que no habrían
accedido a participar en el estudio si hu-
bieran tenido que someterse a entrevistas
cara a cara en el contexto del hospital, como
pretendía inicialmente la autora. Reclutar-
las a través de un foro y mantener las
relaciones con ellas a través de internet
permitió proteger durante toda la investi-
gación su anonimato; con el resultado de
que la participación fue más elevada y más
abierta de lo que la investigadora esperaba.
Una situación similar ocurre en un es-
tudio sobre adolescentes que lleva a cabo
Hessler (2003) en la que se usa el correo
electrónico para relacionarse con ellos y
obtener información de forma periódica.
Este procedimiento subsanó los problemas
propios de recelo y cohibición de los ado-
lescentes (observados previamente) ante
la presencia del investigador. Fue precisa-
mente la posibilidad de articular esa rela-
ción mediada tecnológicamente lo que pro-
porcionó las condiciones para aportar
información necesaria para completar el
estudio. Inviable, por otra parte, sin estos
procedimientos.
Por otra parte, las comunidades vir-
tuales permiten la interacción entre suje-
tos o grupos específicos o caracterizados
por determinados perfiles. De lo que se
puede derivar la triangulación de fuentes,
la aplicación de diseños basados en el in-
teraccionismo simbólico y la localización de
casos especiales, entre otras aplicaciones.
Las comunidades virtuales suponen re-
cursos digitales que tienen aplicaciones en
el trabajo de muestras cualitativas en
tanto ofrecen posibilidades de intercam-
biar información (obtener respuestas de
los sujetos de la muestra), establecer co-
municación simultánea con ellos y debatir
normalmente a través de la participación
de moderadores. Estas aplicaciones son
muy ajustadas a la idiosincrasia de la me-
todología cualitativa, ya que permiten in-
teraccionar con los sujetos de la muestra y
negociar los significados e interpretaciones
de la información.
Por tanto y como síntesis, las tecnolo-
gías digitales en el muestreo cualitativo
tienen por un lado, el potencial de acceder
a poblaciones de difícil acceso y por otro
propiciar la participación activa de los su-
jetos investigados, reduciendo o elimi-
nando las dificultades de acceso a estos
casos. Las TIC en este sentido, constituyen
una valiosa alternativa en la investigación
cualitativa cuando se precisa reclutar y
reunir datos de grupos dispersos geográfi-
camente, o de difícil acceso. Estas tecnolo-
gías también facilitan el acceso a un mayor
número de sujetos o informantes específi-
cos, y consecuentemente, permiten robus-
tecer los resultados de la investigación al
permitir incluir un mayor número de casos
que representen máximas variaciones de la
muestra, y por tanto ampliar la referencia
muestral de la que extraer conclusiones,
repercutiendo a su vez en una mayor cali-
dad científica.
4. Las tecnologías digitales en la re-
cogida de datos en la investigación
cualitativa
El mayor impacto de las tecnologías
en la investigación cualitativa lo observa-
mos en los procedimientos o formas de re-
coger los datos, así como en la manera de
analizarlos. La metodología cualitativa uti-
liza técnicas de recogida de datos abiertas,
ocupándose preferentemente de datos de
carácter textual. De ahí que las técnicas
que preferentemente se utilizan son las
entrevistas cualitativas, la observación, y
las técnicas narrativas, entre otras.
En las entrevistas cualitativas, los
avances en las tecnologías digitales han
dado a los investigadores cualitativos nue-
vas herramientas, como las cámaras web y
las videoconferencias que permiten inte-
raccionar con personas que están geográ-
ficamente lejanas o dispersas, sin la con-
siguiente pérdida de datos procedentes de
sus reacciones gestuales, contextos o de
información tácita, al utilizar técnicas más
convencionales como entrevistas escritas o
teléfonos analógicos.
También contamos con experiencias en
las que se hace uso del chat o del correo elec-
trónico para hacer entrevistas (Hessler,
2003; Selwyn y Robson, 1998).Estos autores
utilizan internet, específicamente las salas
de chat, como mecanismo para la recolección
de datos cualitativos a través de entrevistas
individuales y en grupo. Técnicamente ello
se puede complementar con la grabación si-
multánea de sonido a través de software
específico, que posibilita crear archivos di-
gitales de voz de las entrevistas para su al-
macenamiento. Además, el investigador
también puede utilizar el software de reco-
nocimiento de voz, que está integrado ya en
muchas aplicaciones, para crear transcrip-
ciones textuales de las entrevistas.
A nivel técnico contamos con dispositi-
vos específicos para las funciones de
recogida de datos mediante entrevistas ta-
les como CAPI (Computer-Assisted Personal
Interviewing), MCAPI (Mobile Computer-
Assisted Personal Interviewing), CAI (Com-
puter-Assisted Interviewing), CATI (Com-
puter-Assisted Telephone Interviewing),
ACASI (Audio Computer-Assisted Self-In-
terviewing), T-ACASI (Telephone Audio
Computer-Assisted Self-Interviewing), o
CARI (Computer-Assisted Recorded Inter-
viewing) que es actualmente el principal
método utilizado para realizar entrevistas.
Por tanto, en el momento actual contamos
con una gran variedad de recursos tecnoló-
gicos que facilitan la realización de entre-
vistas a distancia y que pueden ser graba-
das directamente en formato digital (MP3,
Smartphones, etc.), para poder ser compar-
tidas o analizadas más fácilmente.
Tradicionalmente la observación en la
metodología cualitativa se ha registrado
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
84
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
85
Aplicaciones de las tecnologías de la información y la comunicación…
mediante notas de campo, fotografías, gra-
baciones en video o manejo de documenta-
ción. Sin embargo, los desarrollos tecnoló-
gicos han supuesto la incorporación de la
digitalización a la recogida de información,
ya sea en vídeo, audio o escaneado de do-
cumentos. Esto ha supuesto, no sólo que la
tecnología sea más accesible y más am-
pliamente utilizada, sino nuevas formas
de manejo y de análisis de los datos reco-
gidos. Esto puede verse especialmente en
el caso del video digital, en el que a través
de excelentes programas de edición digital
se puede visualizar, examinar y editar fá-
cilmente la grabación, abriendo nuevas po-
sibilidades para la investigación cualita-
tiva. Un ejemplo lo podemos ver en la
investigación llevada a cabo por Secrist, De
Koeyer, Bell, y Fogel (2002) que utilizan el
video digital para analizar las interaccio-
nes entre madres e hijos como base para la
comprensión del desarrollo infantil. Este
software permite reorganizar, presentar y
navegar a través del material registrado, lo
que posibilita seleccionar clips de vídeo de
sólo aquellas conductas de interés e ins-
peccionar las conductas relevantes y llegar
a conclusiones analíticas. Ello a su vez
aporta rigurosidad a la investigación cua-
litativa. En este caso referenciado se uti-
liza el Adobe Premiere, para crear, de
forma rápida y fiable, las secuencias per-
tinentes acerca del desarrollo infantil.
Pero también contamos con estudios
que muestran aplicaciones de las tecnolo-
gías a estudios etnográficos, así Díaz de
Rada (2010) incluye internet como parte de
su trabajo de campo sobre los samis no-
ruegos, cuando constata que desde Madrid
puede acceder en directo a las reuniones
del Parlamento sami que se celebran a mi-
les de kilómetros. Por tanto estas tecnolo-
gías hacen más viables los estudios de
corte etnográfico, de difícil ejecución sin las
mismas. De hecho surge un nuevo campo
de estudio en la etnografía denominado
etnografía visual que es la consecuencia de
la incorporación de las TIC a los procesos
de recogida de datos, así como la constitu-
ción de comunidades virtuales que se con-
vierten en objetos de estudios etnográficos.
Las tecnologías también se incorporan
a otras formas tradicionales de recogida de
datos tales como las narrativas y las inte-
racciones personales (Gratton y O’Donnell,
2011; y Mondada, 2008). Un ejemplo de es-
tas aplicaciones las encontramos en el tra-
bajo de Koch y Zumbach, (2002). Ellos ha-
cen uso del video digital y de software de
análisis visual para estudiar los patrones
comunicativos de interacción verbales y
no verbales en la realización de tareas en
pequeños grupos. Gracias a estas tecnolo-
gías se pudieron detectar patrones de in-
teracción intra-grupal difíciles de detectar
sin ellas.
Sin embargo, el uso de la videoconfe-
rencia como un método de recolección de
datos cualitativos sigue siendo relativa-
mente inexplorado. También se encuentra
en un estado incipiente la utilización de los
foros y las listas de correo electrónico con
una finalidad investigadora en opciones
tan interesantes como la realización de
grupos de discusión.
También la recogida de datos docu-
mentales se ha visto favorecida por inter-
net. Así, por ejemplo, las páginas web de
los centros educativos son fuentes inesti-
mables de información y datos, ya que a
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
86
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
través de ellas se puede acceder a las me-
morias y los planes anuales de centro, así
como a actividades y materiales escolares.
La difusión pública de esta información
tiene consecuencias muy positivas para la
investigación cualitativa, facilita la dispo-
nibilidad de fuentes que pueden tener muy
diversas aplicaciones: triangulación de la
información, obtener información comple-
mentaria o datos secundarios, selección de
casos, etc.
En la recogida de datos, las tecnologías
anteriormente referidas, se complemen-
tan con otros dispositivos que se han utili-
zados tanto en la producción de datos,
como en el análisis y la representación:
dispositivos como los denominados PDA
(personal digital assistant) que pueden re-
alizar muchas de las funciones que hace un
ordenador (ver películas, crear documen-
tos, juegos, correo electrónico, navegar por
internet, reproducir archivos de audio,
etc.), muy útiles para el registro de datos
durante el trabajo de campo (Gravlee,
2006; Ice, 2004), teléfonos móviles de alta
gama para entrevistas o tecnologías vi-
suales (foto y video) para el registro y la re-
presentación de los datos visuales (Kno-
blauch, 2008).
Por tanto, como síntesis, los trabajos
aquí presentados muestran que la incor-
poración de las tecnologías de internet a la
investigación cualitativa enriquece y faci-
lita la producción de datos, el anonimato,
elimina la distancia espacial con los suje-
tos del estudio y potencia la sincronía de la
comunicación. En suma, crea unas condi-
ciones que hacen posible acceder, recabar
y registrar gran cantidad de información
multimodal.
Por tanto la conversión de internet en
un medio para la investigación cualitativa,
lleva a configurar un nuevo escenario cien-
tífico con la denominación de “métodos on-
line de investigación cualitativa”. En
este concepto se engloban tanto las adapta-
ciones y reformulaciones de técnicas y mé-
todos convencionales, como otras propuestas
singulares e innovadoras, principalmente
fundamentadas en el análisis de hiperenla-
ces como el análisis de esferas web (web sp-
hereanalysis) o la investigación de redes de
hiperenlaces (web hyperlinkresearch), ba-
sadas también en el análisis de hiperenlaces
y destinadas específicamente a la etnogra-
fía, dando origen a denominaciones como
“etnografía conectiva” o “etnografía en red”.
5. El apoyo de las TIC para el análisis
de datos
En lo que respecta al análisis cualita-
tivo de datos, Karsenti y Lira (2011) plan-
tean que las tecnologías digitales posibili-
tan, un mayor rigor en los procedimientos,
consecuencia de un manejo más preciso de
datos, así como la posibilidad de trabajar
con una mayor cantidad de ellos y, por úl-
timo, llevar a cabo un análisis colaborativo
(como es el caso de la función «Merge» del
programa NVIVO que permite el análisis
multi-sites). También favorecen la trian-
gulación metodológica, al posibilitar un
tratamiento complementario con técnicas
estadísticas. En este sentido las TIC per-
miten dotar de un mayor rigor científico a
la investigación cualitativa.
La mayoría de los programas de aná-
lisis cualitativo de datos se basan y fun-
damentan en la metodología del análisis de
contenido (Miles y Huberman, 1994). El
análisis de contenido es, en síntesis, un
método mediante el cual se extraen y sacan
a la luz las ideas fundamentales conteni-
das en el material recogido, así como los
elementos constitutivos de la información
analizada. Las TIC facilitan todo el proceso
analítico. Los programas de software hoy
día existentes son, entre otros, ETHNO-
GRAPH [2], HYPERRESEARCH [3],
ATLAS.TI [4], NVIVO, NUD*IST [5], QDA
MINER [6] o MAXQDA [7].Sus versiones
de prueba están normalmente disponibles
en línea durante 30 días en las direcciones
indicadas en las correspondientes notas
de este artículo. Estos programas consti-
tuyen un importante apoyo técnico en las
diferentes fases del análisis cualitativo.
Facilitan en un primer momento la clasi-
ficación, organización y recuperación de la
información. En este sentido permiten in-
cluso una codificación automática de la in-
formación, recuperar de forma instantá-
nea los segmentos de información
asociados a determinados códigos, así como
hacer rectificaciones automáticas de cate-
gorías en la información afectada por las
reformulaciones de códigos. También es
posible generar cuantificaciones o fre-
cuencias de aparición de códigos o catego-
rías para un posterior tratamiento de ín-
dole cuantitativa y/o cualitativa. Siendo
en todos los casos automática su traslación
a matrices de datos compatibles con soft-
ware estadístico.
Los programas informáticos actuales
de análisis cualitativo de datos van más
allá de la clasificación, organización y re-
cuperación de la información. Algunos pro-
gramas posibilitan establecer relaciones e
hipótesis de trabajo así como elaborar teo-
rías explicativas del fenómeno estudiado.
Así por ejemplo, el programa NVIVO, que
es la versión moderna del muy popular
NUD*IST permite el desarrollo de concep-
tos, así como establecer relaciones entre los
datos. Una de las principales ventajas de
este programa es la creación de matrices
de respuestas proporcionadas por diferen-
tes “casos” o grupos identificados. Otros
avances tecnológicos estriban en la posibi-
lidad de codificación de datos no textuales
(imágenes, sonidos y videos), como en el
caso de los programas NVIVO, ATLAS.TI
e HYPERRESEARCH.
Concretamente el programa ATLAS.TI,
presenta una función que permite crear
diagramas conceptuales o estructuras teó-
ricas, presentando de forma gráfica rela-
ciones entre conceptos e incluso proyeccio-
nes teóricas de forma sencilla y clara.
6. Calidad de la investigación cualita-
tiva y TIC
Finalmente, cabe indicar también la
relevancia de las tecnologías aquí mencio-
nadas en el cumplimiento de los criterios
de rigurosidad científica de la investiga-
ción cualitativa. Así, las interacciones so-
ciales mediadas por las tecnologías digita-
les, generan abundantes registros
materiales (páginas web, imágenes, hiper-
textos, etc.) que son muy a menudo per-
manentes y fácilmente accesibles, lo que
aporta confirmabilidad a la investigación,
al propiciar un registro mayor de datos
empíricos mecánicos .Tradicionalmente la
mayor parte de las interacciones sociales
en contextos cara a cara tienen una natu-
raleza efímera de modo que sólo a través
de la práctica del investigador (tomando
notas, realizando grabaciones, etcétera) es
posible preservar registros materiales de
esas interacciones; las interacciones socia-
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
87
Aplicaciones de las tecnologías de la información y la comunicación…
les mediadas por las tecnologías digitales,
en cambio, producen registros materiales
recuperables sin menoscabo de su calidad
y fácilmente accesibles. De tal manera que
un hiperenlace o un comentario en un foro
son registros que frecuentemente no pue-
den ser modificados y que se hacen visibles
en muchos lugares a la vez. Esta condición
de permanencia y accesibilidad convierte a
las tecnologías en recursos científicos de
gran valor para asegurar la calidad de la
investigación cualitativa.
La contrastación empírica de los datos
es otra faceta que se ve enormemente fa-
cilitada por las tecnologías digitales. Así,
por ejemplo, tradicionalmente los datos de
una investigación cualitativa procedentes
de transcripciones de entrevistas y graba-
ciones visuales, solamente eran accesibles
para los investigadores y sólo una parte de
los resultados se hacián públicos a través
de los artículos, libros o presentaciones.
Sin embargo, cuando un investigador ob-
tiene sus datos a través de internet la si-
tuación es diferente, la permanencia y ac-
cesibilidad, de los registros de las
interacciones permite el acceso de terceros
al referente empírico de la investigación, lo
que posibilita cumplir con los criterios de
réplica paso a paso, que se plantea en la in-
vestigación cualitativa. Así, la mera cita de
fragmentos de un foro, enlaces de una pá-
gina web, nombres de usuario, etcétera,
ofrece a terceros la posibilidad de localizar
esos registros y acceder a una parte del re-
ferente empírico de las investigaciones; de
esta forma, los datos empíricos que nor-
malmente permanecen ocultos, quedan
disponibles, permitiendo opciones como la
replicación del estudio. Una consecuencia
de ello es que la actividad investigadora se
hace en este sentido más transparente y se
intensifica el espacio de responsabilidad
de los científicos (accountability) ante la
posibilidad de ser auditados de una forma
más minuciosa por sus pares.
El criterio de credibilidad de la investi-
gación, que afecta a la validez interna y
que se garantiza en la metodología cualita-
tiva mediante la comprobación y contrasta-
ción de los resultados con los informantes,
se ve también enormemente facilitada por
estas tecnologías. Así, el investigador tiene
la opción de publicar los borradores de las
conclusiones del estudio en un área común
en la Red y luego abrir un panel de discu-
sión en este espacio virtual donde los parti-
cipantes pueden enviar sus impresiones y
valoraciones de las conclusiones provisio-
nales, ofreciendo sugerencias y alternati-
vas. Estos recursos tecnológicos facilitan y
hacen posible la participación activa y cola-
borativa de todos los participantes del es-
tudio, cumpliéndose de esta manera el cri-
terio de comprobación de los resultados con
los sujetos integrantes del estudio.
7. A modo de conclusión
Por tanto y como síntesis, las TIC se
presentan como potentes herramientas con
la capacidad para mejorar considerable-
mente la calidad de la investigación cuali-
tativa, teniendo impacto en todos los cri-
terios de calidad tradicionalmente
utilizados en la investigación cualitativa:
credibilidad, transferibilidad, dependen-
cia y confirmabilidad (ver Cuadro 1).Las
TIC facilitan y mejoran los procedimientos
que se aplican en la metodología cualita-
tiva para asegurar su calidad científica,
tales como recogida mecánica de abun-
dantes datos, contrastación de los resulta-
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
88
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
89
Aplicaciones de las tecnologías de la información y la comunicación…
dos con los participantes, triangulación (de
fuentes, metodológica , de informantes,
etc.), el muestreo teórico, y las observacio-
nes persistentes o dilatadas en el tiempo.
Los métodos apoyados en tecnologías
online transforman las circunstancias con-
vencionales para la producción de conoci-
miento en la investigación cualitativa. En
este marco paradigmático, tres dimensio-
nes se ven afectadas y reformuladas en la
producción de datos empíricos: el espacio,
el tiempo y la modalidad comunicativa
(Markham, 2004). Así, la utilización de in-
ternet rompe con las posibles barreras ge-
ográficas de los sujetos de estudio. Si la dis-
tancia puede ser gestionada, el tiempo es
también una variable que resulta modu-
lada en las interacciones generadas en es-
pacios virtuales. Por último, la multimo-
dalidad de la comunicación permite
interacciones basadas en texto, voz o imá-
genes, e incluso la combinación de varias
de ellas, lo que habilita modalidades de
interacción complejas. Por ende, las tecno-
logías aplicadas en la investigación cuali-
tativa crean nuevas opciones que afectan
tanto al acceso a los sujetos como a las for-
mas de registro y recopilación de datos,
así como a las técnicas de análisis. Estas
tecnologías también repercuten de forma
directa y positiva en la validez y fiabilidad
de los resultados de la investigación, inci-
diendo globalmente en la calidad de la in-
vestigación cualitativa.
Dirección para la correspondencia: Pilar Colás Bravo.
Facultad de Ciencias de la Educación. Universidad de
Sevilla. C/ Pirotecnia, s/n. 41013, Sevilla (España). E-
mail: pcolas@us.es.
Fecha de recepción definitiva de la versión definitiva de este
artículo: 1. IX. 2011
Notas
[1] TEJEDOR, J. y GARCÍA-VALCARCEL, A. (2011) Sociedad
Tecnológica e investigación educativa. Revista Española
de Pedagogía. (Consultar este mismo número).
[2] http://www.qualisresearch.com/
[3] http://www.researchware.com/
[4] http://www.atlasti.com/
[5] http://www.qsrinternational.com/products_previous-
products_n6.aspx
[6] http://www.provalisresearch.com/QDAMiner/QDA-
MinerDesc.html
[7] http://www.maxqda.com/
Bibliografía
ATKINS, D. (2003) Revolutionizing Science and Engineering th-
rough Cyberinfrastructure, Informe de la National Science
Foundation Blue-Ribbon Advisory. Panel on Cyberinfras-
tructure (Washington, DC, National Science Foundation).
CISNEROS, C. (2003) Análisis cualitativo asistido por compu-
tadora, Sociologías, 9: 9, pp. 288-313.
COLÁS, P. (1998) Enfoques en la metodología cualitativa: sus
prácticas de investigación, en BUENDÍA, L.; COLÁS, P. y
HERNANDEZ, F. Métodos de Investigación en Psicope-
dagogía (Madrid, McGraw-Hill), pp. 225-249.
COLÁS, P. y BUENDÍA, L. (1992) Investigación educativa (Se-
villa, Alfar).
DÍAZ DE RADA, A. (2010) Cultura, antropología y otras tonte-
rías (Madrid, Trotta).
ESTALELLA, A. y ARDÉVOL, E. (2011) E-research: desafíos y
oportunidades para las ciencias sociales, Convergen-
cia, 18: 55, pp. 87-111. Ver: http://redalyc.uaemex.mx/-
src/inicio/ArtPdfRed.jsp?iCve=10515210004 (Consul-
tado el 20.VI.2011).
FIELDING, N. (2008) Grid Computing and Qualitative Social
Science, SocialScience Computer Review, 26: 3, pp.
301-316.
GIBBS, G. (2002) The Use of New Technology in Qualitative Re-
search. Introduction to Issue 3(2) of FQS, Forum Quali-
tative Social Research, 3:2. Ver: http://www.qualitative-
research.net/index.php/fqs/article/viewArticle/847 (Con-
sultado el 21.VI.2011).
GIBBS, G. (2007) Analyzing qualitative data (Beverly Hills, CA,
Sage).
GRATTON, M. F. y O’DONNELL, S. (2011) Communication tech-
nologies for focus groups with remote communities: a
case study of research with First Nations in Canada,
Qualitative Research, 11: 2, pp. 159-175. Ver:
http://qrj.sagepub.com/content/11/2/159 (Consultado
el 10.VII.2011).
GRAVLEE, C. L. (2006) Handheld Computers for Direct Ob-
servation of the Social and Physical Environment, Field
Methods, 18: 4, pp. 382-397.
GUBA, E.y LINCOLN, Y. (1985) Naturalistic inquiry (Beverly
Hills, CA, Sage).
HESSLER, R. y Otros(2003) Qualitative Research on Adolescent
Risk Using E-Mail: A Methodological Assessment, Quali-
tative Sociology, 26:1, pp. 111-124.
HINE, CH. (2008) Systematics as Cyberscience. Computers,
Change and Continuity in Science (Cambridge, Massa-
chusetts, The MIT Press).
ICE, G. (2004) Technological Advances in Observational Data
Collection: The Advantages and Limitations of Computer-
Assisted Data Collection, Field Methods, 16: 3, pp. 352-
375.
ILLINGWORTH, N. (2001) The Internet Matters: Exploring the
Use of the Internet as a Research Tool, Sociological Re-
search Online, 6: 2. Ver: http://www.socresonline.-
org.uk/6/2/illingworth.html (Consultado el 20.IV.2009).
JANKOWSKI, N. (2007) Exploring e-science: An introduction,
Journal of Computer Mediated Communication, 12: 2.
Ver: http://jcmc.indiana.edu/vol12/issue2/jankowski.-
html (Consultado el 22.IV.2009).
KARSENTI, T. H. y LIRA, M. L. (2011) Las tecnologías de in-
formación y de comunicación (TIC): un componente esen-
cial de la investigación en ciencias humanas, Revista Elec-
trónica Actualidades Investigativas en Educación, 11,
Número Especial, pp. 1-27.
KOCH, S. y ZUMBACH, J. (2002) The Use of Video Analysis
Software in Behavior Observation Research: Interaction
patterns in task-oriented small groups, Forum Qualitative
Sozialforschung / Forum: Qualitative Social Research,
3:2. Ver: http://www.qualitative-research.net/fqs/fqs-
eng.html (Consultado el 20.VI.2011).
KNOBLAUCH, H. (2008) Visual Analysis. New Developments in
the Interpretative Analysis of Video and Photography, Fo-
rum: Qualitative Social Research, 9: 3. Ver: http://nbn-re-
solving.de/urn:nbn:de:0114-fqs0803148 (Consultado el
20.VI.2011).
LEWINS, A. y SILVER, C. (2007) Using software in qualitative
research (Los Angeles, CA, Sage).
MARKHAM, A. (2004) Internet communication as a tool for qua-
litative research, en SILVERMAN, D. (ed.) Qualitative Re-
search: Theory, Methods, and Practice (Thousand Oaks,
CA, Sage), pp. 95-123.
MATTHEWS, J. y CRAME, E. (2008) Using Technology to En-
hance Qualitative Research with Hidden Populations, The
Qualitative Report, 13: 2, June, pp. 301-315. Ver:
http://www.nova.edu/ssss/QR/QR13-2/matthews.pdf
(Consultado el 20.VI.2011).
MEYER, E. T.; SCHROEDER, R. y DUTTON, W. H. (2008) The
Role of e-Infrastructures in the Transformation of Rese-
arch Practices and Outcomes, Proceedings of the Third
Annual Conference, UCLA, February 28-March 1.
MILES, M. B. y HUBERMAN, A. M. (1994) Qualitative data
analysis (2nd ed.) (Thousand Oaks, CA, Sage).
MONDADA, L. (2008) Using Video for a Sequential and Multi-
modal Analysis of Social Interaction: Videotaping Institu-
tional Telephone Calls [88 paragraphs], Forum Qualitative
Sozialforschung / Forum: Qualitative Social Research,
9:3. Ver: http://nbnresolving.de/urn:nbn:de:0114-
fqs0803390 (Consultado el 19.VII.2011).
MORSE, J. M. (1998) Validity by committee. [Editorial], Quali-
tative Health Research, 8, pp. 443-445.
NENTWICH, M. (2003) Cyberscience. Research in the Age of
the Internet (Vienna, Austrian Academy of Sciences
Press).
PATTON, M. Q. (1980) Qualitative evaluation methods (Bever-
ley Hills, CA, Sage).
SECRIST, C.; DE KOEYER, L.; BELL, H. y FOGEL, A. (2002)
Combining Digital Video Technology and Narrative Met-
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
90
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
hods for Understanding Infant Development, Forum Qua-
litative Social Research, 3:2. Ver: http://www.qualitative-
research.net/index.php/fqs/article/view/863 (Consul-
tado el 19.VII.2011).
SELWYN, N. y ROBSON, K. (1998) Using email as a research
tool, Social Research Update, 21, University of Surrey,
Guidford. Ver: http://sru.soc.surrey.ac.uk/SRU21 (Con-
sultado el 15.V.2011).
VALLES, M. (2005) El reto de la calidad en la investigación so-
cial cualitativa: de la retórica a los planteamientos de
fondo y las propuestas técnicas, Reis, 110, pp. 91-114.
WELSHONS, M. (2006) Our Cultural Commonwealth. The report
of the American Council of Learned Societies Commission
on Cyberinfrastructure for the Humanities and Social
Sciences (American Council of Learned Societies, EUA).
WOOLGAR, S. (2004) What happened to provocation in Science
and Technology Studies?, History and Technology, 20: 4,
pp. 339-349.
WOUTERS, P. y BEAULIEU, A. (2006) Imagining e-science be-
yond computation, en HINE, C. (ed.) New Infrastructures
for Knowledge Production: Understanding E-Science
(Hershey, PA, Information Science Publishing), pp. 46-70.
Resumen:
Aplicaciones de las tecnologías de la
información y la comunicación en la
investigación cualitativa
En este artículo se presenta una pers-
pectiva de los recursos digitales que pue-
den ser aplicados a la investigación cuali-
tativa. En él se analiza el impacto que la
incorporación de las tecnologías de la in-
formación y la comunicación (TIC) ha te-
nido sobre el ámbito de la investigación
en ciencias sociales y específicamente, en
los estudios de carácter cualitativo desa-
rrollados en el campo de la educación; así
como los cambios metodológicos que dicha
incorporación ha propiciado. Se muestra la
incidencia que esta relación tiene en la
mejora de la calidad científica de los re-
sultados de investigación. Después de una
breve presentación de las características
metodológicas de la investigación cualita-
tiva, se exponen los recursos tecnológicos
que se incorporan preferentemente en los
procesos de muestreo, en la recogida de
datos y en el análisis de la información. Por
último, se plantean algunas ideas de de-
sarrollo de las TIC en su aplicación a la in-
vestigación cualitativa.
Descriptores: Tecnologías de la Informa-
ción y la Comunicación (TIC), investigación
cualitativa, metodología cualitativa, in-
vestigación educativa.
Summary:
Applications of information and com-
munication technologies to qualitative
research
This article shows an overview of the
digital resources that can be applied to
qualitative research. It analyzes the im-
pact produced by the incorporation of in-
formation technologie sand communica-
tion technologies (ICT) on the field of social
science research. Specifically, this analysis
is focused on developing qualitative studies
in educational research and methodologi-
cal changes that the introduction of ICT
has led. It shows the impact that this re-
lationship has on improving the scientific
quality of research results. After a brief
presentation of the methodological cha-
racteristics of qualitative research, the
technological resources that are preferably
incorporated in the processes of sampling,
data collection and analysis of informa-
tion are explained. Finally, it shows some
future developments of ICT in its applica-
tion to qualitative research.
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
91
Aplicaciones de las tecnologías de la información y la comunicación…
Key Words: Information Communication
Technologies (ICT), qualitative research,
qualitative methodology, educational re-
search.
revista española de pedagogía
año LXX, nº 251, enero-abril 2012, 77-92
92
Pilar COLÁS BRAVO y Juan DE PABLOS PONS
