Tema 3

CAPTULO
11
DISENOS CUASI EXPERIMENTALES

INTRODUCCIN ... ........................................................ .........................................................
328
DISEOS PRE-POST ...............................................................................................................

Diseo pre-post con un solo grupo......................................................................................
Diseo pre-post con grupo de cuasi control........................................................................
Diseo pre-post con cuasi control en una segunda variable dependiente............................
Diseo pre-post con cuasi control en una cohorte anterior .................................................
329
329
331
333
335
DISEOS CON OBSERVACIONES SLO POST..................................................................
338
DISEOS DE SERIE TEMPORAL INTERRUMPIDA...........................................................
341
Diseo simple de serie temporal interrumpida....................................................................

Diseo de serie temporal interrumpida con grupo de cuasi control....................................
Diseo de serie temporal interrumpida con un grupo y dos variables dependientes...........
341
343
343
DISEO DE DISCONTINUIDAD EN LA REGRESIN .......................................................
345
VALORACIN DE PROGRAMAS ................................ ....................... .. .................................
348
VALIDEZ...................................................................................................................................
350
Validez interna.....................................................................................................................
Validez externa ... .. ...... ..... ......... ........ .......... ....... .......... .......... ............ ............ ......... ........... ..
Causacin y cuasi experimentos..........................................................................................
350
351
352
ANLISIS DE DATOS .............................................................................................................
352
Diseo pre-post con un solo grupo......................................................................................

Diseos pre-post con grupos de cuasi control .. .. .. .... .. .. ...... .. .. .... .. .. ... .. .. .... .. .. .. .. .... ... .. .... .. ...
Diseos con medidas slo post............................................................................................
Diseos de serie temporal interrumpida .... .. .. .. .... .. ........... .... .. .. .. .. .... .. ... .. .. .... .. .. .. .... ... .. .. .. .. .
Discontinuidad en la regresin............................................................................................
352
352
354
354
355
GLOSARIO ... .......... ...... .. ..........................................................................................................
356
327
328
Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero
INTRODUCCIN
Al igual que se haca en el captulo anterior, permita el lector que iniciemos la introduccin
de este nuevo tema partiendo de una reflexin basada en los conocimientos hasta ahora
expuestos. Cuando hemos presentado la lgica de la experimentacin, se ha insistido en la
necesidad de que el investigador evaluara la validez de sus experimentos. Dicha validez se
poda articular en tomo a dos ideas: a) la supervisin del proceso en aras de establecer, o contrastar, relaciones causales entre las variables independientes y la dependiente, y b) el establecimiento de las condiciones que permitan la generalizacin de los resultados al mbito
natural en el que aparecen los procesos investigados.
El concepto de validez interna recoge la primera de estas dos ideas mientras que el de
validez externa da cuenta de la segunda. Las acciones que emprende el investigador con el
propsito de obtener un buen nivel de validez interna no siempre redundan en un buen nivel
de validez externa ni viceversa. Es ms, muchas veces una ganancia en un tipo de validez se
hace a costa de una prdida en el otro. Un excesivo control de la situacin experimental
puede desnaturalizar en tal medida el objeto de la investigacin que sea prcticamente imposible la generalizacin a la situacin natural. Tambin puede ocurrir lo contrario, es decir, por
tratar de reflejar fielmente lo que sucede en el ambiente natural nos vemos forzados a trabajar en unas condiciones en las que es muy difcil el control experimental.
En Psicologa y en Educacin se dan gran nmero de situaciones en las que, por razones
obvias, el nfasis de los investigadores se pone en la validez externa, supeditndose a ella las
consideraciones sobre la interna. ste es el caso tpico de lo que se conoce por investigacin
aplicada. Este concepto, contrapuesto al de investigacin bsica o terica, hace referencia a
aquellos casos en los que el objetivo fundamental de la investigacin es el probar que algo
funciona, es decir, que una determinada intervencin aplicada a una situacin ayuda a modificarla en un sentido socialmente deseable. Por regla general, los objetivos de la investigacin
bsica y la aplicada no tienen por qu entrar en conflicto. Sin embargo, existen algunos casos
en los que el conflicto es inevitable. El ejemplo del tratamiento de la adiccin al alcohol
puede ser uno de ellos. Cuando en un diseo de caso nico tratamos de evaluar la bondad del
tratamiento en funcin de los resultados, el objetivo de la investigacin bsica pasa por
tener la certeza de que se cumplen las condiciones que permiten establecer la relacin causal
entre tratamiento y mejora. El objetivo de la investigacin aplicada es, per se, que aparezca
la mejora, que sea importante y que permanezca despus de la retirada del tratamiento.
Los diseos cuasi experimentales aparecen, justamente, como una solucin de compromiso dentro de los conflictos entre validez interna y validez externa, entre investigacin bsica y aplicada. El prefijo cuasi pone de manifiesto que este tipo de diseos mantienen,
segn los casos, una gran semejanza con los experimentales aunque no puedan asemejarse del
todo a stos. En los diseos cuasi experimentales existen dificultades para alcanzar las condiciones necesarias para el establecimiento de una relacin causal entre las variables independiente y dependiente. Pero, por otro lado, ofrecen menor dificultad, en comparacin con
los experimentos, para que el investigador pueda generalizar sus resultados a otras situaciones distintas a la de investigacin.
La mayora de los autores coinciden en sealar las obras de Campbell y Stanley (1966) y
Cook y Campbell (1979) como clsicas en el anlisis de las peculiaridades de este tipo de
diseos. (El lector interesado en ampliar la informacin al respecto puede consultar, en castellano, la obra de Morales, 1990b.) En la primera de ellas se introduce el concepto de cuasi
experimentacin en contraste con el de experimentacin. La segunda implica una profundi-
11. Diseos cuasi experimentales
329
zacin centrada nicamente en los diseos cuasi experimentales. En este captulo presentaremos algunos de los diseos analizados por Cook y Campbell (1979) y que, a nuestro juicio,
son de mayor inters en Psicologa y Educacin.
De forma simple podemos decir que no hay experimentacin verdadera cuando se da
una de las dos situaciones siguientes: a) el experimentador no puede establecer los mnimos
controles (asignacin aleatoria o inversin del orden de aplicacin, segn el diseo), y b) los
niveles de la variable independiente no son condiciones manipuladas por el investigador,
sino que son caractersticas que poseen los sujetos antes de comenzar la investigacin. Las
situaciones del primer grupo son las que contempla este captulo --cuasi experimentales- y las segundas estn agrupadas en el Captulo 12.
DISEOS PRE-POST
Diseo pre-post con un solo grupo
Supongamos, por un momento, que estamos interesados en investigar la causa de un trastor- _
no grave de personalidad como es la esquizofrenia 1 Supongamos, tambin, que mantenemos
la hiptesis de que dicho trastorno es debido a la inadecuacin de los procesos de interaccin
afectiva entre el sujeto y su entorno familiar. Seguir la lgica de la experimentacin nos llevara a disponer de dos grupos. En el primero de ellos, los padres recibiran instrucciones para
interactuar con sus hijos del modo que sospechamos que produce el trastorno. A los padres del
segundo grupo se les instruira para que interactuaran adecuadamente con sus hijos. Haramos
un seguimiento de ambos grupos a lo largo de un perodo de tiempo suficiente como para que
se produjeran diferencias, cerciorndonos de que ambos grupos siguieran al pie de la letra
nuestras instrucciones. Al cabo de este perodo de tiempo, mediramos en ambos grupos el
nmero de hijos que hubiesen desarrollado un trastorno de tipo esquizofrnico.
Esperamos que, llegado a este punto, el lector se habr dado cuenta de que las nicas personas que estaran seriamente trastornadas en esta historia seramos nosotros, los investigadores, si nos hubiramos atrevido a realizar semejante experimento. Obviamente, consideraciones de tipo tico impiden aplicar la lgica de la experimentacin a la investigacin de
determinadas cuestiones, por lo dems, de un alto inters social y humano. Qu hacer en
casos como ste? Vemos que la aplicacin de la lgica de la experimentacin a este problema
de investigacin nos lleva por derroteros poco ticos. Sin embargo, para poder atribuir con
certeza la aparicin del trastorno a la variable independiente que postula nuestra hiptesis,
necesitaramos manipular dicha causa. El hecho de que no podamos realizar tal manipulacin
no implica que debamos dejar el problema sin investigar.
A ver que le parece el siguiente planteamiento: cambiamos el objetivo de explicar la aparicin de la esquizofrenia por el de explicar su mejora, utilizando una adecuada interaccin
familiar. Nos dirigimos a un hospital psiquitrico para investigar con sus pacientes esquizofrnicos. La direccin del hospital nos da su aprobacin con la exigencia de que todos los
enfermos, sin excepcin, sean incluidos en el programa de mejora. Contactamos con sus
familiares y les enseamos a interactuar adecuadamente con el miembro enfermo. Imagine
1
La esquizofrenia es un trastorno de tipo psictico -es decir, que conlleva una prdida de contacto con la
realidad- caracterizado por perturbaciones en el contenido del pensamiento, prdida de la capacidad asociativa,
presencia de alucinaciones y trastornos en la respuesta emocional.
330
que tenemos una medida de la severidad del trastorno. Por ejemplo, nmero de internamientos clnicos en los ltimos aos, tiempo de duracin de tales internamientos y grado de
presencia de alucinaciones durante los episodios que los originaron (Arvalo, 1990). Establecemos una medida de la severidad del trastorno para cada uno de los sujetos seleccionados, entrenamos a sus familiares y supervisamos que ofrezcan una interaccin afectiva adecuada con los enfermos durante un perodo de seis meses. Terminado dicho perodo, volvemos a tomar las mismas medidas sobre la severidad del trastorno. Este esquema se conoce
como diseo pre y postest. Obviamente, entre ambas medidas se aplica el tratamiento cuya
eficacia se est investigando.
Si nuestra hiptesis es cierta y si el entrenamiento que hemos diseado est bien aplicado, cabe esperar que los ndices de severidad se hayan reducido de una medida a otra. Imagine que es eso lo que realmente ocurre. Dira usted que ha quedado suficientemente probado que el tipo de interaccin afectiva aplicada entre los miembros de la familia mejora a los
esquizofrnicos?
Note el lector que ya no nos estamos planteando si una inadecuada interaccin produce
esquizofrenia. Responder a esta pregunta sera ir mucho ms all de nuestros datos. stos parecen indicar, al menos, que una adecuada interaccin afectiva en la familia mejora el estado de
los esquizofrnicos. El problema es que, dadas las circunstancias, nuestro grado de certeza para
atribuir la mejora a nuestro tratamiento es menor que si hubiramos podido realizar un verdadero experimento, en el que tuviramos un grupo de enfermos incluidos en el programa y
otro excluido, habiendo creado tales grupos mediante el azar. Tenga en cuenta que entre el pretest y el postest pueden haber ocurrido ms cosas que la mera aplicacin de nuestro tratamiento. Por ejemplo, podra haber ocurrido que los sujetos que acuden al mencionado servicio
psiquitrico son aquellos cuyas familias estn ms motivadas para ayudarles. Probablemente,
el apoyo familiar habra hecho mejorar a los sujetos aunque no hubieran recibido tratamiento.
Suponga que, despus de iniciar el tratamiento las autoridades sanitarias hubieran iniciado una
campaa informativa sobre la necesidad de apoyar socialmente a los enfermos mentales. En tal
caso, no tendramos manera de desechar la hiptesis de que pudo haber sido dicha campaa y
no nuestro tratamiento la que hubiera producido la mejora. Dadas las grandes amenazas a la
validez que existen en este diseo no se aconseja su utilizacin, salvo imposibilidad manifiesta
de otra opcin. Su exposicin es necesaria para poder entender los diseos posteriores que son
mejoras sobre ste (observe la equivalencia con el diseo AB del Captulo 10).
Cul hubiera sido el diseo experimental ideal y cules las restricciones que nos han llevado a realizar este diseo?
El plan experimental ideal habra consistido en un diseo intra-sujeto respecto a la
variable tratamiento, con dos niveles: sin y con tratamiento. La restriccin fue la necesidad de
que todos los enfermos se beneficiaran de la posible bondad del programa junto con la
imposibilidad de volver atrs la aplicacin del tratamiento.
En el Cuadro 11.1 se presenta un ejemplo real de investigacin en la que se utiliz un
diseo pre-post con un solo grupo.
En este primer diseo cuasi experimental se guarda una alta equivalencia entre su denominacin y la lgica del plan investigador, de forma que cuando alguien comunica que ha
realizado un diseo pre-post su interlocutor puede imaginarse fcilmente cmo ha transcurrido su estudio. Este paralelismo no siempre se da en las denominaciones de los diseos
cuasi experimentales. Desde la obra de Campbell y Stanley se viene utilizando --con distinto
grado de seguimiento- una esquematizacin que ayuda a recordar y a comunicar la lgica
del diseo. Nosotros la vamos a seguir slo parcialmente, simplificndola en lo posible y pro-
CUADRO 11.1.
331
LA EDUCACIN DE LOS NIOS CON PARLISIS CEREBRAL
Un grupo de investigadores compuesto por profesionales del exinto Centro Nacional de Recursos para la Educacin Especial (CNREE) y profesores de la Universidad Autnoma de Madrid,
llev a cabo una investigacin en la que, entre otros, se persegua el objetivo de probar la educabilidad de los nios con afectaciones severas de su habla y movilidad producidas por parlisis
cerebral (Garca, Rosa, Montero y ETIEDEM, 1990).
Una idea bastante extendida entre los padres y profesores de este tipo de nios es que su
escolarizacin, ms que producir ganancias reales en el proceso educativo, lo que hace es
impedir un deterioro progresivo de su estado personal e intelectual. Para poner a prueba la eficacia de la escolarizacin, este grupo de autores seleccion una muestra de catorce nios con
trastornos motores y de habla producidos, en su mayora, por parlisis cerebral. Se realiz una
evaluacin al comienzo del curso acadmico y otra al final del mismo. Se consideraron las actividades acadmicas realizadas a lo largo del mismo como el tratamiento cuya eficacia se quera
poner a prueba. Las comparaciones entre las dos medidas pusieron de manifiesto la existencia de
ganancias significativas en todas las reas curriculares evaluadas (percepcin, lectura, escritura,
lgica matemtica, etc.).
Tales resultados llevaron a estos autores a la conclusin de que el sistema educativo no slo
impeda deterioros posteriores sino que produca mejoras sistemticas en las reas curriculares
trabajadas.
curando que sea lo ms til a los diseos elegidos en este captulo. Hemos optado por ir introduciendo las caractersticas de la notacin a medida que vayamos presentando los diseos, de
forma que no haya que presentar en abstracto signos sin referente. Veamos cul es el esquema para el diseo cuasi experimental pre-post:
0 es la inicial de observacin. Se refiere al conjunto de registros de un grupo de

sujetos en una determinada variable dependiente. Los subndices 1 y 2 indican una secuencia
temporal. 0 1 en nuestro ejemplo es la primera medida de la esquizofrenia y 0 2 la segunda. La
X indica que se ha producido un tratamiento o intervencin. Este tratamiento refleja la presencia de la variable independiente. En nuestro caso, la interaccin afectiva de los familiares
con los enfermos. Se entiende que el tratamiento se ha aplicado a todos los sujetos a los que
se refiere 0 1. En 0 2 , por tanto, se ha registrado la misma variable dependiente que en 0 1. El
investigador espera que como consecuencia de la intervencin (variable independiente) los
valores en 0 2 sern distintos a los de 0 1
Diseo pre-post con grupo de cuasi control

Una mejora metodolgica del diseo anterior, que no siempre es posible introducir, consiste
en incluir en la investigacin a un grupo de control. Recuerde que este trmino haca referencia a que a un grupo de sujetos participantes en el experimento se les aplicaba el valor
nulo de la variable independiente, asegurndonos de que eran lo ms parecidos (equivalentes)
posible al grupo experimental en las variables que se quisieran controlar. Pues bien, dentro
del contexto de investigacin aplicada en el que se utilizan los diseos cuasi experimentales,
332
es ms difcil conseguir grados de semejanza similares a los que se consiguen cuando se

investiga en el contexto experimental, dado que no se puede hacer asignacin aleatoria. Es
por eso que se considera no equivalente al grupo de control que se incluye en este tipo de
diseos. Como todos los grupos de control en el mbito cuasi experimental son no equivalentes, hemos optado por introducir el trmino cuasi control en lugar de control no equivalente. Consideramos que es ms corto, ms simple y ms fcil de recordar. El prefijo
cuasi nos recordar que no cumple las condiciones de los controles experimentales.
Veamos cmo esquematizar el diseo pre-post con grupo de cuasi control:
Cuando se representa el conjunto de registros 0 1 y debajo de una lnea discontinua aparece otro conjunto 01' este segundo conjunto se refiere a otro grupo de sujetos distintos. Como
nos referimos a contextos cuasi experimentales siempre se entender que la divisin entre los
dos grupos no es aleatoria. Se podra haber optado por aadir otro subndice que indicase que
se trata de grupos distintos. La razn de no hacerlo es por simplicidad. La C -inicial de control- indica que a ese grupo no se le aplica el tratamiento. Dicho de otra forma: se trata del
grupo de cuasi control. Cook y Campbell optaron por dejar un espacio en blanco para indicar
que no hay intervencin. Cuando se escribe a mquina los espacios pueden ser claros, pero
cuando se escribe en la pizarra o cuando se escribe a mano no lo son tanto, especialmente si
se trata de una serie. Existe adems una consideracin de carcter metodolgico que creemos
importante sealar. No aplicar una determinada intervencin en el grupo de cuasi control no
significa siempre que no haya que hacer nada -lo que puede dar a entender el blanco. En la
mayora de las ocasiones el control necesita recibir un programa placebo, dedicar el mismo
tiempo que el experimental a una tarea distractora, asegurarse que no recibe la influencia de
una variable extraa. En definitiva, el investigador hace algo con el grupo de cuasi control,
aunque eso que hace no sea el tratamiento de la variable independiente.
Sigamos con nuestro ejemplo. Para formar un grupo de cuasi control lo que haramos
sera recoger de otro grupo de treinta sujetos esquizofrnicos de otros centros los datos
relativos al nmero y duracin de los internamientos, as como el grado de presencia de alucinaciones en los episodios que motivaron la hospitalizacin. Dicha informacin sera recabada dos veces: en el mismo momento en el que tomramos la primera medida (pretest) a los
sujetos participantes en el tratamiento y en el momento del postest de este grupo. Ello
implicara que tendramos la informacin relativa a un grupo de sujetos a los que no se les
habra aplicado el tratamiento. La contrastacin de la hiptesis acerca de la eficacia de
nuestro tratamiento en la reduccin de la severidad del trastorno vendra dada por la comparacin de las variaciones habidas entre las dos medidas en ambos grupos. Para poder concluir
que nuestro tratamiento es adecuado debera producirse un resultado que mostrara que los
sujetos tratados reducen la severidad de su sintomatologa de forma significativamente
mayor que los sujetos del grupo de cuasi control.
Imagine que llevsemos a cabo una investigacin diseada de este modo y que encontrsemos que, efectivamente, los sujetos esquizofrnicos a los que se les aplica el tratamiento mejoran ms que los del grupo de cuasi control, se atrevera, entonces, a afirmar que
nuestro tratamiento es la causa de la mejora? A lo mejor le resulta frustrante, pero todava
debera mostrarse cauteloso para realizar esta afirmacin. Evidentemente, la explicacin
11 . Diseos cuasi experimentales
CUADRO 11.2.
333
SER AUTNOMO O SER MARIONETA
DeChanns (1976) presenta un trabajo en el que se pone a prueba la eficacia de un determinado

tratamiento, basado en su teora de la causacin personal, para modificar la motivacin y el rendimiento de alumnos de escuela primaria pertenecientes a familias con un bajo nivel econmico
y cultural.
Para este autor, el factor que configura la capacidad del sujeto para mostrarse motivado ante
las tareas que debe realizar es la causacin personal. Es decir, los humanos debemos tener la
experiencia de que podemos incidir sobre el mundo que nos rodea para estar suficientemente
motivados ante las tareas que se nos presentan. Esta teora se operativiza en tomo a la dimensin
autnomo-marioneta. Las personas con un alto nivel de experiencia de causacin personal tienden a mostrarse y percibirse a s mismas como autnomas, mientras que las personas con poca
experiencia de causacin personal tienden a percibirse a s mismas como marionetas manejadas
por factores incontrolables.
DeChanns entren a un grupo de maestros para que se mostraran como autnomos y ensearan a sus alumnos a serlo. Dicho entrenamiento dur un ao. El entrenamiento de los alumnos
por parte de sus profesores llev otros tres aos. DeChanns no es muy explcito a la hora de relatar cmo fueron elegidos los maestros - probablemente, fueran voluntarios-, pero seala que
utiliz como grupo de control las aulas en las que los alumnos, teniendo los mismos profesores,
no participaban en el entrenamiento. Los resultados mostraron que la motivacin y el rendimiento del grupo entrenado mejoraron a lo largo de los aos que dur la experiencia mientras
que, en el caso de los alumnos del grupo de control, ocurri lo contrario: disminuy su motivacin y su rendimiento.
alternativa de que haba sido la campaa informativa de las autoridades sanitarias la causante de la mejora se podra desechar porque dicha campaa afectara por igual a los dos grupos.
Sin embargo, seguira siendo difcil desechar la posibilidad de que fuera la motivacin de las
familias de los enfermos que acuden al servicio psiquitrico la causante de la mejora.
El diseo experimental ideal sera grupos aleatorios para la variable programa e intrasujetos para el tiempo pre y post. La restriccin, tambin la misma: la necesidad de que todos
los enfermos del centro se incluyan en el programa.
En el Cuadro 11.2 se presenta una investigacin en la que se utiliz este tipo de diseo y
en la que el grado de equivalencia entre los grupos experimental y cuasi control era alta, aunque la asignacin no fue aleatoria.
Diseo pre-post con cuasi control en una segunda variable dependiente

Permita que permanezcamos en el entorno clnico. Suponga por un momento que le han
asignado a un hospital psiquitrico para realizar las prcticas de su ltimo ao de carrera. Parte
de su trabajo consistir en conseguir que un grupo de psicticos ingresados mejoren ellos mismos las condiciones de su hbitat. Decide empezar probando la eficacia de un programa de
modificacin de conducta por economa de fichas . Una vez probada su eficacia con alguna de
las conductas implicadas procedera a aplicarlo al resto. En consecuencia, empieza con la con-
334
ducta de recoger los vasos desechables y ponerlos en la basura, dentro de una sala de estar
comn. El director del programa le impone que trabaje con los diez enfermos, luego no da
lugar a plantear un grupo de control o grupo de cuasi control. Todo parece abocado a utilizar
el diseo pre-post, tremendamente dbil respecto a su validez. Sin embargo existe una forma
de mejorar el diseo: localizar una segunda variable dependiente, susceptible de ser modificada
por el mismo tratamiento que el utilizado con la conducta de recoger los vasos, y con la misma
sensibilidad a ese tratamiento. Sobre esta segunda variable no aplicaremos los refuerzos.
Supongamos que decide que la conducta de mantener ordenado su cuarto constituye la segunda variable dependiente. Podemos disponer ahora el siguiente diseo cuasi experimental:
ol.Yx o2.Y
o1.z e o2.z
La primera serie de observaciones indica que realizamos una medicin de los diez individuos en la conducta recoger vasos -variable dependiente l. Y- , aplicamos la intervencin
y volvemos a registrar la misma conducta 2.Y. La serie de oes inferior no est separada por
una raya discontinua: se trata ahora de los mismos sujetos. Notar que ahora junto al subndice 1 de la secuencia se encuentra la letra Z. Esta notacin significa que estamos midiendo a los
mismos sujetos, en el mismo momento 1, pero en la variable ordenar el cuarto -variable
dependiente Z-- la cual no reforzaremos con las fichas. Este no reforzar se denota con la C.
Posteriormente, al tiempo de medir la variable Y, medimos tambin la variable Z.
Si ha ledo usted antes el Captulo 1O es bastante probable que tenga la sensacin de que
este diseo le resulta familiar. Efectivamente, la lgica de este diseo es similar a la lgica del
diseo con un solo sujeto de lnea base mltiple. El principio sobre el que se basan los dos es
que si disponemos de un tratamiento que puede modificar dos conductas, al aplicarlo a una y
no a la otra, podemos esperar que una cambie y la otra no lo haga.
Usted debe esperar que, al cabo de un par de semanas premiando slo la conducta de
recoger los vasos desechables, stos no aparezcan por las mesas y que no se haya producido
ningn cambio en la ordenacin de los cuartos.
A veces al exponer estos diseos, alguna persona nos cuestiona por qu es negativo
que, por ejemplo, los enfermos mejoren el orden de los cuartos, si el propsito ltimo es
mejorar las condiciones del hbitat. El objetivo final era ese, efectivamente, pero en la primera fase era ligeramente distinto: probar la eficacia del refuerzo con economa de fichas
para modificar una conducta. Si los enfermos en la situacin 2, no slo han cambiado la conducta de recoger vasos, sino que tambin han mejorado el orden de sus cuartos, entonces no
podemos atribuir con seguridad la causa del cambio a la presencia de premios. No podramos
rechazar otra hiptesis para explicar nuestros datos. Por ejemplo, la supervisora de la planta
ha decidido, en paralelo a nuestro plan, cerrar la mquina de bebidas mientras no mejore el
orden de los cuartos, o los enfermos cambian sus conductas por agradarle a usted y, por tanto,
generalizan su demanda de limpieza a otros contextos. Estas dos hiptesis no podran ser
rechazadas si el cambio se produce tanto en la conducta Y como en la Z. S pueden ser rechazadas si el cambio slo se ha producido en la conducta Y.
Es fundamental que las dos conductas (Y, Z) sean igualmente sensibles, es decir, susceptibles de ser modificadas por el mismo tratamiento y por las mismas variables extraas.
Supongamos que en lugar de elegir la conducta ordenar el cuarto, elegimos la conducta no
fumar. Con bastante seguridad la conducta de los fumadores habituales no va a cambiar
335
durante el par de semanas del programa, pero tampoco lo hubiera hecho en el caso de que la
supervisora amenazara con cerrar la mquina de las bebidas, ni tampoco dejaran de fumar
por agradarle a usted. Es decir, que esta variable dependiente no nos sirve como cuasi control,
ya que no es afectada por las mismas variables que inciden sobre la otra conducta en estudio.
Con una segunda variable dependiente como dejar de fumar>>, --que no variar, hagamos lo
que hagamos respecto a recoger los vasos- cualquier cambio en la conducta de recoger
los vasos ser adjudicado al programa de refuerzos, sin la seguridad de que esto sea as.
A pesar de todos nuestros esfuerzos por conseguir la mejor segunda variable dependiente, como testigo de posibles influencias extraas, nunca tendremos la seguridad del control
realizado sobre la propia variable dependiente principal. sta es la razn por la que a las puntuaciones de control debemos llamarlas cuasi controles. sta es la razn por la cual este diseo se considera cuasi experimental, es decir, no nos asegura, cien por cien, que la causa del
cambio se deba al tratamiento.
El plan experimental hubiera consistido en dividir al azar a los enfermos en dos grupos
-experimental y control- y aplicar el programa de refuerzo mediante economa de fichas
slo al experimental. Esta variable la cruzaramos con el tiempo, antes y despus del programa. Diseo de grupos aleatorios, respecto al refuerzo de la conducta e intra-sujetos respecto al tiempo. La restriccin fundamental ha sido el mandato de la direccin hospitalaria de
aplicar el programa a todos los enfermos.
Diseo pre-post con cuasi control en una cohorte anterior

Cambiamos ahora el escenario, suponga que le llaman de su antiguo colegio con el objeto de
que analice si un determinado curso, que acaba de ser formado con un nuevo plan de estudios,
est mejor preparado que el curso anterior. Lo caracterstico de este contexto de investigacin
es que todo un conjunto de sujetos pasa cada ao por un determinado programa y que en un
momento temporal se introducen cambios para mejorar el programa. sta es la razn por la
que a este diseo tambin se le denomina de ciclo institucional. Adems del contexto estrictamente escolar, se pueden aadir ejemplos de planes de formacin en las empresas, cursos de
educacin de salud, educacin ambiental, prevencin de drogodependencias, etc.
Veamos detalladamente cules son las caractersticas de este tipo de investigaciones. La
estructura se puede esquematizar de la siguiente forma:
En la lnea superior est representada la generacin --cohorte- inmediatamente anterior

al cambio de planes. Como usted ya sabe, C significa que estudiaron con el plan antiguo, no
que se pasaran el ao en blanco. Los primeros registros (1) se tomaron al comenzar el curso
y los segundos (2) al acabar, de forma que la instruccin adquirida en ese ciclo acadmico
viene dada por la comparacin de (2) respecto a (1).
En la lnea inferior est representada la cohorte que ha recibido la enseanza con el nuevo
plan. De igual forma la instruccin adquirida resulta de la comparacin de (4) respecto a (3).
Observe que el ciclo del nuevo plan de estudios empieza en (3), es decir, un momento tem-
336
poral posterior, una vez que ha acabado el primer ciclo. En este curso hay algo novedoso cuya
influencia (X) queremos comparar respecto al ciclo anterior.
Le habr llamado la atencin que la forma de la lnea que separa los dos grupos de sujetos no es como las anteriores, intermitente, sino ondulada. Si la divisin hubiera sido como
las anteriores, el grupo de cuasi control podra haber sido formado por sujetos sin ms restriccin que parecerse a los experimentales y haber pasado por el ciclo de instruccin anterior.
En nuestro ejemplo, podran ser alumnos de otro colegio, de varias clases, etc. La lnea ondulada expresa la restriccin, fundamental de este diseo, de que sea la cohorte inmediatamente
anterior y de la misma institucin. Observe que el cumplimiento de este requisito facilita el
igualamiento de muchas variables extraas entre las dos cohortes, lo cual redunda en la validez del diseo.
Podramos pensar que no hay ms que decir de este diseo, comparamos (04 - 0 3) respecto a (0 2- 0 1) y determinamos la posible diferencia. Sin embargo, hay varias cosas muy
importantes que discutir.
Primera: debemos estar seguros que no es posible establecer un grupo de cuasi control
que, simultneamente al experimental, sea formado con el plan antiguo. Seguramente lo
podramos encontrar en otro colegio, pero la cantidad de variables extraas que esto acarreara lo hace desaconsejable. Lo podemos hacer dentro del propio colegio? En este
ejemplo, cuando se cambia el plan de estudios se hace para todas las clases del mismo curso.
Luego no es posible. De nuevo aparece una de las notas de los diseos cuasi experimentales:
la investigacin aplicada nos constrie en el grado de control del diseo. No podemos
tomar las medidas que nos gustara para mejorar el control y la posterior atribucin de causalidad.
Segunda: debemos poder asumir que las dos cohortes contiguas mantienen diferencias
mnimas entre ellas. Observe que la cohorte del plan antiguo acta como grupo de cuasi control de la cohorte del plan nuevo, luego ha de ser lo ms equivalente posible. No sera vlida
la investigacin si las dos cohortes, en los aos anteriores, han estudiado con planes de
estudio distintos. Al llegar al comienzo del curso en estudio, ambas cohortes han debido tener
una formacin previa similar y nosotros debemos asegurarlo con datos. En general, la similitud de las cohortes contiguas hay que discutirla en cada contexto de investigacin.
Tercera: las cohortes han podido tener una formacin similar, pero ser de hecho distintas.
Todos hemos odo a los profesionales de la educacin decir -no sabemos si con razn- que
tal promocin fue especialmente mala. Observe que esto se dara a pesar de haber tenido
antecedentes similares. Debemos asegurarnos de que las dos cohortes, cuando van a ser
medidas en 0 1 y 0 3, son lo ms parecidas posible. Cmo?, midindolas en un conjunto de
variables relevantes respecto a la variable dependiente en estudio. En nuestro ejemplo podemos medir su rendimiento anterior y su motivacin por el logro escolar. Qu pasa si nos
encontramos con individuos con puntuaciones muy extremas en uno de los grupos? La
forma de actuar es la misma que si estuviramos con un experimento: controlar la variable
por eliminacin.
Cuarta: ya nos hemos asegurado que las dos cohortes contiguas son equivalentes respecto
a la variable dependiente. Hay otras amenazas a la validez? Como en todos los diseos longitudinales hay que controlar los posibles efectos debidos a la historia. Por ejemplo, en el
entorno escolar debemos controlar que los alumnos en estudio de las dos cohortes han tenido, mayoritariamente, a los mismos profesores. Si no es as debemos acotar la investigacin
CUADRO 11.3.
337
RESUMEN DE LOS DISEOS PRE-POST
CON CUASI CONTROL EN
UN SOLO
GRUPO
un segundo grupo
0 1 X0 2
0 1 X0 2
o~.v
x o2.Y
0 1 C02
o1.z
e o2.z
una segunda VD
una cohorte anterior
0 1 C02
~
0 3 X0 4
A la izquierda aparece el diseo ms elemental , con un solo grupo, sobre el que se desarrolla el
resto. Este diseo no es aconsejable por su debilidad.
En los tres diseos con cuasi control hay una serie de observaciones en el tiempo donde se ha
aplicado un tratamiento (X). En los tres se detecta de forma absoluta la cuanta del efecto del tratamiento por las diferencias entre los dos grupos de observaciones, pre y post aplicacin. La
interpretacin de esta diferencia en trminos causales est amenazada, principalmente, por la historia, que puede haber hecho que el cambio se deba a la aparicin de una variable en el tiempo.
La forma como los tres evitan esta amenaza es relativizando el cambio del grupo experimental
respecto al cambio en un grupo cuasi control. En los dos primeros casos la comparacin del cambio de las puntuaciones experimentales y cuasi controles se hace de forma simultnea (1-2, 1-2);
en el primero se utiliza otro grupo de sujetos seleccionados por su parecido con los experimentales y en el segundo se utiliza un conjunto de puntuaciones tomadas a los mismos sujetos en
otra variable. En el tercer caso, el cuasi control se lleva a cabo comparando el cambio de la situacin experimental (3-4) con el registro en un perodo anterior (1-2) en la cohorte antecedente.
Finalmente, recuerde que en los contextos cuasi experimentales no tiene mucho sentido preguntamos cul de los tres diseos expuestos es el mejor, sino si puedo ajustar a mi objetivo alguno de ellos.
a los grupos que lo cumplen. Debemos controlar que no ha ocurrido alguna circunstancia
anormal en ese ao escolar que se pueda enmascarar con el cambio de planes de estudio
(huelga, profesor enfermo, accidente de algn compaero, etc.). Por otro lado, la validez
puede estar amenazada si, previamente a la investigacin, existe una tendencia a lo largo del
tiempo en el rendimiento de las sucesivas generaciones, las cohortes. La forma de controlar
esto es ampliar el nmero de cohortes de cuasi control. Podemos medir dos o tres cohortes
anteriores al cambio y establecer que no existe una tendencia ascendente (o descendente) que
se pueda enmascarar con la variable independiente.
El plan experimental hubiera sido asignar a los alumnos de forma aleatoria a dos clases
en el mismo curso acadmico. Una clase estudiara con el plan de estudios antiguo y la otra
con el nuevo. A todos los alumnos se les mediran los conocimientos al comienzo y al final
del curso. Se tratara de un diseo 2 x 2, inter-sujeto respecto a los planes de estudio e intrasujeto respecto al tiempo (comienzo, final de curso). La restriccin ha sido la imposibilidad
de simultanear dos planes de estudio el mismo curso acadmico, en el mismo centro. Ligado
a lo anterior es imposible decidir al azar quin va a cada plan de estudios.
Todos los diseos presentados pre-post se agrupan en el Cuadro 11.3.
338
DISEOS CON OBSERVACIONES SLO POST

Recuerda usted que al comenzar alguno de sus cursos escolares le aplicaran una prueba de
nivel de conocimientos, que fuera la misma con la que luego le hacan el examen final? Quiz
en alguna asignatura le hicieron una prueba sencilla de nivel para comprobar qu recordaba
del curso anterior y as el profesor poda orientar la explicacin de los primeros temas.
Salvo investigaciones muy planificadas (Senz, 1995), lo normal en las instituciones es que
slo se realicen pruebas de aprovechamiento al final de los cursos. Si deseamos estudiar la
mejora en el aprendizaje de los alumnos por el cambio de planes de estudio, lo ms frecuente
es que tengamos un esquema de investigacin con puntuaciones tomadas solamente despus
de haber completado el curso acadmico. Vase como ejemplo el estudio del Cuadro 11.4.
El esquema de este diseo simple slo post, utilizando dos cohortes sucesivas, es el que
sigue:
CUADRO 11.4.
CAMBIO DE PLANES
M. A. Len (1995) realiz un estudio para comparar la eficacia de un nuevo plan de estudios de
Psicologa en la UAM frente al anterior. Para llevar a cabo su objetivo evalu los conocimientos
de los alumnos de ambos planes al comenzar el segundo ciclo de sus respectivas carreras. Esto
fue posible ya que ambas generaciones coincidan fsicamente en la Facultad en el momento de
realizar el estudio. El diseo fue, por tanto, cuasi experimental, de ciclo institucional, con 1os
cohortes y utilizando slo medidas post. La cohorte que estudi con el nuevo plan fue cons lerada la experimental y la que estudiaba con el antiguo su cuasi control. Los participantes fu( ;on
50 estudiantes del nuevo plan y 42 del plan viejo. Ambos grupos fueron medidos al completa; su
primer ciclo mediante una prueba de 30 preguntas cerradas. Las preguntas del cuestionario fueron extradas al azar del examen de acceso a las plazas de Psiclogo Interno Residente. Se col'l
trol que las preguntas versaran sobre contenidos que ambos grupos hubieran cursado y que
todas las reas de conocimiento estuvieran representadas. El registro de las respuestas se realiz
mediante entrevistas personales, sin que mediara aviso previo y, por tanto, sin que los participantes pudieran estudiar para su ejecucin. Mediante el correspondiente anlisis de las medias se
encontr que las puntuaciones de los alumnos del nuevo plan de estudios eran significativamente
mayores a las del viejo plan.
Este estudio presenta una particularidad que merece ser comentada. Al no disponer de
medidas pre no sabemos si las diferencias observadas se deben a la mayor eficacia del nuevo
plan o a que la cohorte del nuevo plan es superior a su correspondiente del viejo. Hay datos para
sustentar esta amenaza. Los alumnos representantes del nuevo plan fueron los primeros que cumplieron todos los requisitos -aprobar los cursos anteriores en un ao- para cambiar de ciclo,
mientras que sus cuasi controles no haban cumplido las mismas exigencias, podan estar en
segundo ciclo habiendo empleado ms de un ao por curso. Se podra lograr una mayor equivalencia de los cuasi controles si se incluyeran slo aquellos estudiantes con un nivel de requisitos similares a los experimentales. Una forma de mejorar la validez cuando slo disponemos de
medidas post es utilizar otros grupos adicionales de medidas experimentales. En este caso,
obtener otro grupo del plan antiguo y registrar nuevas medidas al ao siguiente con la segunda
generacin del plan nuevo.
339
Este diseo, ya sea con cohortes sucesivas -y la correspondiente restriccin en la seleccin del grupo de cuasi control- o con un grupo de cuasi control formado ad hoc:
tiene una amenaza fundamental que debemos ser capaces de rechazar en el contexto de
nuestra investigacin: las puntuaciones X O, son mayores que lasCO porque el tratamiento las ha hecho mejorar, o porque ese grupo de sujetos ya era superior antes de aplicarle el
tratamiento? Tenemos una seria amenaza de seleccin, vase el comentario del caso del Cuadro 11.4. Recuerde que en el diseo cuasi experimental ms dbil, el pre-post, 0 1 X 0 2, slo
disponamos, como ahora, de dos grupos de puntuaciones. Al ser entonces los mismos sujetos, no haba amenaza de seleccin y s de la historia. Cmo mejorbamos el diseo?,
aadiendo grupos de puntuaciones de cuasi control. Cmo podemos rechazar la amenaza de
seleccin en el diseo simple slo post? Aadiendo grupos experimentales y cuasi controles;
as, la esperada superioridad de los primeros sobre los segundos no depender de la seleccin
de dos grupos. El esquema en el que todas las medidas se producen en el mismo momento es:
El esquema en el contexto de ciclos institucionales es:
Es posible obtener mayor validez en los diseos con slo medidas post si estamos investigando con dos (Xp X 11) o ms programas/tratamientos simultneos y esperamos que haya
diferencias no slo respecto al grupo de cuasi control, sino entre ellos. Recuerde que en el
esquema que estamos utilizando ponemos a prueba un solo programa/tratamiento. Es ms
difcil que se haya producido una seleccin de grupos cuyas puntuaciones se ordenen de
forma natural conforme a nuestra hiptesis sin que haya efectos experimentales. El esquema
es el siguiente:
340
No podemos decir que stas sean todas las formas de plantear diseos slo post con
garantas de validez. Las condiciones de investigacin pueden sugerir variantes o ampliaciones que combinen grupos cuasi control, experimentales y cohortes. En el Cuadro 11.5 presentamos una ingeniosa investigacin con medidas slo post, donde la clave est en que el
mismo efecto produce resultados distintos dependiendo de las caractersticas de los sujetos.
En definitiva, en cada investigacin habr que justificar que el diseo cuasi experimental
elegido tiene validez, permitiendo rechazar, fundamentalmente, las amenazas de la historia y
la seleccin de los sujetos.
Lo caracterstico de los diseos slo post es que contrastan la influencia de una variable
a travs de distintos grupos de sujetos, por lo tanto, el diseo experimental hubiera sido un
diseo inter-sujetos con grupos al azar. Las restricciones en estos diseos son mayores que en
CUADRO 11.5. ESPERANDO-Y ENCONTRANDOLAS DIFERENCIAS INDIVIDUALES
Seaver (1973) -citado por Cook y Campbell (1979)- quiso probar, con datos de archivo, si la
expectativa de los profesores sobre el rendimiento de sus alumnos conlleva rendimientos diferentes. La expectativa se operativiz corno el conocimiento del profesor de que un alumno es
hermano de un antiguo alumno suyo, cuyo rendimiento fue notablemente bueno o malo. sta fue
la condicin experimental. La condicin de cuasi control fue la ausencia de expectativa. La variable dependiente fue el rendimiento de los alumnos, medida al final del curso. Puesto que eran
datos de archivo, todas las medidas eran post. Seaver recopil y agrup las notas de los estudiantes bajo las cuatro condiciones especificadas y postul que se producira una interaccin
corno la que se presenta en la Figura 11.1:
INFLUENCIA DE LA EXPECTATIVA DEL PROFESOR
FIGURA 11.1.
10
9
oE-<
1~
Buenos hermanos
Malos hermanos
.,D
Cf
4
Sin
expectativa
Con
expectativa
PROFESOR
Seaver encontr apoyo a su hiptesis (aunque no en unas diferencias tan abultadas corno las
de la grfica, as representadas por motivos de claridad expositiva). El diseo utilizado es de
medidas slo post, en el que se mejora el control al disponer de una hiptesis de influencia diferenciada sobre dos grupos de sujetos distintos.
341
los pre-post, porque no hay medidas previas. Hay menos controles, ms amenazas y, por
tanto, hemos de ser ms cautos todava en la interpretacin de la causalidad.
Veamos ahora de forma conjunta los esquemas de diseos con medidas slo post presentados hasta ahora en el Cuadro 11.6.
CUADRO 11.6.
RESUMEN DE LOS DISEOS CON MEDIDAS SLO POST
SIMPLE
Simultneo
CON GRUPOS DUPLICADOS
Cohortes
01
Simultneo
01
01
\J\J\..f\J
X 01
e0
- - 1
X 02
X 0
- - 1
X 01
Cohortes
01
\..JV\J
e 02
\J\JV
X 03
\J\JV
X 04
CON DOS
TRATAMIENTOS
- -1
X, 0 1
-XII O
La caracterstica comn a todos estos diseos es que el investigador no puede tomar medidas pre.
El problema de un contraste simple es la dificultad de rechazar la amenaza de la seleccin. Para
superar esta dificultad se aumentan los grupos observados, ya que es poco probable que en dos
grupos experimentales se den, simultneamente, puntuaciones superiores al cuasi control no
debidas al programa. Cuando se desea contrastar dos programas, con efectos esperados distintos, se reduce ms el error de seleccin, al ser muy poco probable que la seleccin de los sujetos
produzca puntuaciones que coincidan exactamente con el sentido de las hiptesis sobre los
programas. Las cohortes aaden la especificidad de aplicarlos en contextos institucionales, con
las similitudes del entorno y con las restricciones de la seleccin y del paso del tiempo.
DISEOS DE SERIE TEMPORAL INTERRUMPIDA

Diseo simple de serie temporal interrumpida
La forma ms breve de exponer la lgica del diseo de serie temporal 2 interrumpida, es
decir que es la misma de los diseos experimentales con un sujeto, aplicada a grupos de
sujetos. Disponemos de una serie de puntuaciones de un grupo de sujetos a lo largo de una
serie de momentos. En algn punto del desarrollo temporal se introdujo un tratamiento: si
ste es efectivo esperaremos signos de interrupcin en la serie y, por tanto, esperaremos
cambios de la fase pre a la fase post. Este esquema, como podr recordar, es el mismo del
2
Aunque son numerosas las publicaciones en castellano -incluida la primera edicin de este libr<r- que han
utilizado el trmino <<Series temporales >> como versin del correspondiente <<time series>>, nosotros optamos por
corregir lo que, pensamos, fue un desliz de traduccin en un principio. Vase la frase con la que comienzan Cook
y Campbell (1979, p. 207) el captulo de diseos de serie temporal interrumpida: <<A time series is involved when
we have multiple observations over time>> .
_____
..._
342
diseo AB con un solo sujeto. Si el tratamiento es efectivo, la serie de medidas presentar

una alteracin a ,partir del momento en que se aplica el tratamiento. El esquema correspondiente es:
Otra forma de ver el diseo de serie temporal interrupida simple es como una extensin
del diseo pre-post, con un solo grupo. Si eliminamos las observaciones 1 a 3 y 6 a 8 lo que
nos queda es el diseo citado. Con la extensin de las mediciones hacia atrs -antes del tratamiento- y hacia delante -despus del tratamiento- lo que conseguimos es desechar
algunas de las amenazas del ms simple de los diseos cuasi experimentales. El conocimiento
de la conducta de los sujetos durante un perodo de tiempo extenso antes de la fase de tratamiento nos permite conocer la estabilidad de la conducta, su posible carcter cclico y la tendencia del cambio asociada al tiempo. El registro de la conducta despus del tratamiento nos
da informacin sobre si el cambio ha sido puntual o estable, si est por encima de la variabilidad natural de la medida, si interfiere con el carcter cclico de la conducta o si rompe con
la tendencia previa de las mediciones.
Retomamos el caso de la interaccin afectiva familiar con los esquizofrnicos. Una de las
amenazas que siempre se ciernen sobre las investigaciones aplicadas con el esquema pre-post
es que es difcil descartar la influencia de la estacionalidad que acompaa a este tipo de
enfermedades. Aunque de forma muy general, se sabe que aumenta la sintomatologa con la
primavera y el otoo, el grado de imprecisin es grande; por tanto, es difcil descartar qu
parte de la mejora de nuestros esquizofrnicos tratados no se debe a una mejora estacional.
Podemos rechazar esta amenaza si comparamos una serie de medidas de sintomatologa
durante varios meses previos a la investigacin con otra serie durante meses despus. Observando las variaciones cclicas de la severidad de la sintomatologa podemos detectar si,
coincidiendo con la aparicin del tratamiento, existe un punto de cambio no explicado por la
variacin natural.
La mayor amenaza a la validez en este diseo es la seleccin. Recuerde que los enfermos
de nuestro caso no son una muestra aleatoria y que es posible que las variables que les hicieron acudir a nuestro hospital acten como variables extraas. Por ejemplo, el que la institucin sea pblica o privada, el que se halle cerca o lejos del lugar de residencia, el que estn en
rgimen de hospital de da u hospitalizados ... ; todas estas variables pueden contaminar nuestro estudio. Observe que estas variables no amenazan la validez interna, ya que no empiezan a
actuar en el momento exacto de la intervencin. Son variables del grupo, ya estaban presentes
antes de empezar la investigacin y no se haba producido una mejora en los pacientes.
Tenga presente que la gran ventaja de incidir en una serie en el momento que nosotros decidimos -y no en otro- es que es en ese preciso momento cuando interpretaremos el cambio
en la conducta de los sujetos. Slo una variable temporal que apareciese contingente con
nuestra actuacin sera una amenaza para la atribucin de causalidad. Por otro lado, nosotros
deseamos extraer concluiones sobre la eficacia de un programa de intervencin familiar
sobre esquizofrnicos, para todos los casos, no slo para los estudiados. Si se produjera una
interaccin entre el programa y nuestros enfermos, el diseo sera incapaz de contrastarlo.
Necesitaramos un grupo de cuasi control. Por otro lado, todo lo que limite la aplicabilidad de
nuestras conclusiones va contra la validez externa del diseo. Validez que es prioritaria en las
investigaciones aplicadas, aunque en las investigaciones bsicas a veces puede quedar en
segundo trmino.
343
Diseo de serie temporal interrumpida con grupo de cuasi control

Un modo de tener mayor certeza de que los cambios habidos entre el pretest y el postest son
debidos a nuestro tratamiento y no a ninguna otra variable es utilizando lo que se conoce
como diseo de serie temporal interrumpida con grupo de cuasi control. Este diseo es la
mejora natural del diseo simple de serie temporal interrumpida. La estructura del diseo la
podemos exponer como sigue:
0 1 0 2 0 3 X 0 4 Os 0 6
01 02 03
e 0 4 os 0 6
Como ya sabe, el nmero de oes no indica que hayan sido exactamente tres los registros. Este nmero depende de que se haya asegurado una cierta estabilidad en la variable
dependiente en estudio. La lnea superior corresponde al grupo que recibe el tratamiento y la
inferior al grupo de cuasi control que sirve para comparar el cambio esperado entre el punto
tres y el cuatro.
Seguimos con el caso de la esquizofrenia y la incidencia de una adecuada interaccin
afectiva de sus familias. Qu mejora metodolgica implica el uso de este diseo en la
investigacin? La aportacin fundamental es que podemos observar el cambio en el grupo
tratado respecto al grupo no tratado. Es decir, volvemos a la poderosa estrategia experimental-control. Cierto que aqu el grupo de control no es equivalente al experimental, pero
gracias al establecimiento de las series de registros antes y despus del momento de la intervencin podemos paliar parte de las desventajas de no poder utilizar una seleccin aleatoria. Es importante llamar la atencin sobre cmo formar el grupo de cuasi control. Ante
la imposibilidad de crear un verdadero grupo control tenemos la obligacin de estudiar las
caractersticas particulares del grupo experimental y tratar que los integrantes del cuasi controllas cumplan. As en nuestro caso de los esquizofrnicos, sera deseable que el grupo de
cuasi control tuviera la misma procedencia social, estuviera integrado en el mismo tipo de
institucin, recibiera el mismo tipo de medicacin, sus familias tuvieran una actitud parecida respecto a ellos, etc. Si ha sido as, cuando observemos una mejora en el experimental, que no se puede explicar por la tendencia de su serie y que adems no se ha observado
en el grupo de cuasi control, estaremos ms seguros de que se debe a la eficacia del tratamiento.
Diseo de serie temporal interrumpida con un grupo

y dos variables dependientes
ol.Y o2.v o3.Y o4.Y
os.v o6.Y o7.Y os.v
o1.z o2.z o3.z o4.z
os.z o6.z o7.z os.z
De forma premeditada comenzamos este apartado con el esquema del diseo antes de contextualizar una investigacin aplicada. Esperamos que a estas alturas del captulo usted sea
capaz de imaginar la estructura que representan los smbolos escritos. As que le rogamos que
antes de seguir leyendo responda a las siguientes preguntas:
344
l.
2.
3.
4.
Qu significan los subndices 1 a 8?

Qu significan las letras Y y Z acompaando a los subndices?
Qu indica la no existencia de una lnea entre los registros superior e inferior?
Qu diferencia la accin del investigador en la lnea donde est la X de la lnea donde
est la C?
Como suponemos que dispone de las respuestas correctas 3 , ahora le vamos a pedir que
haga algo ms difcil. Corte las dos series (superior e inferior) hasta el punto tres y desde el
seis. De qu diseo se trata ahora?
o4.Y
os.v
o4.z
os.z
Si pasa las pginas hacia atrs encontrar que estamos hablando del diseo pre-post con
cuasi control en una segunda variable dependiente. Luego, lo primero que podemos decir es
que el presente diseo es una ampliacin del anterior, respecto al cual ganamos control al
poder estudiar la estabilidad de la conducta de los sujetos tiempo antes de la intervencin y
tiempo despus. Ganaremos validez en la medida en la que podamos descartar las amenazas
de la variabilidad, tendencia y ciclicidad de la medida.
Retomemos el ejemplo en el que pretendamos poner a prueba la eficacia de un programa
de modificacin de conducta por economa de fichas en la conducta colaboradora de un grupo
de enfermos psiquitricos. La conducta que reforzamos era la de recoger los vasos desechables (Y) y la conducta de cuasi control (Z) era el mantenimiento del orden en los cuartos. Con
la ampliacin que propone este diseo debemos obtener registros de cuatro das antes de aplicar la intervencin y de cuatro despus. Tanto en una conducta como en la otra.
La mayor ventaja de este diseo es que permite asegurarnos la persistencia del cambio
como consecuencia de la intervencin. Esto es especialmente relevante si la conducta que
estamos estudiando es muy voluble y el cambio observado puede ser pasajero. En nuestros
pacientes no slo vamos a comparar su conducta colaboradora al recoger los vasos antes y
despus del programa de refuerzo, sino que vamos a poder observar si, pasados los primeros
momentos de novedad, los premios pierden su poder reforzador y se produce una acomodacin que conlleva una vuelta a la conducta anterior. Esto no lo podamos saber con el primer
diseo, en el que slo registrbamos la conducta tras la aplicacin del programa. Por tanto,
cuando estemos interesados en probar no slo la eficacia de un tratamiento --contrastada con
la segunda variable dependiente- sino la estabilidad del cambio deberemos recurrir a un
diseo temporal como ste.
Cul hubiera sido el diseo experimental ideal y cules las restricciones que nos han llevado a realizar estos diseos?
Aunque stos son los diseos cuasi experimentales con mayores garantas, de ser posible,
habramos optado por un diseo inter-sujetos de grupos aleatorios para la variable (tratamiento, control) e intra-sujetos para la mejora en el tiempo (antes, despus). La restriccin
fundamental es la imposibilidad de asignar los sujetos al azar a los grupos.
3
Para el lector que se dirige a este apartado directamente, las respuestas son: l . Los ocho momentos en los
que se registra la serie. 2. Y y Z son dos variables dependientes en las que, se hipotetiza, influye el tratamiento.
3. Se trata de los mismos sujetos en las dos series. 4. La X indica aplicacin del tratamiento y la C implica cuasi
control.
CUADRO 11.7.
345
RESUMEN DE LOS DISEOS DE SERIE TEMPORAL INTERRUMPIDA
CON CUASI CONTROL EN

SIMPLE
0 1 0 2 0 3 X 0 4 Os 0 6
un segundo grupo
una segunda variable
0 1 0 2 0 3 X 0 4 Os 0 6
------------------------------01 02 03 e 04 05 06
oi.Y o2.Y o3.Y X o4.Y os.Y o6.Y
o~.z o2.z o3.z
e o4.z os.z o6.z
Las caractersticas comunes de estos diseos son: repeticin en el tiempo de las observaciones
antes y despus de la intervencin y prueba del efecto absoluto de la intervencin con los mismos sujetos. En los dos de la derecha, existe otra serie para relativizar la influencia de dicha
intervencin; en el primer caso, el cuasi control se lleva a trmino utilizando otro grupo de sujetos y en el segundo, usando otra variable de los mismos sujetos.
DISEO DE DISCONTINUIDAD EN LA REGRESIN

En una Facultad de Psicologa, en el rea de Metodologa, estn preocupados por los alumnos
a los que ms cuesta aprobar el Anlisis de Datos. Deciden cambiar el procedimiento tradicional de que los repetidores se repartan de forma aleatoria por los distintos grupos de alumnos del curso correspondiente. En el curso actual, aquellos alumnos que obtuvieron menos de
dos y medio en la nota final el curso pasado son invitados a un grupo especial de repetidores.
Los que obtuvieron dos y medio o ms siguen el procedimiento tradicional. Al acabar el ao
representamos las puntuaciones de los dos aos. Los datos se reflejan en la Figura 11.2.
FIGURA 11.2.
DISCONTINUIDAD EN LA REGRESIN
Repetidores en grupo normal
8
Repetidores en grupo especial
'!'
*
*'
*,.
*'
*
0+---~---+--~r---+---~---+----r---+---~--~--~
0,00
0,50
1,00
1,50
2,00
2,50
3,00
NOTAS CURSO PASADO
3,50
4,00
4,50
5,00
346
Cada uno de los puntos representa las notas de un estudiante. En el eje de abscisas
estn las notas del curso pasado y en el de ordenadas, las del actual. As la marca del punto
(4,5, 7,5) representa a un estudiante que obtuvo un 4,5 el curso pasado y que este ao ha obtenido un 7,5. A continuacin nos centramos en los alumnos que obtuvieron notas el ao
pasado de ms de 2 y menos de 5. Este grupo de alumnos ha seguido las clases como se hace
normalmente todos los aos; constituye el grupo de cuasi control. Observar que, aproximadamente, por la mitad de la nube de puntos hay dibujada una gruesa lnea recta. Esta lnea
recibe el nombre de recta de regresin. Sirve para hacer predicciones. Por ejemplo, a un estudiante que en el curso pasado obtuvo un 4 la recta de regresin le predice que obtendr un 6.
La forma de hacerlo es trazando una vertical por el valor 4 en abscisas hasta que corte a la
recta. El valor de ordenadas de este punto (6) es el pronosticado (compubelo en la Figura 11.2). Con los datos que tenemos dibujados, para el caso de obtener un 4 el curso pasado,
la recta pronostica relativamente bien a dos estudiantes (uno que obtiene un 6,5 y otro que
obtiene un 5,5) y se equivoca algo ms con los que han obtenido un 5 y un 4,5. La recta est
construida de forma que las distancias 4 entre los valores pronosticados y los reales es la
menor posible. Quiz se pregunte usted para qu queremos pronosticar valores en el examen
de este ao si ya conocemos los datos reales. Efectivamente, para este ao puede que no, pero
podemos pronosticar con los nuevos suspensos para el prximo curso.
Como puede comprobar en la Figura 11.2, para el grupo de suspensos que ha asistido a
una clase especial -notas del curso pasado de 2 o menos- se ha construido otra recta de
regresin. Esta recta es la que produce unas distancias menores entre las puntuaciones reales
y las pronosticadas, de los estudiantes del grupo especial. Esta segunda lnea no es continuacin de la primera. Las dos rectas son discontinuas en el valor que serva para clasificar a
los alumnos en los dos tipos de clases.
Veamos ahora qu consecuencias tiene esta discontinuidad justo en el punto de clasificacin de los sujetos. Suponga por un momento que una estudiante a la que le suspendieron
con un 2,5, en vez de ir a su clase normal, decide ir con una amiga al grupo especial, qu
nota le pronosticaramos al final de este curso? Como ha asistido a las clases del grupo especial tendremos que utilizar la recta de este grupo. La recta en la Figura 11.2 se termina en el
valor de abscisas 2, pero si la prolongsemos hasta el 2,5 podemos ver que la recta le pronosticara una nota de 5,5. Qu nota se le pronostica a esta alumna si se queda en su grupo
normal correspondiente? Si miramos en la recta del grupo normal vemos que a quien obtuvo
un 2,5 se le pronostica un 4,5, un punto menos que en el otro grupo. De la misma forma
podemos razonar para la persona que obtuvo un 2 el a~o pasado, a quien se le pronostica un
5 en el grupo especial y un 4 en el normal.
Volvamos al principio del problema. Desebamos comprobar si incluir a los alumnos que
suspenden con notas bajas en un grupo especial sera mejor para ellos que repartirlos en las
clases normales. Segn los datos presentados en la Figura 11.2 y por la discusin planteada
en el punto de discontinuidad de la regresin, podemos contestar afirmativamente.
Extraigamos ahora la lgica que subyace a este tipo de diseo cuasi experimental.
1
/2 inf 0 1 X 1/2 inf 0 2
sup
01
sup
02
Elevadas al cuadrado para evitar que se anulen las diferencias con signos opuestos.
347
Las notas del curso pasado son puntuaciones pre (1). Hacemos una divisin en los sujetos en dos subgrupos atendiendo a sus puntuaciones pre. Unos conforman el grupo inferior y
otros el superior. En el esquema hemos puesto dos mitades por simplicidad. Se dividirn de
acuerdo al criterio de la investigacin. A continuacin los del subgrupo inferior reciben el tratamiento, mientras que los del subgrupo superior actan de cuasi control. Observe que la pertenencia a cada subgrupo est totalmente restringida por el punto de intervencin, razn por
la que la lnea de divisin es ondulada.
Podramos pensar en otra manera de formar un grupo de cuasi control? En este contexto supondra encontrar otro grupo de alumnos de otra facultad en las mismas circunstancias.
Sin embargo, esta posibilidad est llena de dificultades, ya que es muy difcil -si no imposible- que el nuevo grupo tenga el mismo programa, similares mtodos de enseanza,
similares niveles de exigencia, similares formas de examinar, etc. En definitiva, nos vemos
abocados a desecharla. Estos problemas son solventados con el diseo actual: cuando tenemos una investigacin aplicada sobre la efectividad de un programa a un grupo extremo de la
poblacin, podemos comprobar la eficacia proyectando su efectividad sobre el resto del
grupo y viceversa. A este estudio de las diferencias de pronsticos en el entorno del punto de
clasificacin se le denomina anlisis de la discontinuidad en la regresin.
Es necesario hacer un par de advertencias, aparte de las exigencias estadsticas, sobre el
adecuado uso de este diseo de cara a su posterior anlisis. La primera es que la nube de puntos generada por las puntuaciones pre y post debe sustentar una recta como mejor lnea de
regresin. Antes de cualquier medida estadstica del grado de ajuste de los puntos a la recta se
recomienda una comprobacin visual de cmo se dispone la nube de los puntos. Segunda,
cuando el punto de corte se hace muy cerca del extremo (inferior o superior) se pueden introducir variables extraas especficas de esos grupos extremos que enmascaren la efectividad
del programa. Por ejemplo, supongamos que la mayora de los alumnos que obtuvieron 2
menos en Anlisis de Datos han accedido a la Universidad a travs de la prueba para mayores de 25, provienen de opciones de Letras y no han utilizado las matemticas desde hace ms
de diez aos. Un programa que funcione o fracase con este grupo es probable que no se
pueda generalizar al resto de los alumnos que no aprueban, dada su especial composicin.
Cuando nos referimos a programas de intervencin social con grupos extremos de la
poblacin se nos plantean algunas dificultades que son ms humanas que metodolgicas.
Comencemos con nuestro caso. Qu ocurre con el estudiante que sac un 2,5 y al que se le
asigna un mtodo que le pronostica un 4,5 respecto al que obtuvo un 2 y al que se le asigna
un grupo que le pronostica un 5? Estamos penalizando al que obtuvo medio punto ms?
Seguro que le resulta familiar escuchar las quejas de los ciudadanos que no son tan pobres
como para solicitar ayudas a los planes municipales de vivienda, pero tampoco tan ricos
como para comprar en el mercado libre. Como puede ver, el problema deja de ser metodolgico y se convierte en tico o poltico, algo por otro lado caracterstico de los programas de
intervencin social.
El plan experimental hubiera sido dividir aleatoriamente a los suspensos de 2 o menos en
dos grupos. Un grupo ira al grupo especial y otro al normal. Al final del curso actual se compararan los incrementos en cada caso. El diseo sera inter-sujetos de grupos aleatorios, para
la variable mtodo e intra-sujetos para la variable tiempo (comienzo, final del curso). Las restricciones son que los estudiantes no permitiran ser repartidos al azar en los dos mtodos,
especialmente si se supone que un procedimiento ser ms efectivo que el otro.
348
VALORACIN DE PROGRAMAS
Imagine que ha terminado ya sus estudios y que se establece por su cuenta como psiclogo
clnico especializado en la atencin de sujetos con drogodependencias. Su gabinete est
ubicado en una zona perifrica de una gran ciudad donde la incidencia del problema es alta.
Por suerte, usted empieza a conseguir una cierta fama de profesional eficaz en ese campo y,
un buen da, recibe una carta del responsable de asuntos sociales de la junta municipal del
distrito. En la carta se le explica que se est tratando de elaborar un plan pblico de lucha
contra la drogodependencia y se le pide su concurso profesional como especialista en el tema.
Tras varias reuniones en las que trabaja junto a otros expertos y al equipo poltico respnsable de la implantacin del plan, se concretan una serie de acciones encaminadas a lograr un conjunto de objetivos en varios frentes: el social, el familiar, el sanitario y el educativo. El equipo de trabajo est altamente satisfecho por haber sido capaz de definir el plan de
una forma coordinada e interdisciplinar. Sin embargo, usted, que ha recibido una slida formacin metodolgica, saca a relucir una cuestin que considera altamente importante. De
qu manera se puede valorar si el plan ser eficaz en el logro de los objetivos que se propone alcanzar?
Usted acaba de plantear la realizacin de lo que se conoce como valoracin de programas. La profesora Fernndez-Ballesteros, experta en este tema, define este tipo de actividad
profesional como la sistemtica investigacin del mrito, valor o xito de concretos tratamientos, intervenciones o programas llevados a cabo con el fin de producir cambios comportamentales en el contexto social (Fernndez-Ballesteros, 1992c, p. 475).
Al plantear la necesidad de obtener informacin, ms o menos contrastada, acerca de la
eficacia del plan elaborado, lo ms probable es que usted originara una acalorada discusin
dentro del equipo. Posiblemente, las opiniones se dividirn en dos grupos. Algunos miembros
del equipo, los pertenecientes a l en calidad de tcnicos, estaran bastante de acuerdo con su
planteamiento. Por otro lado, los otros miembros del equipo, los responsables polticos del
programa, mostraran ciertas reticencias a su sugerencia. Ello pondra de manifiesto algo que
est en el origen de la propia idea y es la relacin entre ciencia y poltica. Cules deben de
ser los criterios para la valoracin del programa? A usted y a sus colegas tcnicos se les ocurrira manejar criterios de xito ligados a la demostracin, ms o menos cientfica, de que el
plan ha modificado aquellos aspectos que pretenda modificar. Para sus compaeros polticos,
tendran la misma importancia, o ms, otros aspectos tales como, por ejemplo, el cambio de
la actitud de la poblacin hacia el problema, que se consigue con la mera elaboracin y puesta en marcha del plan.
Cuando se hace valoracin de programas, el poltico y el tcnico estn obligados a
negociar acerca de los criterios de relevancia del programa. Es decir, para poder llevar a cabo
una investigacin de tipo valorativo, los objetivos y, por tanto, los criterios de xito tienen que
estar claramente formulados, a poder ser antes de la puesta en marcha del programa. Una vez
conseguido esto, ya se puede pensar en el modo de llevar a cabo la investigacin. Es decir, se
puede elegir la metodologa a seguir. Si consulta alguno de los manuales clsicos de evaluacin de programas como el de Rossi y Freeman (1993) comprobar que la nica limitacin a
la hora de elegir el diseo debe ser la propia naturaleza de la investigacin y que existen
ejemplos de diseos en las valoraciones desde los ms dbiles a los ms potentes (la inmensa mayora contenidos en este libro).
En el Cuadro 11.8 se presenta un estudio de valoracin de programas llevado a cabo en
Espaa por el Ministerio de Educacin y Ciencia.
CUADRO 11.8.
349
VALORACIN DEL PROGRAMA DE INTEGRACIN
Tras la aprobacin del Real Decreto de Ordenacin de la Educacin Especial (16-lli-85), el

Ministerio espaol de Educacin y Ciencia (MEC) puso en marcha el Programa de Integracin
(PD consistente en la escolarizacin ordinaria de nios con necesidades educativas especiales. La
aplicacin del PI se planific a ocho aos, siendo de implantacin progresiva a partir de Preescolar y primer curso de Educacin General Bsica (EGB). La participacin de los centros en el
PI era, en una primera fase, de ndole voluntaria.
A fin de poder valorar la eficacia en la implantacin y funcionamiento del PI, el MEC consider los tres primeros aos del mismo de carcter experimental y encarg a un grupo de expertos
la elaboracin de un plan de investigacin que permitiera llevar a cabo dicha valoracin. De los
183 centros que comenzaron la aplicacin del PI, el equipo de investigacin seleccion una
muestra representativa compuesta por 60 centros con los que inici un plan de investigacin de
tipo longitudinal que dur tres aos. Al final de ese perodo, por diversas razones, la muestra
qued reducida a 52 centros.
Estos centros escolarizaban de forma integrada a 379 nios de los cuales 228 sufran algn
tipo de deficiencia intelectual, 57 sufran deficiencias motricas, 26 padecan deficiencias auditivas, 12 deficiencias visuales y, el resto, diferentes problemas tales como inadaptacin social,
autismo, alteraciones del lenguaje, etc. Junto con esta muestra, se seleccionaron otros 379 nios
pertenecientes a los mismos colegios y aulas que los anteriores y considerados pares de la
muestra de nios con necesidades educativas especiales.
En funcin de los objetivos del programa, se establecieron como criterios de xito del
mismo la produccin de cambios positivos en el desarrollo de los nios integrados en el sistema
educativo (profesores, aulas y centros) y en las actividades y expectativas de los padres hacia el
programa.
Las conclusiones de la integracin fueron muchas y de muy diversa ndole (vase MEC,
1990). Por razones de espacio, aqu resaltaremos slo algunas de ellas. As, por ejemplo, los
resultados pusieron de manifiesto que todos los nios integrados de la muestra avanzaron significativamente en su desarrollo cognitivo y social alcanzando alguno de los aprendizajes
correspondientes a sus niveles de escolarizacin. Sin embargo, cuando se les comparaba con la
muestra de sus <<pares>>, slo el 60% de los nios integrados progresaban de forma similar a
como lo hacan aquellos.
Dada la flexibilidad con que el Ministerio plante la aplicacin del plan, haba gran variedad
de situaciones segn colegios. Dos de las variables ms importantes a la hora de predecir el ajuste entre el modo de implantar la integracin en el colegio y la consecucin de sus objetivos fueron la actitud de los profesores ante la integracin y el grado de acuerdo del claustro a la hora de
decidir la incorporacin del colegio al PI. El programa result ms eficaz cuanto mejores eran la
actitudes de los profesores y mayor el grado de acuerdo en los claustros.
Finalmente, las a.:titudes de los padres no variaron a lo largo de los tres aos. Fueron altas
desde el principio y as se mantuvieron. El dato ms significativo a este respecto fue que las actitudes de los padres de los nios integrados fueron siempre superiores a las de los padres del resto
de los nios, aunque stas fueran tambin de ndole positivo.
Todos estos resultados, y otros que aqu no hemos comentado, sirvieron para que el equipo
de investigacin realizara una serie de sugerencias a la Administracin educativa de cara a
potenciar al mximo los logros del PI (vase MEC, 1990).
350
VALIDEZ
Validez interna
Decamos que un cuasi experimento viene definido por el hecho de que el investigador no
puede asignar a los sujetos aleatoriamente a las condiciones experimentales, pero puede introducir un procedimiento en su recogida de datos que guarde gran similitud con lo que se hace
en un experimento. Recordar que para poder contrastar relaciones causales entre variables
--objetivo principal de la experimentacin- era necesario que se diera covariacin entre las
variables independiente y dependiente, que la variable independiente antecediera a la dependiente en el tiempo y que se pudieran descartar otro tipo de variables como posibles causas de
la variacin observada en la dependiente. En el experimento, este objetivo se consigue a travs de la manipulacin de la variable independiente, de la libre asignacin de sujetos a las
condiciones, del control experimental y del adecuado uso de procedimientos de medida. En
la cuasi experimentacin, la capacidad del investigador para llevar a cabo un adecuado control experimental suele estar muy limitada.
Tanto Campbell y Stanley (1966) como Cook y Campbell (1979) sealan que en los diseos
cuasi experimentales -y tambin cuando se hacen experimentos en ambientes naturales 5aparecen una serie de amenazas potenciales a la validez interna de la investigacin que conviene tener muy en cuenta. stas son: el efecto enmascarado de la historia, el efecto enmascarado de la maduracin, la adaptacin de los sujetos a las pruebas, efectos de la instrumentacin, efectos debidos a la regresin a la media, efectos debidos a la seleccin de las muestras en
funcin de sus caractersticas con respecto a la variable independiente, prdidas no aleatorias
de sujetos en las muestras y, finalmente, interacciones entre algunas de estas siete. A lo largo de
los epgrafes dedicados a las diferentes variantes de la investigacin cuasi experimental ya nos
hemos referido a la mayora de estas amenazas. Repasamos, a continuacin, las principales.
Un tipo de amenaza a la validez interna de los diseos de medidas repetidas (pre-post y
serie temporal) es el relacionado con las medidas de la variable dependiente. Por un lado, los
sujetos repetidamente evaluados pueden mostrar los efectos de la prctica o de la simple
adaptacin a las pruebas de evaluacin. Por otro, el transcurso del tiempo puede hacer que
los instrumentos utilizados en las diferentes medidas de la variable dependiente no sean exactamente los mismos. Los aparatos pueden deteriorarse, pueden surgir nuevos instrumentos
que hagan incompatibles las medidas antes-despus, etc.
El efecto de la regresin a la media (vase Cuadro 6.3) era ms probable que ocurriera
cuando se seleccionaba a los sujetos por sus puntuaciones extremas en alguna variable.
Este tipo de situacin es frecuente en la investigacin de campo. Otro efecto, tambin relacionado con el hecho de tener que elegir a los sujetos por sus caractersticas personales, es el
llamado efecto de seleccin. La eficacia de un plan de estudios es independiente del grupo
de alumnos en el que lo hemos aplicado o hay algo especfico en ese centro, en esos estudiantes, que lo hace idneo?
Las situaciones de investigacin fuera del laboratorio se prestan, tambin, a la prdida, no
aleatoria, de sujetos en las muestras. El lector ya conoce 6 las consecuencias de este hecho.
Lo reseable, para los casos de la investigacin cuasi experimental, es que aumenta la probabilidad de que se produzca.
5
6
Vase el epgrafe dedicado a los experimentos de campo en el tema de la observacin.

Vase el epgrafe que sobre esta fuente de error aparece en el Captulo 6.
351
Finalmente, hay que resaltar que estas amenazas pueden aparecer tanto de forma aislada
como combinadas entre s, es decir, en interaccin. Las interacciones ms probables pueden
ocurrir entre la seleccin de sujetos y alguna de las otras fuentes potenciales de error, por
ejemplo, la adaptacin a la pruebas si el diseo es de serie temporal.
Validez externa
Un error comn cuando se investiga dentro de un esquema cuasi experimental es el de considerar que la validez externa es adecuada debido al hecho de que, la mayor parte de las
veces, se trabaja en contextos naturales y aplicados.
Conviene insistir, sin embargo, en que las amenazas a la validez externa no proceden slo
del hecho de trabajar en situaciones artificiales. Uno de los pasos ms importantes del proceso de investigacin es el de la seleccin de la muestra. Cuando sta est elegida mediante
algn procedimiento que maximice su representatividad, la validez externa de la investigacin
estar prcticamente garantizada.
Ocurre, sin embargo, que en la investigacin en contextos naturales no siempre se puede
seleccionar la muestra de forma adecuada. Muchas de las investigaciones sobre valoracin de
programas o sobre la eficacia de tratamientos en diferentes mbitos se suelen realizar con grupos de sujetos voluntarios. Este hecho supone un sesgo en la muestra que repercute sobre la
capacidad del investigador para generalizar sus resultados ms all de la propia investigacin.
Por tanto, es conveniente que cada investigador sopese, tambin, el grado en el que sus
resultados son generalizables fuera de la propia investigacin atendiendo a los problemas que
acabamos de mencionar. Quizs el lector tenga en estos momentos la sensacin de que no
merece la pena investigar determinado tipo de asuntos dados los problemas potenciales que
pueden surgir. Sin embargo, nada ms lejos de la realidad. En Psicologa, Educacin y otras
disciplinas afines, los investigadores llevan dcadas utilizando estrategias de investigacin
similares a las estudiadas aqu con unos resultados nada desdeables.
Tenga en cuenta el lector que la lgica que hemos seguido para la presentacin de los
diseos cuasi experimentales ha sido la de enfatizar sus desventajas, con respecto a la validez
interna, en comparacin con los verdaderos experimentos. En este sentido, parece estar
rodeada de amenazas y que stas son difciles de conjurar.
Algunos consejos generales pueden ayudar a aumentar la seguridad del investigador
cuando se mueve en mbitos en los que es difcil llevar a cabo verdaderos experimentos. Se
habr dado cuenta de que, en general, es mejor utilizar un grupo de cuasi control que no
hacerlo. Adems, la clave de la comparabilidad entre grupo experimental y control est en el
grado de equivalencia entre ambos. Cuando se utilice grupo de cuasi control hay que tratar de
conseguir uno lo ms equivalente posible al experimental.
Pero aunque se tenga que investigar en la peor de las situaciones --en relacin a las posibles amenazas a la validez interna que tenga que afrontar- no hay que amilanarse. Tngase
en cuenta que estamos hablando de potenciales amenazas. Es decir, stas no tienen por qu
presentarse siempre o, al menos, no todas a la vez. Por ejemplo, cuando se presenta la posibilidad de que existan explicaciones alternativas para los cambios observados en la variable
dependiente, dentro de un diseo pre-post con un solo grupo, no quiere decir que cualquier
otra variable pueda explicar los resultados. Precisamente porque la investigacin no se hace
de forma aislada, el investigador puede conocer las amenazas potenciales simplemente
observando qu tipos de variables se han tratado de controlar en estudios similares al suyo.
352
Ello no slo le permitir concretar las posibles causas alternativas sino, adems, mejorar su
control utilizando los procedimientos ya probados por otros colegas.
En resumen, la situacin se puede asemejar a la del propietario de un coche muy viejo. A
falta de algo mejor con lo que moverse, hay gente que conduce coches muy viejos. Cuanto
ms viejo es un coche ms probable es que le deje a uno tirado. Conviene revisarle a menudo los niveles de agua y aceite, que suelen ser fuentes de problemas. Tambin conviene llevarlo a revisin con mayor frecuencia. Pero todo ello no impide su utilidad. Entre no hacer un
interesante viaje y hacerlo en un coche viejo, qu eligira usted?
Terminaremos sugiriendo una posible filosofa con la que abordar el uso de los diseos
cuasi experimentales que podra ser sta: segn las circunstancias, haga el investigador
siempre lo que pueda pero, en cualquier caso, sepa siempre lo que hace. Es decir, que el
investigador elija el diseo ptimo para cada situacin pero que sea consciente de los riesgos
que asume al hacerlo.
Causacin y cuasi experimentos

Si los diseos experimentales son los adecuados para contrastar hiptesis de relacin causal,
cabra preguntarse qu tipo de relacin se contrasta en los cuasi experimentales. La respuesta
es, sin lugar a dudas, que tambin causal. La diferencia estriba en que con los experimentales
tenemos un mayor grado de seguridad de la existencia del nexo causal. A veces, equivocadamente, se dice que en la investigacin cuasi experimental no se pueden investigar causas o que
no se puede concluir en trminos de causacin. Se estudian relaciones causales con tcnicas
que no dan un cien por cien de seguridad sobre la atribucin causal. Por supuesto, siempre
debemos estar en condiciones de asegurar que existe covariacin, que la variable independiente
y su medida anteceden a la variable dependiente y que se pueden rechazar las explicaciones
alternativas a la variable independiente investigada. La seguridad de la conclusin depender
del diseo, de la investigacin en concreto y, sobre todo, de la finura experimental del investigador. Es posible que un grupo cuasi control se haya formado con tanto cuidado, con tanto control de variables para hacerlo lo ms equivalente posible al experimental, que sea ms til que
un grupo de control formado al azar, donde no se ha controlado ninguna variable. Por ltimo,
recuerde que el hecho de que se utilicen tcnicas de anlisis de datos similares a las de los
experimentos no nos proporciona una similar garanta de atribucin causal. El anlisis de
varianza es ciego a la forma en que se form el grupo de control. El investigador no debe serlo.
ANLISIS DE DATOS
Diseo pre-post con un solo grupo
El anlisis adecuado es un contraste de la diferencia de medias para grupos relacionados. La
organizacin de los datos la puede ver en el Captulo 8.
Diseos pre-post con grupos de cuasi control

La tcnica de anlisis recomendada es el anlisis de covarianza (para aplicarlo de forma
manual puede consultarse San Martn y Pardo, 1989).
353
l . Pre-post con grupo cuasi control. Imaginemos que tenemos las puntuaciones de diez
sujetos esquizofrnicos antes y despus de que cinco de ellos sean sometidos a un tratamiento.
Tendremos un fichero en el que, adems del nmero de sujeto necesitamos una columna para
las puntuaciones de la primera medida, otra para las puntuaciones de la segunda y otra para
especificar si los sujetos recibieron, o no, el tratamiento. En la primera medida pondremos el
nmero medio de das de duracin de los internamientos durante los ltimos cinco aos. Para
la segunda medida, utilizaremos el nmero medio de das que los sujetos han estado internados entre el comienzo y el final del perodo que dur el tratamiento del grupo experimental. Para indicar si un sujeto recibi el tratamiento utilizaremos un 1. Para indicar la
ausencia de tratamiento, utilizaremos un 0. El fichero resultante sera como el siguiente:
Sujeto
Grupo
1
2
3
4
5
6
7
1
1
1
o
o
o
o
o
8
9
10
Pre
Post
15
10
08
12
06
15
12
07
16
05
02
03
00
03
00
12
12
05
15
07
El procedimiento del anlisis de covarianza lo que hace es calcular una recta de regresin
entre la covariable -en este caso, la medida pre- y la variable dependiente --en este
caso, la medida post-, de tal forma que, a cada sujeto, se le pueda asignar una puntuacin
predicha por esta recta. Despus, se resta dicha puntuacin de la que el sujeto sac realmente
en el postest. La diferencia -puntuacin residual- servir para comparar a los dos grupos.
As, si se encuentran diferencias, tendremos mayor certeza de que no son debidas a la relacin con la situacin anterior a la introduccin del tratamiento, sino ms bien al efecto producido por ste.
2. Cuasi control en una segunda variable dependiente . Conviene transformar las escalas
de ambas variables a fin de hacer comparables medias y varianzas. Son los propios sujetos su
grupo de cuasi control. El anlisis ser de covarianza (covariable las medidas pre) para
medidas repetidas.
Sujetos
Pre-Ex
Post-Ex
Pre-C
Post-e
1
2
4
11
21
23
20
19
07
14
09
08
06
06
12
09
13
12
09
3. Pre-post con control en una cohorte anterior. Ahora es toda la cohorte primera la que
forma el grupo de cuasi control (0). Cabe la posibilidad de realizar un contraste de diferencias
de medias entre los grupos 0 1 (0-Pre) y 0 3 (1-Pre), como forma de medir la semejanza de las
354
cohortes antes de la instruccin. Esto se puede realizar con los datos tal y como los tenemos
organizados, aplicando la prueba correspondiente a diferencia de medias.
Sujetos
VI
2
3
4
5
o
o
7
8
Pre
Post
06
12
09
21
23
20
19
06
13
12
09
11
07
14
09
08
Diseo con medidas slo post

El diseo adecuado es el anlisis de varianza para grupos independientes (experimental y
cuasi control). Cuando tenemos grupos duplicados, haciendo el mismo anlisis, podremos
ver a posteriori con la correspondiente prueba de comparaciones mltiples, si los dos
grupos cuasi controles son iguales entre s y si lo son los dos grupos experimentales. Tambin a posteriori podremos ver si, en conjunto los dos experimentales son superiores a los
dos controles.
La consideracin de las cohortes nos permite introducir un control de las posibles diferencias debidas a paso del tiempo. Bastar con introducir un indicativo del ao y realizar
luego el anlisis de varianza anidado. Veamos como sera esta organizacin de los datos.
Sujetos
01
02
03
04
05
06
07
08
09
10
11
12
Aos
VI
VD
o
o
o
o
o
o
5
6
4
5
5
1
2
2
2
3
3
3
4
4
4
1
1
1
1
1
1
6
7
7
7
8
9
En el caso de dos programas y el grupo de cuasi control tendremos un anlisis con tres
grupos independientes. Cabe tambin la posibilidad de, a posteriori, comparar los dos programas, en conjunto, respecto al cuasi control.
Diseos de serie temporal interrumpida

La lgica de la organizacin de los datos es la misma, considerando que ahora hay ms variables pre y ms post. Para orientar el anlisis de este tipo de diseos puede consultarse la obra
de Vallejo (1996).
355
Veamos cmo se preparan los datos con el caso de un grupo de cuasi control.
Sujetos
VI
prel
pre2
pre3
postl
post2
post3
2
3
1
1
1
5
6
5
5
6
5
3
4
4
6
4
5
7
8
8
9
5
5
5
8
7
7
7
5
6
6
7
7
6
9
5
6
5
3
5
6
7
8
o
o
o
o
5
6
6
6
5
5
Discontinuidad en la regresin
El anlisis recomendado es el de covarianza, utilizando como covariable las medidas pre, en
el ejemplo propuesto, el curso pasado. El grupo de repetidores en clase especial es el experimental (1) y el de repetidores en clase normal el control (0), como en todos los casos. La
organizacin de los datos es idntica a la presentada para el caso de pre-post, con grupo de
cuasi control.
Aunque sea redundante con lo dicho en otros captulos, tener los datos en la rejilla adecuada y que el programa de anlisis complete los clculos, no es suficiente. Hay que asegurarse -o que nos aseguren- que las restricciones que impone cada anlisis se cumplen. Para
el caso de los diseos cuasi experimentales es de especial relevancia recordar que la magnitud de las diferencias slo nos habla de las diferencias entre los datos y que lo que en un diseo experimental se traduce en una inmediata conclusin sobre la causalidad existente, aqu
hemos de interpretar esa cuanta condicionada a las restricciones y a las amenazas a la validez inherentes al caso.
356
GLOSARIO
adaptacin a las pruebas. Sesgo potencial en la medida de la variable dependiente que se debe a la
adaptacin de los sujetos a las tareas de evaluacin.
cuasi experimento. Plan de recogida de datos en el que el investigador, siguiendo un proceso similar
al del experimento, no puede asignar al azar los sujetos a las condiciones de la variable independiente en los diseos nter, o no puede invertir el orden de aplicacin en los intra.
diseo con dos tratamientos y medidas slo post. Diseo cuasi experimental slo post, con grupo
cuasi control, donde se utilizan dos tratamientos sobre los que se hipotetiza una eficacia diferencial.
Las distintas diferencias de los grupos experimentales sobre el cuasi control incrementan la validez
del diseo.
diseo con grupos duplicados en cohortes sucesivas y medidas slo post. Diseo cuasi experimental
slo post con grupo cuasi control, donde se duplican tanto el grupo experimental como el cuasi
control para incrementar la validez del diseo. El investigador utiliza dos cohortes sucesivas para
cuasi control y otras dos sucesivas para el tratamiento. Todas las cohortes se ubican en la misma
institucin.
diseo con grupos duplicados y medidas slo post. Diseo cuasi experimental slo post con grupo
cuasi control, donde se duplican tanto el grupo experimental como el cuasi control para incrementar la validez del diseo.
diseo con medidas slo post y cuasi control en una cohorte anterior. Diseo cuasi experimental
con medidas slo post tanto en el grupo experimental como en el cuasi control. El investigador utiliza como cuasi control una cohorte anterior a la estudiada. Ambas cohortes se ubican en la
misma institucin.
diseo de discontinuidad en la regresin. Diseo cuasi experimental en el que el grupo tratado lo es
por ser extremo en una medida pre. La eficacia se contrasta comparando las medidas post predichas -regresin- de los sujetos tratados con las predichas para los no tratados, en el punto de
corte.
diseo de serie temporal interrumpida con cuasi control en una segunda variable dependiente.
Diseo cuasi experimental en el que el efecto de la intervencin en una serie de observaciones es
contrastado con otra serie de observaciones en el mismo grupo de sujetos, pero en otra variable
dependiente no tratada y sensible a la misma intervencin.
diseo de serie temporal interrumpida con grupo de cuasi control. Diseo cuasi experimental en el
que el efecto de la intervencin en una serie de observaciones es contrastado con otra serie de
observaciones en un grupo cuasi control sin intervencin.
diseo pre-post con cuasi control en una cohorte anterior. Diseo cuasi experimental.con medidas
antes y despus del tratamiento, donde el investigador utiliza como cuasi control una cohorte anterior a la estudiada. Ambas cohortes se ubican en la misma institucin.
diseo pre-post con cuasi control en una segunda variable dependiente. Diseo cuasi experimental con medidas antes y despus del tratamiento, donde el investigador utiliza como cuasi control medidas de los mismos sujetos en otra variable dependiente no tratada y sensible a la misma
intervencin.
diseo pre-post con un solo grupo. Diseo cuasi experimental en el que se utiliza un solo grupo, y se
mide antes y despus de la aplicacin del tratamiento para evaluar los cambios producidos por ste.
diseo simple con medidas slo post. Diseo cuasi experimental con medidas slo post tanto en el
grupo experimental como en el cuasi control.
diseo simple de serie temporal interrumpida. Diseo cuasi experimental en el que se registra una
serie de medidas de un grupo, habiendo introducido un tratamiento en la mitad del proceso.
diseos slo post. Diseos cuasi experimentales donde el investigador no puede tomar medidas antes
del tratamiento porque ste ya ha sido aplicado cuando accede a su estudio.
grupo de cuasi control. Grupo de control que no se establece mediante asignacin aleatoria. Sinnimo de grupo de control no equivalente.
357
sesgo de instrumentacin. Sesgo potencial en la evaluacin de los sujetos en un diseo con medidas
repetidas debido a posibles cambios incontrolados en los instrumentos utilizados para llevarlo a
cabo.
sesgo de seleccin. Sesgo potencial en los resultados de la investigacin debido a caractersticas de los
sujetos seleccionados no controladas por el investigador.
valoracin de programas. Actividad de investigacin encaminada a determinar el mrito, valor o eficacia de un tratamiento, intervencin o programa en un mbito social con el fin de producir cambios en l.

Tema 3

Uploaded by

Document Information

Original Title

Copyright

Available Formats

Share this document

Share or Embed Document

Sharing Options

Did you find this document useful?

Is this content inappropriate?

Copyright:

Available Formats

Tema 3

Uploaded by

Copyright:

Available Formats

CAPTULO

DISENOS CUASI EXPERIMENTALES

DISEOS PRE-POST ...............................................................................................................

DISEOS CON OBSERVACIONES SLO POST..................................................................

DISEOS DE SERIE TEMPORAL INTERRUMPIDA...........................................................

Diseo simple de serie temporal interrumpida....................................................................

DISEO DE DISCONTINUIDAD EN LA REGRESIN .......................................................

VALORACIN DE PROGRAMAS ................................ ....................... .. .................................

ANLISIS DE DATOS .............................................................................................................

Diseo pre-post con un solo grupo......................................................................................

GLOSARIO ... .......... ...... .. ..........................................................................................................

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

11. Diseos cuasi experimentales

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

11. Diseos cuasi experimentales

LA EDUCACIN DE LOS NIOS CON PARLISIS CEREBRAL

0 es la inicial de observacin. Se refiere al conjunto de registros de un grupo de

Diseo pre-post con grupo de cuasi control

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

es ms difcil conseguir grados de semejanza similares a los que se consiguen cuando se

11 . Diseos cuasi experimentales

SER AUTNOMO O SER MARIONETA

DeChanns (1976) presenta un trabajo en el que se pone a prueba la eficacia de un determinado

Diseo pre-post con cuasi control en una segunda variable dependiente

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

11. Diseos cuasi experimentales

Diseo pre-post con cuasi control en una cohorte anterior

En la lnea superior est representada la generacin --cohorte- inmediatamente anterior

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

11. Diseos cuasi experimentales

RESUMEN DE LOS DISEOS PRE-POST

CON CUASI CONTROL EN

una cohorte anterior

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

DISEOS CON OBSERVACIONES SLO POST

11. Diseos cuasi experimentales

El esquema en el contexto de ciclos institucionales es:

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

CUADRO 11.5. ESPERANDO-Y ENCONTRANDOLAS DIFERENCIAS INDIVIDUALES

11. Diseos cuasi experimentales

RESUMEN DE LOS DISEOS CON MEDIDAS SLO POST

CON GRUPOS DUPLICADOS

DISEOS DE SERIE TEMPORAL INTERRUMPIDA

we have multiple observations over time>> .

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

diseo AB con un solo sujeto. Si el tratamiento es efectivo, la serie de medidas presentar

11. Diseos cuasi experimentales

Diseo de serie temporal interrumpida con grupo de cuasi control

Diseo de serie temporal interrumpida con un grupo

os.v o6.Y o7.Y os.v

o1.z o2.z o3.z o4.z

os.z o6.z o7.z os.z

Mtodos de investigacin en Psicologa y Educacin 1 Len y Montero

Qu significan los subndices 1 a 8?

11. Diseos cuasi experimentales

RESUMEN DE LOS DISEOS DE SERIE TEMPORAL INTERRUMPIDA

CON CUASI CONTROL EN

una segunda variable

oi.Y o2.Y o3.Y X o4.Y os.Y o6.Y

o~.z o2.z o3.z

e o4.z os.z o6.z

DISEO DE DISCONTINUIDAD EN LA REGRESIN

Repetidores en grupo normal