Regresin Lineal

Simple

Modelo de Regresin Lineal

Simple
La ecuacin de regresin lineal
poblacional es:

Yi 0 1 X i i

Variable respuesta o dependiente: Yi

Coeficiente de interseccin
poblacional: 0

Coeficiente de regresin poblacional: 1

Variable predictora, regresora o

independiente: Xi

Error aleatorio no observable: i

Mtodo de Mnimos Cuadrados

El mtodo de mnimos cuadrados permite

encontrar las estimaciones de 0 y 1 tal
que se minimice la suma de cuadrados de
n
n
los errores:
2
2
Q 0 , 1 i Yi 0 1 X i
i 1

i 1

Las ecuacionesn normales son:

Y
i 1
n

1 X i 0

X 0
X
Y

i i 0 1 i
i 1

Mtodo de Mnimos
Cuadrados

Los estimados son:

0 Y 1 X

SP XY

SC X

X Y nXY
i 1
n

X
i 1

i i
2
i

Por lo tanto, la lnea o ecuacin de

regresin estimada es:
Yi 0 1 X i

nX

Error estndar de estimacin

El residual describe el error de estimacin

en el ajuste del modelo en la i-sima
observacin.

ei Yi Yi Yi 0 1 X i

Una medida general de la diferencia entre

cada valor observado y el valor estimado
es el error estndar den estimacin.
2
Se

e
i 1

n2

Anlisis de variancia
El anlisis de variancia es una tcnica
estadstica que consiste en dividir la suma de
cuadrados de la variable dependiente en sus
fuentes de variacin.
Cuadro de anlisis de variancia:
Fuentes
Suma
Grados
Cuadra
F
de
de
de
do
calculad
variaci
cuadra
libertad
medio
o
n
dos
Regresi
1
SCReg SCReg F0 = (1)/
n
(1)
(2)
Error
n2
SCErro
Se2 (2)
r

Anlisis de variancia

donde: SCReg 1SP XY

~
N
0,

Supuesto:i

Hiptesis: H 0 : 1 0

SCTotal SC Y

H a : 1 0

SCReg
F0
~ F 1, n 2
Estadstico de prueba:
2
Se

F0 F1 ,1, n 2
Criterio de rechazo:

Coeficiente de determinacin

El coeficiente de determinacin R2 se define

por:
R2

SC Reg
100%
SC Total

es decir, mide la proporcin de la variacin

total de la variable dependiente que es
explicada por el modelo de regresin (o por
la variable independiente).
Si R2 > 0.8 el modelo de regresin es
satisfactorio.

Coeficiente de correlacin
lineal

El coeficiente de correlacin lineal mide el

grado de asociacin lineal entre dos
variables. El coeficiente de correlacin
muestral, r , puede variar de 1 a 1.

Si r se acerca a 1 existe relacin lineal

fuerte e inversa entre las variables. Si r se
acerca a 1 existe relacin lineal fuerte y
directa entre las variables. Si r se acerca a 0
no existe relacin lineal entre las variables
en estudio, pudiendo existir algn otro tipo
de relacin no lineal.

Tambin se cumple que R2 = r2 (el signo

depende del tipo de relacin).

Ejemplo

El gerente de una compaa se est

preparando para una reunin, y le gustara
mostrar al grupo de vendedores la relacin
entre el nmero de visitas a clientes y el
monto de los pedidos que se reciben. De sus
registros se recolect la siguiente informacin
muestral para el ltimo ao. Los datos fueron
los siguientes:
X = Nmero de visitas
X
5 Y =4 Monto
6 de
7 los8 pedidos
1
3(miles
4 de
1
3
Y 8.7dlares)
7.1 13. 15. 16. 2.2 4.6 7.5 2.3 6.1
7
1
7

Ejemplo

Encuentre el modelo de regresin lineal

estimado e interprete sus coeficientes.
Calcule e interprete el coeficiente de
determinacin y de correlacin.
Se puede afirmar que existe relacin
lineal significativa entre las variables en
estudio? Use un nivel de significacin del
5%.