Estoy confundido sobre la hipótesis nula para la regresión lineal.
La cuestión se aplica a las hipótesis nulas más ampliamente que a la regresión
¿En qué se traduce eso en términos de hipótesis nula?
Deberías acostumbrarte a declarar nulos antes de mirar los valores p.
¿Estoy rechazando la hipótesis nula de que el coeficiente de esa variable es 0
Sí, siempre y cuando sea el población coeficiente, ( $\beta_i$ ) de la que hablas (obviamente - con respuesta continua - la estimación del coeficiente no es 0).
¿o estoy aceptando la hipótesis nula de que el coeficiente es != 0?
Hipótesis nula generalmente sería null - ya sea "sin efecto" o algún valor convencionalmente aceptado. En este caso, que el coeficiente de población sea 0 es un nulo clásico de "no efecto".
De forma más prosaica, al contrastar una hipótesis puntual con una alternativa compuesta (una alternativa de dos caras en este caso), se toma la hipótesis puntual como nula, porque es la que permite calcular la distribución de la estadística de la prueba (de forma más general, utilizar un conjunto abierto para una nula presenta ciertos problemas, incluso cuando ambas son compuestas). Con un par de hipótesis puntuales, uno es (al menos mecánicamente) libre de hacer que cualquiera de ellas sea la nula (e incluso entonces uno todavía querría generalmente hacer que la que es más claramente "nula" sea la nula - si cualquiera de ellas lo es; es decir, elegir la 'sin efecto' o la convencionalmente aceptada como nula).