Límite no tiene que ver con la existencia de la función en ese punto. En el contexto del problema dado,
$$f(x) = \frac{x^2-4}{x-2}= \frac{(x-2)(x+2)}{x-2}$$
Estudiamos el comportamiento de $f$ como $x$ enfoques de un cierto punto. Por ejemplo vamos a estudiar la RHL por considerar el valor de $f$ en algunos puntos:
$$f(2.01) = 4.01$$
$$f(2.001) = 4.001$$
$$f(2.0001) = 4.0001$$
A ver cómo cuando nos movemos $x$ más cerca de la $2$, $f(x)$ se acerca a $4$.
De igual manera para la LHL,
$$f(1.99) = 3.99$$
$$f(1.999) = 3.999$$
$$f(1.9999) = 3.9999$$
Lo mismo ocurre cuando nos acercamos a $x$ más cerca de la $2$, $f(x)$ se acerca a $4$.
Ahora en breve de la mano podemos hacerlo así
$$\lim_{x \to 2} \frac{(x-2)(x+2)}{x-2}$$
Ahora desde $ x \neq 2$, $x - 2 \neq 0$. Por lo tanto, podemos cancelar el factor en el numerador y el denominador por encima. Por lo tanto tenemos
$$\lim_{x \to 2} \frac{(x-2)(x+2)}{x-2}$$
$$=\lim_{x \to 2} x+2$$
$$=4$$