Para los valores pequeños de n he podido comprobar, parece que por $n>3$, existen números enteros $x,y$ s.t. $n! = x^2 - y^2$. Por ejemplo ..
$4! = 5^2 - 1^2$
$5! = 11^2 - 1^2$
$6! = 27^2 - 3^2$
$7! = 71^2 - 1^2$
$8! = 201^2 - 9^2$
$9! = 603^2 - 27^2$
$10! = 1905^2 - 15^2$
$11! = 6318^2 - 18^2$
$12! = 21888^2 - 288^2$
En la mayoría de los casos anteriores, el valor de $x$ valor es simplemente el siguiente entero más grande que $\sqrt{n!}$, a pesar de que a $n=12$ y $n=17$ es el siguiente. Con las herramientas a la mano sólo he sido capaz de comprobar esto en cuanto a $n=17$.
Espero que probablemente hay ya un nombre para esto, pero no saber que nombre, google venía seco.