En esta pregunta, el OP en un momento dice que desde $t\mapsto P[X=t]$ es cero en casi todas partes, es casi en todas partes diferenciables. He señalado que esto no será el caso - $\mathbf1_{\mathbb Q}$ es el ejemplo habitual de una función que es cero en casi todas partes, pero continua, en ninguna parte, pero me di cuenta de que la situación es un poco más sutil en este caso.
Si $\mu$ es una medida de probabilidad en $\mathbb R$, a continuación, para cada $\varepsilon>0$, $\mu\{t\}\ge\varepsilon$ por, al menos, un número finito de $t$. En particular, $\lim_{s\to t}\mu\{s\}=0$ todos los $t\in\mathbb R$, lo $t\mapsto\mu\{t\}$ es continua en cada punto de continuidad de $\mu$. (Recordemos que el punto de la continuidad se refiere a la función $t\mapsto\mu((-\infty,t])$, por lo que esta declaración no es tan absurdo como parece.) Ya no puede haber más de countably muchos átomos, esto demuestra que al menos nos hacen tener una.e. continuidad.
¿Qué acerca de la diferenciabilidad? Este es un messier pregunta. Obviamente, la función no es diferenciable en cualquier átomo. Si la derivada existe en $t_0$, entonces debe ser igual a cero. Por tanto, tenemos que la diferenciabilidad en $t_0$ es equivalente a
$$\mu\{t_0+h\}=o(h)\qquad\text{as }h\to0.\qquad\qquad(\dagger)$$
Qué $(\dagger)$ ocurre para casi todas las $t_0$? No sé. También no sé cómo probaría si lo sabían, tampoco. Yo tenía una idea para una prueba de la declaración afirmativa, tratando de demostrar que el conjunto de $t$ donde $\mu\{t\}=0$ pero $(\dagger)$ falla es en la mayoría de los contables, pero no filtra hacia fuera. Un contraejemplo sería, sin duda, complicado y difícil de visualizar, sería necesario tener una contables conjunto de átomos cuyo cierre había vacío interior en un mínimo.
Si la respuesta vuelve a ser negativa, ¿cómo se portó mal puede la función de ser? Puede que el conjunto de $\{t:s\mapsto\mu\{s\}\text{ is differentiable at }t\}$ cero medir?