Suponga que $X$ es una variable aleatoria arbitraria, ¿es cierto lo siguiente para cualquier función $f$?: $$\underset{y\in \mathcal Y} \sup \mathbb E\big[f(X,y)\big] \le \mathbb E\big[\underset{y\in \mathcal Y} \sup f(X,y)\big]?$$
Si $f$ es convexa en $X$, entonces la desigualdad claramente se cumple, ya que el supremo de una familia de funciones convexas sigue siendo convexo. Si $f$ no es convexa en $X, creo que la desigualdad todavía se cumple por la siguiente razón:
Para cualquier realización de $X$ y cualquier valor de $y$, tenemos $f(X,y) \le \underset{y\in \mathcal Y} \sup f(X,y)$. Por lo tanto, para cualquier $y$, $\mathbb E\big[f(X,y)\big] \le \mathbb E\big[\underset{y\in \mathcal Y} \sup f(X,y)\big]$. En otras palabras, $\mathbb E\big[\underset{y\in \mathcal Y} \sup f(X,y)\big]$ es una cota superior del conjunto $\left\{\mathbb E\big[f(X,y)\big]: y\in \mathcal Y\right\}$, por lo que se sigue que $\underset{y\in \mathcal Y} \sup \mathbb E\big[f(X,y)\big] \le \mathbb E\big[\underset{y\in \mathcal Y} \sup f(X,y)\big]$.
Entonces parece que la convexidad de $f$ no es necesaria en absoluto para que se cumpla la desigualdad. ¿Me equivoqué en algo? Agradecería si alguien me corrigiera, si me he saltado algo. ¡Muchas gracias!