Ya hay algunas respuestas estupendas a esta pregunta, pero me gustaría dar una respuesta más práctica desde mi propia perspectiva como doctor en química orgánica que hizo química computacional en el lateral.
La mayoría de los campos en su vanguardia son imprevisibles
He observado que, cuando se llega a la frontera de lo posible, el progreso sólo se produce, en general, a través de un largo proceso de prueba y error. Cuando se produce un avance en la comprensión y el proceso se vuelve de repente fácil, se avanza rápidamente hasta que las cosas vuelven a ser difíciles. Esto es válido para todo tipo de proyectos complejos. La teoría te ayuda hasta ahora, pero en algún momento tienes que salirte de los caminos trillados y hacer tu propio camino.
La química se vuelve matemáticamente difícil, rápido
Alguien que está completando su licenciatura en un campo STEM es probable que tenga una impresión un poco sesgada del primer hecho, porque tendrá ya ha llegado a ese punto de imprevisibilidad con la química pero no con la física . Se necesita mucho tiempo para aprender las ecuaciones diferenciales asociadas a temas como la mecánica, la tensión-deformación, la transferencia de calor, la dinámica de fluidos, el electromagnetismo y los campos cuánticos. Estos temas suelen tener soluciones para situaciones idealizadas que se pueden escribir en papel de forma cerrada.
La simplicidad (comparativa) de estas soluciones, junto con la dificultad de aprender las matemáticas necesarias en el camino, puede dar al físico de primer ciclo la idea errónea de que así es toda la física. Ecuaciones diferenciales difíciles, pero abordables, que dan soluciones elegantes. En realidad, una vez que se superan las condiciones idealizadas, la física se centra mucho más en la simulación por ordenador y la experimentación.
En cambio, las ecuaciones que describen lo que ocurre en el matraz (cinética y termodinámica) pasan de ser triviales a ser alucinantemente difíciles con sólo un poco de complejidad añadida. Otros contestadores han profundizado en esta parte, así que no hablaré más de ella aquí. Basta con decir que pasé muchas horas infructuosas de mi educación tratando de encontrar un enfoque matemático generalizado para los problemas a los que me enfrentaba.
En la práctica, al menos en el caso de la química orgánica, el objetivo principal es sintetizar compuestos a partir de otros compuestos, normalmente complejos, a partir de otros simples. La teoría se convierte en una especie de árbol de decisiones amplio y masivo.
¿Quieres hacer el intermedio A? Prueba la reacción B, si no funciona prueba la reacción C. C normalmente funciona para este tipo de cosas, así que si no funciona, comprueba que tus reactivos son puros. Puedes probar con la reacción D, pero es probable que desproteja el otro lado de A.
Existen estudios sistemáticos de ciertos patrones de reacción, y ciertamente pueden ser útiles. Por ejemplo, el patrones de sustitución de anillos aromáticos, por ejemplo. Utilizando un poco de teoría orbital, se puede predecir el resultado de las reacciones en los anillos aromáticos basándose en lo que ya está en el anillo y en qué posición. Pero, de nuevo, estos estudios se hicieron con sustratos sencillos y no son necesariamente aplicables a cualquier behemoth sintético en el que estés trabajando .
El trabajo de laboratorio es duro
Por último, el aspecto práctico. Las reacciones químicas pueden fracasar por cualquier número de razones que no son teóricas. Hay cosas básicas como la limpieza del equipo y la pureza de los reactivos. Puedes perder montones de material si eliges los disolventes equivocados para trabajar (extraer el producto de la mezcla de reacción). La mayor parte del material ha pasado a la capa acuosa sin que te des cuenta, y lo has desechado (error de novato) o se ha degradado o convertido en otra cosa antes de que te dieras cuenta.
Luego están las cosas más sutiles. Puede que la reacción sólo funcione con una barra agitadora concreta porque en algún momento se impregnó de un catalizador de paladio. Las reacciones a menudo necesitan una exclusión rigurosa del oxígeno y el agua para funcionar, pero a veces se necesita algo de oxígeno para que funcione, y la única forma de averiguarlo es notar que las reacciones mal preparadas siempre parecen funcionar mejor que las rigurosas. Tienes una botella de reactivo de los años sesenta de una empresa que ya no existe, y una vez que se ha agotado, la nueva botella del mismo reactivo simplemente no funciona (esto me pasó a mí). La superficie de tu cristalería es demasiado ácida para tu reacción, y tienes que silanizarla para que funcione (también me ha pasado). Algunas reacciones no funcionan porque tu país es demasiado húmedo. El procedimiento que estás siguiendo fue escrito por un estudiante desesperado por impresionar/placer a su asesor, y los rendimientos están inflados. Tu lote actual de disolvente acetonitrilo es de menor calidad porque China cierra sus plantas de acrilonitrilo contaminantes para mejorar la calidad del aire de cara a los Juegos Olímpicos. Y así sucesivamente.
La química como asignatura es muy bicoca y desordenada. Los mejores químicos que he conocido suelen tener una memoria excelente. Pero todas las asignaturas tienden a ser complicadas y complicadas una vez que se supera la teoría básica y se entra en los detalles.