Este es un gran punto y muestra cómo los modelos de mundos están limitados por la falta de memoria y por el hecho de que la memoria está en un formato ineficiente y caro (fotogramas de vídeo que contienen píxeles). ¿Cuál sería el tipo ideal de recuerdo? Sería esencialmente un grafo de escenas (¡James Clark, 1976!) que describía jerárquicamente todos los objetos de un mundo junto con sus propiedades, de una forma fácil de consultar y de operar. Esta es la razón de la tesis central de que el camino evolutivo ideal implica la fusión de modelos y motores del mundo, el lado de IA proporcionando grandes cantidades de conocimiento audiovisual y textual poco organizado, y el motor proporcionando una representación y simulación consistente de datos reproducibles.