La mémoire et la déformation de la réalité vue par le narrateur, en fonction de ses souvenirs et la transformation du monde par les outrages du temps entrainent une réflexion sur le temps justement : le temps est le thème principal de l'œuvre de Proust, notamment par le biais de la mémoire. On retrouve une sorte de parallèle entre « Du côté de chez Swann » dans lequel l'auteur avait dessiné sa célèbre image de la madeleine et du souvenir que cela faisait remonter, de l'odeur, la texture, la mémoire de l'enfance heureuse suite à une perception commune d'un élément, la madeleine et le thé à l'heure du goûter.
L'auteur y revient dans son dernier roman et tente une explication : la fusion psychologique entre ces deux moments, à deux instants forcément éloignés dans le temps et donc entre deux âges différents pour un personnage, permettrait à l'homme de s'affranchir de l'ordre du temps, se sortir de la temporalité. Cela fait qu'il échapperait à l'avenir, et même à la mort, ce qui a de quoi surprendre. Cela n'est que supposition ésotérique, mais Proust écrit ainsi que cette mémoire permet d'échapper au temps, à être soulagé de ce pas