Antes de que el edificio fuera un museo de arte, en su lugar se erigía una elegante estación de tren, que vio pasar a millones de visitantes a París. Esta estación se conocía como Gare d'Orsay, y fue la primera terminal ferroviaria urbana electrificada del mundo.