Muzeum se dělí na tři hlavní části – pavilón Sully, Denon a Richellieu. Každá z těchto budov má ještě tři poschodí, takže jeden den na prohlídku rozhodně nestačí…