Odlukom Saveza za kulturu narodnog odbora grada Beograda 1958. godine osnovana je Moderna galerija, koja je imala zadatak da prati razvoj jugoslovenske i srpske moderne i savremene umetnosti XX veka. Na konkursu za izradu idejnog projekta zgrade 1960. godine izabrani su arhitekte Ivan Antić i Ivanka Raspopović. Zgrada je građena do 1965. godine, a na dan njenog otvaranja institucija je preimenovana u Muzej savremene umetnosti. Specifično arhitektonsko rešenje zgradu čini jednim od najznačajnijih primera muzejskih objekata na prostoru nekadašnje Jugoslavije. Šest kubusa dijagonalno zasečenih i zastakljenih obezbeđuju prikladno dnevno osvetljenje u izložbenom prostoru, dok je građevina obložena venčačkim mermerom iz centralne Srbije, a koji je zbog svog kvaliteta korišćen širom sveta pa su od njega urađeni i delovi Bele kuće u Vašingtonu. Zgrada muzeja je 1987. godine proglašena kulturnim dobrom i zaštićena je kao spomenik kulture.
