Ndërtesa u ndërtua në vendin e një kompleksi muze spanjoll të stilit kolonial të shkatërruar nga tërmeti i vitit 1989. Format elegante dhe përdorimi origjinal i materialeve, karakteristikë e Jacques Herzog dhe Pierre de Meuron, provokuan kundërshtim aktiv nga autoritetet konservatore të qytetit, por këmbëngulja e administratës së muzeut bëri të mundur zbatimin e projektit.
Struktura është e veshur plotësisht me bakër (janë përdorur gjithsej 7602 panele me forma të ndryshme) dhe është ndërtesa më e madhe e mbuluar me këtë metal në botë.
Elementi kryesor i projektit është një kullë e lakuar që ngrihet mbi majat e majave të Parkut Golden Gate, ku ndodhet muzeu. Ajo ofron pamje të qytetit dhe gjithashtu lidh ndërtesën me San Francisko: madhësia e kullës e lejoi atë të bëhej një element i dukshëm i peizazhit urban.
Vëllimi kryesor, në plan drejtkëndor, pritet nga oborre të vegjël të mbjellë me fier. Muret prej qelqi i kanë bërë këto kopshte pjesë të brendshme të muzeut.
Vëmendje e veçantë iu kushtua arkitektëve për të theksuar rrjedhën e vazhdueshme të hapësirës: hyrja në muze është e lidhur me një holl të madh nga një oborr i hapur, nga atje një shkallë e gjerë të çon në sallat e katit të dytë. Kjo lehtësohet gjithashtu nga planet e lakuara të sallave të ekspozitave. Brendësitë e muzeut janë zbukuruar me dru eukalipt.
Kostoja e të gjithë projektit ishte 190 milion dollarë, të cilat u mblodhën nga individë privatë, pavarësisht nga fakti se si koleksioni (art nga Afrika, Oqeani, Mesoamerica) dhe vetë muzeu i përkasin qytetit.
