A Long Beach Museum of Art által elfoglalt épületet 1912-ben Elizabeth Milbank Anderson, egy gazdag emberbarát és Jeremiah Milbank örököse, aki pénzember, a Borden Company egyik alapítója és a Chicago, Milwaukee & St. Paul Railroad egyik alapítója volt, nyári laknak építette. A Fortune Magazine szerint “számos Milbank jelentős alakja volt az Egyesült Államok ipartörténetének, és a család az ország oktatási és egészségügyi intézményeiben is nyomot hagyott…”. (1959. május).
Elizabeth Milbank Anderson (1850-1921) energikus, határozott gondolkodású, széles érdeklődési körrel rendelkező nő volt. Sikeres üzletasszony, filantróp és műgyűjtő volt, aki gyakran utazott Európába. 1905-ben létrehozta a Milbank Emlékalapot, amely különböző orvosi és oktatási projektekhez nyújtott támogatást; ez az alap ma is létezik. Könyvtárat adományozott a Connecticut állambeli Greenwichnek, és három háztömbnyi kiválasztott New York-i telket adományozott a Barnard College-nak, amelyre a Milbank Hall épült. Közintézményeket épített a szegények számára, például sportcsarnokot és nyilvános fürdőt, és létrehozta az ingyenes iskolai ebédek programját. Férje, Abram A. Anderson ismert portréfestő és Teddy Roosevelt barátja volt.
1926-ban a ház Long Beach első társadalmi, sport- és strandklubja lett, a Club California Casa Real. Jelentőségét hamarosan háttérbe szorította a három hónappal később megnyílt Pacific Coast Club.
1929-től 1944-ig Thomas A. O’Donnell, a kaliforniai olajipar úttörő iparosa volt a ház tulajdonosa. Ő fejlesztette ki a Coalinga mezőt, segített megszervezni az American Petroleum Corporationt, majd a California Petroleum Co. elnöke és az American Petroleum Institute első vezérigazgatója lett.
A második világháború alatt a ház az amerikai haditengerészet altisztjeinek klubja volt. Long Beach városa 1950-ben vásárolta meg a Városi Művészeti Központ számára, majd 1957-ben Long Beach Művészeti Múzeumnak nevezték el. Ma, bár a múzeum még mindig Long Beach városának tulajdonában van, a mindennapi működést egy magánalapítvány, a Long Beach Museum of Art Foundation végzi. Az 1990-es évek végén az alapítvány nagyszabású tőkekampányt indított a történelmi létesítmények teljes felújításának, a kocsiszín áthelyezésének és egy új, kétszintes kiállítási pavilon építésének finanszírozására. A projekt 2000 szeptemberében fejeződött be.
Az Elizabeth Milbank Anderson-házat és a kocsiszínt (ma Miller Oktatási Központ) a Milwaukee Building Company tervezte és építette, egy befolyásos építészeti cég, amely más munkákat is végzett a Milbank család és társai számára. Isaac Milbank, a Borden Milk Company társalapítója és olajipari befektető 1911-ben a Milwaukee Building Company építtetett neki egy pompás, kézműves stílusú nyaralót Santa Monicában. Ugyanebben az időben a Milwaukee Building Company egy hasonló házat épített ugyanabban az utcában Santa Monicában Henry Weaver nyugalmazott szállodatulajdonosnak, aki több Midwest hotel tulajdonosa volt.
A Milwaukee Building Company később a Meyer & Holler Los Angeles-i cégévé vált, egy jeles céggé, amely számos nevezetes épületet épített. Leghíresebb terveik a hollywoodi Kínai és Egyiptomi Színházak voltak. Long Beachen ők tervezték az Ocean Center Buildinget, a Walker’s Department Store-t és a Fox West Coast Theater-t (ma már lebontva).