Lanthieriji so bili vneti graditelji. V Vipavi so ob izvirih istoimenske reke tik starega Baumkirchnerjevega gradu postavili sredi 17. stol. dvorec, ki ga na zunanji strani krasijo imenitne štukature. Zgradili naj bi ga leta 1669 in je tipičen primer beneške arhitekture. Dvorec je bil prvotno mnogo skromnejši. Leta 1762 so Lanthieriji dvorec prenovili in takrat je dobil današnjo baročno podobo.

Zdravice, ki so se vrstile v Lanthierijevi graščini v Vipavi v zgodnjem 18. stoletju, so bili pravi koncerti. Vino se je ob pitju pretakalo skozi okrogle in cevaste dele - čevelj visokega steklenega kozarca glo-glo in pri tem ustvarjalo prijetne, skladne glasove.
Dvorec je obiskal tudi beneški dramatik Carlo Goldoni.
      
Nazadnje je v gradu do 1910 leta živel grof Karel Friderik Lanthieri. Po njegovi smrti je veja goriško - vipavskih grofov izumrla in z možitvijo hčere prešla na barona Hermana von Lewetzowa-Lanthieri.

Od leta 1918 do oktobra 1991 je bil dvorec v vojaških rokah.