Ända fram till 1660-talet var Haga en robust medeltidsborg, med oregelbundet påbyggda torn och längor. Arkitekten Nicodemus Tessin d.ä. övertalade emellertid Gustaf Persson Natt och Dag att uppföra ett modernt slott på delar av den gamla borgens grund. Tessin föreslog ett klassiskt sirligt slott i italiensk senrenässans, vilket sedermera accepterades av Gustaf Persson.