Sommaren 1864 tillbringade prins Oscar (II), prinsessan Sofia och barnen på Kulla Gunnarstorps slott, som då ägdes av Baltzar von Platen, vid Öresund, inte långt från det nuvarande Sofiero. Både prinsessan och äldste sonen, prins Gustaf (V), var sjukliga och behövde frisk luft. Prinsparet blev förtjust i platsen där Sofiero nu ligger, prästhemmanet Skrabelycke, med utsikten mot Danmark och den skogklädda ravinen ner mot Öresunds vatten. I september 1864 köpte de Skrabelycke, som fick namnet Sophie-Ro. I april 1865 restes takstolarna till den sommarvilla med sex torn som prinsparet lät uppföra på Sophie-Ro. I juli 1866 flyttade familjen dit från Stockholm. Familjen levde ett sorglöst liv på Sofiero, prinsessan Sofia tog ridturer på sin häst Ada och de fyra prinsarna växte sig starka under vistelserna på landet som var mycket friare än hovlivet i Stockholm
