Benannt nach Holland House, einem Herrenhaus aus dem 17. Jahrhundert, dessen Gelände zum Park wurde.
Sir Walter Cope ließ das Haus 1605 als Cope Castle erbauen. Durch Heirat kam es an Henry Rich, der es Holland House nannte, nachdem er Earl of Holland geworden war; der Titel stammte von einer Gegend in Lincolnshire, nicht von den Niederlanden. Später lebte dort die Familie Fox, die Barone Holland, und das auf seinem Gelände gebaute Viertel übernahm den Namen des Hauses.