Hjortholm var oprindelig en arvefæstegård under Universitetet. Anders Stephansen købte i 1839 gården sammen med en underliggende gård Skovgård i Sneslev på 40 tdr. land og 5 huse udgjorde det erhvervede areal 180 tdr. land. Stephansen og hans hustru Dorothea videreførte her et børnehjem, som nogle år før var oprettet på Fuirendal Herregård af lensgreve F.A. Holstein- Holsteinborg. Vedkongelig bevilling af 21. november 1839 fik gården navnet Holsteinsminde til ære for hjemmets stifter. Den 17. juni 1967 fik fik skolehjemmet sit oprindelige navn Hjortholm tilbage. Der er sammenfald mellem arkivalierne fra Hindholm og Holsteinsminde