学校始建于1887年，创建人是尼古拉斯·默里（Nicholas Murray Butler），起初学校只是哥伦比亚大学师范学院的一部分。它最初坐落于曼哈顿的格林威治村，后于1901年搬到了Morningside Heights的120街区。在哥伦比亚校区最北边的建筑Horace Mann Hall上仍可以看到霍瑞斯曼的名字。随后，霍瑞斯曼高中（Horace Mann School）逐渐成为一所独立学校，而不仅仅是哥伦比亚师范学院的一部分。随后哥伦比亚大学又另建了一所林肯学院来代替霍瑞斯曼。

学校正门

1914年，霍瑞斯曼高中（Horace Mann School）分为了男校和女校，男校搬到了布朗克斯附近的里弗代尔，在20世纪40年代期间，正式与哥伦比亚大学分离。其女校仍属于哥伦比亚大学的师范学院，于1940年并入了林肯学院，最终于1946年关闭。

1968年，纽约学校的幼儿园（建于1954年，位于曼哈顿90街区）与霍瑞斯曼高中（Horace Mann School）合并。1972年，霍瑞斯曼高中（Horace Mann School）与位于里弗代尔的巴纳德学校合并，建立了霍瑞斯曼-巴纳德男女混合学校，招收从幼儿园到6年级的学生。1975年，霍瑞斯曼高中（Horace Mann School）的高年级开始招收女生。1976届的班级是霍瑞斯曼高中（Horace Mann School）最后一个全部是男生的班级。1999年，六年级的学生从霍瑞斯曼-巴纳德校区搬到了霍瑞斯曼的主校区，和7、8年级构成了霍瑞斯曼高中（Horace Mann School）的初中。

学校的校训是"Magna est veritas et prævalet" （拉丁文，意思是真实至上，胜过一切）。这句话来自于KingJames版本的《旧约全书》，学校的吉祥物是头雄狮，和哥伦比亚大学相同，也许是因为他曾经属于哥伦比亚大学的一部分。学校的游泳队和水球队采用海狮作为其非正式吉祥物，滑雪队则采用美洲狮作为吉祥物。