第一家Hermitage酒店建造于1884年，是在提玛鲁的测量员和水彩画家富兰克休德森的指导下进行的。那时，由于担心放牧和烧荒将破坏当地植被，特别是当地的灌木和百合及雏菊，休德森被任命为库克山的巡山员。

最初的房舍位于穆勒冰川基地旁边的白房山丘，仅仅是一座小土房，有挖土做晒干土砖后留下凹地形成的一个水池。1886年，库克山Hermitage公司开始运营从Fairlie至Hermitage沿崎岖山路的马车客运服务。游客需要花两天时间才能从Fairlie抵达Hermitage，这段路程今天仅需要开车90分钟！1906年，库克山汽车公司开始运营开往Hermitage的汽车客运服务。曾在1886年驾驶马车的约翰罗斯福驾驶了第一批进山汽车之一。过了近30年，原始房舍不仅疲于应付增长游客的需要，还遭受到恶劣天气和火灾的不断袭击。

1913年，第二座Hermitage建筑正在现在地点上建造时，原来的房舍在一月份被洪水损坏，两个月后第二场洪水将它彻底摧毁。第二座Hermitage建筑于1914年建成时，为应对不断增长的游客需要，库克山汽车公司已经扩充，并且在整个冬季保持Hermitage营业。最终，该公司申请租赁Hermitage建筑并于1921年将其租赁。Hermitage建筑被扩建，开发了宿营地设备并提供游览项目 – 这可能是新西兰的首次。1944年租赁到期，Hermitage建筑归还给政府。1957年9月发生了自然灾害，第二座Hermitage建筑被一场大火夷为平地。政府很快就设计并建造了新的酒店。

第三座也就是现在的Hermitage酒店于1958年开始营业，是由12家政府拥有酒店构成的旅游酒店公司（THC）的一部分。原来的住宿大楼，也就是现在的库克山翼楼，现今仍然矗立于此。从那以后，酒店进行了大量扩建，最主要的有1967年建造的格雷科汽车旅馆（现在为格雷科小旅馆）；1969年建造的全景餐厅；1975年建造的山间客栈；1977年建造的有40间客房的威克菲尔德翼楼。从普卡基到库克山的沥青路面于1975年完工后，旅行到Hermitage变得更容易了。1990年，Hermitage酒店从政府拥有转回到私有；2001年，耗资两千万的酒店翻修使得所有公共场所面貌一新，并添加了有60间客房的奥拉基翼楼。今日，Hermitage仍旧是高级食宿的象征，也是世界闻名的旅游胜地。