1884年、ハーミテージ最初のホテルは、ティマル出身の測量技師であり水彩画家でもあったFrank Huddleston（フランク　ハドルストン氏）の指揮のもと建てられました。ハドルストン氏は草原や野生のユリやデイジーなどの植物が放牧や山火事によって全滅する恐れがあるとして、マウントクック地域の森林監視員に任命されていました。

宿泊施設としての最初の建物は、ホワイトホース　ヒルのそばにあるミューラー氷河の麓近く、粘土にわらを混ぜた壁土の小さな建物で、日干しレンガ用の粘土を掘る穴に水が溜まってできた池がありました。

1886年、マウントクック　ハーミテージ社は鉄道線路終点のフェアリーからハーミテージまでの定期馬車を始めました。現在フェアリーからハーミテージまでは車でたったの９０分ほどですが、当時はなんと２日間かけていたのです！

1906年、マウントクック　モーター社がハーミテージへの車の送迎サービスを始めました。

John Rutherford（ジョン　ラザフォード氏）は1886年、初の定期馬車を走らせただけでなく、ここでも最初の車の１台を運転したのです。その後３０年間ほど、悪天候や山火事によって初代ハーミテージは大きな被害を受け、また、増え続ける宿泊客に対応できない状態となっていきました。

1913年1月、２代目ハーミテージは現在のホテルのすぐそばで工事を始めたものの洪水によって損害し、その２ヵ月後別の洪水によって崩壊してしまったのです。

1914年、２代目ハーミテージがオープンするまでマウントクック　モーター社は、増え続ける宿泊客を維持し、冬季もハーミテージが営業できるように拡張してきました。その後同社は土地/建物の賃貸を申し込み、1921年事業を引き継ぎました。ハーミテージはさらに拡張し、キャンプ施設が開発され、パッケージツアー（ニュージーランドではおそらく初めて）も設定されました。

1944年、賃貸契約期間が切れ、ハーミテージは政府に返還されました。