Als Tal- und Versorgungsquartier für das Königshäuschen an der Halbammer diente damals das Forsthaus Unternogg (840 m), wo Ludwig II. zuweilen auch übernachtet haben soll. Das Forsthaus liegt an der Königsstraße nahe der Ortschaft Altenau nördlich von Unterammergau. Das historische Gebäude war bis in jüngste Zeit ein sehr beliebtes Gasthaus mit Biergarten. Leider steht es derzeit leer. Am Wanderparkplatz – 200 m hinter dem Haus – beginnt der bequeme Wanderweg durch die wildromantische Schlucht der Halbammer zum „Wilden Jäger“ (980 m), dem einstigen Standort der königlichen Berghütte.

Exakt an der Stelle, wo einst das Königshaus Ludwigs II. stand, befindet sich heute die „Hubertuskapelle“. Jakob Alletsee aus Oberammergau ließ sie im Jahre 1903 errichten. Wann das Königshaus abgerissen wurde, wissen wir nicht. Doch aus einem Schreiben des Forstamtes Oberammergau an die Königliche Regierungsforstabteilung vom 14. Mai 1903 geht hervor, dass das Königshaus schon damals nicht mehr existierte. Alletsee, so heißt es dort, habe den Standort gewählt, um die Erinnerung an das „ehemalige Königshaus“ festzuhalten, zumal „die beim Abbruche nicht beseitigte Betonplatte ein gänzlich unproduktives Terrain darstellt“. Außerdem habe ihn „ein Gefühl des Dankes gegen Gott“ zum Bau der Kapelle gedrängt, weil er „45 Jahre bei den schweren Holzarbeiten in den Halbammerwaldungen an Leib und Leben unbeschädigt und unverletzt geblieben sei.“ Obwohl Alletsee die Kapelle – wohl aufgrund eines Missverständnisses – zunächst ohne Baugenehmigung errichtete, befürwortete das Forstamt Oberammergau das Unterfangen nachträglich: Die Kapelle komme „dem religiösen Grundzuge des Gebirgsbewohners entgegen“ ; und „die Erinnerung an das Königshaus“ verdiene schließlich Anerkennung.

Immerhin sind die Fundamente des Königshäuschens noch deutlich zu sehen. Der Standort liegt in einer Talmulde, umgeben von mehreren kleineren Gipfeln der Trauchberge: Wachsbichel (1316 m), Lauskopf (1363 m), Schwabenkopf (1346 m) und Roßkopf (1272 m). Neben der Kapelle befand sich zu König Ludwigs Zeiten ein großer Pferdestall – inzwischen ein Dienstgebäude der Forstverwaltung „Beim Wilden Jäger“.

Im Halbammergebiet gab es früher zahlreiche Wetzsteinbrüche, die von den Unterammergauer Wetzsteinmachern genutzt wurden. Einmal soll König Ludwig in eine der Wetzsteinmacher-Hütten eingekehrt sein und gemeinsam mit den Wetzsteinmachern Topfennudeln gegessen haben.

Von einer Bergfahrt Ludwigs II. in die Halbammer im Jahre 1885 berichtet Thomas Osterauer, ein junger Gefreiter der Cheveauleger (leichte Kavallerie), der seit Mai 1885 im Kammerdienst des Königs war:
„Vom Pürschling kamen wir in die Halbammer. Hier sah es wirklich aus, als wenn die Welt mit Brettern vernagelt wäre. Von hohen Bergen umsäumt, war in einer Mulde das Königshäuschen, die Küche und Stallung. Außer uns war noch ein Kohlenbrenner namens Sanktjohanser da. Dieser Sanktjohanser hatte die Ehre, daß er mit dem König verkehren durfte. Er war ein alter Junggeselle. Es war beabsichtigt, eine italienische Nacht zu veranstalten, aber ein kommendes Gewitter vereitelte es. Es kam ein Wolkenbruch. Die sonst so kleine Halbammer wurde zum reißenden Fluß, die Straße nach Unterammergau [Unternogg] wurde fortgerissen. Ein Postillon, der gerade auf der Straße war, wurde fortgerissen und fand samt dem Pferd den Tod. Da nur ein Ausweg da war, mußten wir hinten bleiben, bis eine Straße hergestellt war.“

Zur Erinnerung an das tragische Unglück steht bei der „Ewigkeitsbrücke“, wo die Halbammer auf die linke Seite des Forstweges wechselt, ein Martel. Es erinnert an den königlichen Kurier Leonhard Gindhard aus Wurmansau (einer Ortschaft nahe dem Halbammertal), der hier 1885 ums Leben kam. Zugleich mahnt das Marterl indirekt auch alle Wanderer zur Vorsicht: Bei Unwetter kann es in der Halbammerschlucht gefährlich werden!