Ab Juni 1804, nach der Rückkehr aus Bordeaux und einem schwierigen Aufenthalt in Nürtingen, lebte Hölderlin erneut in Homburg, Sinclair hatte ihm eine - von Sinclair selbst bezahlte - Stelle als Hofbibliothekar verschafft. Politische Wirren um die Neuordnung Europas, eine Verleumdungsklage gegen Sinclair wegen Hochverrats und die zunehmende Labilität Hölderlins verkomplizierten die Situation.
Am 11. September 1806 wurde Hölderlin gegen seinen Willen nach Tübingen in die Autenriethsche Klinik gebracht.
Friedrich Hölderlin kam ab 1807 zur Pflege bei der Tübinger Tischlerfamilie Ernst Zimmers.
In den letzten 36 Jahren lebte er in deren Haus in einer Teestube oberhalb des Neckartals, heute als Hölderlinturm bekannt.
Misshandlungen während der 231-tägigen Zwangsbehandlung im Krankenhaus, der von Autenrieth geleiteten Klapse, führten dazu, daß Hölderlin danach ein zum psychischen Krüppel Geschlagener war. Einer, der sich in sich zurückzog, mit der Außenwelt nicht mehr oder kaum noch kommunizierte. Keinesfalls aber war Hölderlin ein Umnachteter, Schwachsinniger.
Enttäuscht von den Idealen der Französischen Revolution, gezeichnet von der Gesundheit und von Schicksalschlägen getroffen, zog er sich in einen Turm am Neckarufer zurück. Seit seinem 32. Lebensjahr lebte der gedankenvolle Dichter Hölderlin in geistiger Umnachtung.
