Fischer menyebut dirinya seorang [[Agnostisisme|agnostik]].<ref>[http://www.wienerzeitung.at/linkmap/personen/fischer.htm Portrait of Fischer in the daily ''Wiener Zeitung'']</ref> Fischer menikahberkahwin pada [[1968]]. Fischer gemar [[dakimendakidaki|mendaki gunung]] dan selama bertahun-tahun telah menjadi ketua [[Pencinta Alam]] Austria. Sifat kebapakankebapaan dan tutur kata lembutlembutnya membuatnyamenjadikan Fischer sepertisangat ketenangandihormati di [[Hofburg]]. Beliau menolak ditarik ke dalam perseturuan antar-parti. Setelah menjawatbersara, iabeliau memilih melepaskan diri dari keanggotaan parti dan menjadi warga bebas. Fischer membumbuiturut mempelbagaikan cara pidatonya dengan peribahasa Latin dan kutipan-kutipanpetikan dari karya sastera terkenal.
