高遠山室温泉は、江戸時代に発見され、文化十一年（１８１４）に高遠藩の御用湯として利用されたと伝えられています。（全国秘湯番付 東日本前頭十七枚目）現在の建物は、大正末期に改築されたものです。敷地の前には山室川が静かに時には激しくその瀬音を響かせています。