廣瀬淡窓（ひろせたんそう）の咸宜園（かんぎえん）です。
咸宜の意味は「みなよろし」という意味らしく、どんな身分の人でも平等に受け入れる、ということで名づけられたそうです。大村益次郎、高野長英、上野彦馬らもここで学びました。

ここは、幕末の儒者廣瀬淡窓（１７８２〜１８５６年）の私塾咸宜園のあとである。淡窓は、文化二年（１８０５年）２４才の時、豆田町の長福寺を借りて開塾したが、２年後に桂林荘（けいりんそう）を中城川の側に建ててそこに移った。その後、文化１４年桂林荘をこの地に移し、新たに咸宜園と名づけた。以来、旭荘、青邨、林外等に承けつがれ、明治３０年までの９０年間に、全国から集まって来た約４,８００人の子弟を教授した所である。
当時は、道を挟んで西側に考槃樓（こうはんろう）などの西塾があり、東側の東塾には、この秋風庵の外、心遠処、遠思樓、講堂などが建ち並んでいた。遺構としては、と遠思樓及び西塾の車井戸のみが残っている。秋風庵は、淡窓の伯父月化（俳人）が天明元年（１７８１年）に建築したもので、東西８間半、南北３間半、東南に２階を持つ草葺の建物である。淡窓は安政３年（１８５６年）ここで没した。現在でも秋風庵のまわりには、その頃の形態をとどめており往時をしのぶことが出来、学術上の遺跡として重要な文化財である。

昭和７年７月２２日国の史跡に指定されている。

平成１３年３月　日田市教育委員会

史跡咸宜園の一角に建つこの二階家は、嘉永２年（１８４９）廣瀬淡窓が６８歳のときに書斎として建てられ、遠思楼と名づけられた。淡窓はこの楼を好んで使い、階下は書庫とし眺望のよい階上では読書や思索のほか門弟や知人たちと詩会を催し、月や雪をめでて小宴や談話を楽しんだりした。
明治維新以降塾の衰退によって、明治７年（１８７４）には中城川畔に移され、多少の改修を加え民家として使われていた時期もある。昭和２９年（１９５４）には、淡窓忌百年祭の記念事業として淡窓の居宅である「秋風庵」の裏に還された。
老朽化に伴ない、文化庁の補助を受けて保存修理工事が行われ、平成１３年、往時の場所に素朴なたたずまいが復元された。
淡窓の漢詩集「遠思楼詩鈔」は、この建物に由来しこの楼の名を世に知らしめている。

日田市教育委員会