遠山家住宅は，亀岡市街の北東，大堰川の左岸に位置する。主屋は寛政２年（1790）の建設で，当地を代表する妻入り，縦割りの農家住宅の発展型として，重要文化財に指定されている。
米蔵は天保９年（1838），借物蔵は主屋と同じ寛政２年の建設で，長屋門は主屋より古く18世紀後期の建設とみられる。長屋門から西へ延びる高塀や敷地内の露地門，井戸などが屋敷構えを構成している。