備中松山城は、高梁川東岸、城下の北にある標高478ｍの臥牛山山頂にある。臥牛山は大松山（おおまつやま）・小松山（こまつやま）・天神丸（てんじんのまる）・前山（まえやま）の４峰からなる。
 小松山が近世城郭の中核をなす部分であり、「本丸」「二之丸」「厩曲輪」「三之丸」にわかれている。小松山から尾根伝いに下った位置に中太鼓櫓、下太鼓丸（しもたいこのまる）（前山）が並ぶ。小松山の城郭としての整備は、天和元年（1681）から同３年（1683）にかけての当時の城主水谷勝宗（みずのやかつむね）によるものである。
 さらに下った臥牛山麓にある「御根小屋」が藩主居館、及び政庁である。「御根小屋」の整備は、慶長５年（1600）の関ヶ原の戦い後備中松山城の御城番となった小堀正次・政一によるものとされる。
 大松山は鎌倉時代から戦国時代にかけて使用された中世城郭である。小松山と大松山との間には幅の広い「堀切」がある。天神丸も中世城郭の一部であるが、近世においては「天満宮」が祀られ城主の信仰を受けていた。大松山と天神丸との中間に大池（おおいけ）があるが、小松山から大松山に抜ける門は「水手門」とされており、大池は山城での貴重な水場であったと考えられる。
 中世から近世に至る備中松山城跡が「備中松山城跡」として国史跡に指定されるとともに、本丸にある天守（てんしゅ）、二重櫓（にじゅうやぐら）、三之丸を囲む三の平櫓（さんのひらやぐら）東土塀（ひがしどべい）が「備中松山城」として国の重要文化財（建造物）に指定されている。

 備中松山城下は、高梁川の東岸の狭い平野部にある。城は城下北側の臥牛山（がぎゅうさん）上にあり、臥牛山麓に藩主の居館と政庁を兼ねた根小屋（ねごや）がある。臥牛山中から根小屋南側を経て高梁川に流れ込む「谷川筋」、及びその南側にある小河川を堀に見立てた配置となっている。
 武家屋敷は谷川筋北側と、谷川筋の南側では平野東側の山麓に集められている。谷川筋北側の武家屋敷は、高梁川と谷川筋によって曲輪（くるわ）が構成されており、正面を西に向ける根小屋の門前となって、藩の重臣が配置されている。石川家の家老である加藤家は、根小屋門前の谷川筋に接した位置に「加藤斎院」の名で記されている。一方、谷川筋南側は根小屋から南に離れるに従い屋敷規模が小さくなっている。
 寺院・神社は、城下東側山麓の武家地より一段高い位置に並び寺町を構成している。寺地を確保するための高い石垣が並ぶ景観は、城郭を想わせ特徴的である。一部寺院は武家屋敷中に散在するが、石川氏在城時代においては本久寺、柔順寺（後に本宗寺）で藩主の菩提寺である。これら藩主とともに移動した寺院に対し、武家地の一角が与えられたものと考えられ、交換転封によって本久寺は板倉家の菩提寺である安正寺と入れ替わっている。
 町は武家屋敷と高梁川とに挟まれた位置に、谷川筋に面した「御門」前から本町、下町、南町と続くが、さらにこれらと並行して１～２筋がある。
 高梁川東岸には、石で築かれた河岸（かし）が設けられており、備中松山城下が舟運の拠点であったことがわかる。

 石川家は、正徳元年（1711）から延享元年（1744）までの33年間備中松山城主をつとめるが、加藤家もこれに従って備中松山に居住している。加藤家の屋敷は、「備中松山城下石川家中屋敷割絵図」及び２枚の屋敷図によって、根小屋門前に隣接し谷川筋に接したこの場所であったと考えられる。
 ２枚の屋敷図では、屋敷は同一であるものの、屋敷内の建造物の構成は異なっており、加藤家では備中松山での33年間に、屋敷内の主要な建造物の建替えを行ったことになる。ここで問題となるのは、２枚の屋敷図の前後関係である。両図には作成年等は記載されていないが、両図に描かれた内容を確認すると、両図に共通する「土蔵」がある一方で「松山時代　加藤家屋敷図」にのみ「新土蔵」が描かれている。このことから、相対的には「松山時代 加藤家屋敷図（方眼付）①」が古く、「松山時代 加藤家屋敷図（方眼付）②」が新しいこととなる。そして、33年間という居住期間を考えると、「松山時代 加藤家屋敷図（方眼付）」は加藤家が入封時に与えられた屋敷の状態を示し、「松山時代　加藤家屋敷図」は加藤家によって建替えられ、交換転封によって板倉家家臣に引き渡した屋敷の状態を示していると考えることができる。
 両図の建造物を見比べると、居室の構成はほぼ共通しているものの、各居室間の動線が整理され、居室構成も簡略化された印象を受ける。
 加藤家については、松山後に生活することとなる亀山城下西之丸における屋敷図も残されており、これらとあわせて考えることで武家における連続的な屋敷の変化をたどることができる。