佐和山の麓に、石田三成屋敷跡の石碑があります。
天正18年（1590年）に佐和山城の主となった三成の時代には本丸以外にも二の丸、三の丸などができており、山の下に作られた二重の堀の内側には侍屋敷や足軽屋敷、町屋などを備えた近世的な城下町として整備されていったとされています。
彦根城の築城の際、佐和山城は解体され、石垣は彦根城の石材として運び出されました。また、佐和山城が豊臣方残党の象徴となることを恐れ、建物などは徹底的に破壊されたと言われています。現在、佐和山城の跡にはほとんど何もなく、石垣や土塁などの一部が現存するのみとなっています。
ちなみに、現在の清凉寺があるところが、石田三成の家臣「嶋左近」の屋敷があったところと云われています。