خانه کلاهدوزها يكي از منحصر بفردترين منازل مسكوني دوره قاجار در چهارراه اميرچقماق قرار دارد ساختمان اين بنا در سال 1266 هجري شمسي (1888ميلادي) به دستور حاج سيد علي اكبر كلاهدوز، كه تاجري بلند آوازه بوده، بنا گرديد و روزگاري دوقنات به اسامي رحيم آباد و زارج از زير اين بنا عبور مي‌كرده كه هنوز هم قنات دو هزار ساله زارچ با 75كيلومتر طول كانال در زير حياط اين عمارت در جريان است.
علاوه بر آقاي كلاهدوز و همسرشان، دختر، دوپسر و عروسهايشان و نيز دو خانواده از خدمتكاران سياه پوست در اين عمارت و منزل مجاور آن سكونت داشته‌اند.
