قلعه باقر آباد به دستور عبدالرحیم خان فرزند محمد تقی خان بافقی ساخته شده این قلعه در سه مرحله بنا گردیده است ابتدا برج شمالی که محل زندگی عشکر می باشد. و قسمت برج جنوبی ده سال بعد ساخته شد و در سال 1298 هجری شمسی به علت هرج ومرج در کشور مروم روستا دور قلعه را حصار کشیدند این قلعه با مصالح خشتو گل ساخته شده است.