قلعه خسروآباد یکی از قلعههای تاریخی شهرستان ابر کوه در استان یزد است که در دهستان فراغه و در روستای خسروآباد واقع شده است و حدود ۴۰۰۰ مترمربع مساحت دارد؛ بنای مذکور با حصاری رفیع و چهاربرج در چهارضلع به صورت چینهای بنا شده است. در داخل قلعه، تعدادی خانه به مساحت ۸۰۰ مترمربع ساخته شده است؛ از خصوصیات بارز این بنا میتوان به تزیینات برجها اشاره کرد. قلعه مذکور متعلق به دوره قاجار است و تحت شماره ۲۵۳۶۰ مورخ ۸۷/۱۲/۱۸ در فهرست آثار ملی به ثبت رسیده است. اخیراً مرمت قلعه خسروآباد آغاز شده است.