این کاروانسرا در مسیر جاده قدیم طبس به یزد قرار دارد. کاروانسرای کلمرد قدیم و جدید در کنار هم قرار دارند. قدیمی بر اثر گذر زمان از بین رفته و تنها خرابه‌ای از آن به جای مانده، اما کاروانسرای جدید کاملا سالم، در کنار جاده‌ای که اکنون کم تردد است، شکوه و تنهایی خاصی دارد. یکی از ویژگی‌های این بنا بلندای یکسان آن در دور تا دور بناست و به جز بادگیر حتی سر در ورودی نیز با دیوارها در یک سطح است. در دو سوی ورودی کاروانسرا در خارج بنا ایوانچه‌هایی وجود دارد که در هر طرف شش عدد از آنها موجود است و در پای سکوی هر کدام افسار بندی ایجاد شده که جای بستن دهانه اسب و شتر کاروانیان بوده است. همچنین اجاق‌ها یا بخاری‌های دیواری این بنا در برخی از ایوانچه‌های حیاط و هشتی ورودی در گوشه‌ها پیش بینی شده‌اند. پشت بام این کاروانسرا نیز به زیبایی آجر فرش شده که جلوه‌ای خاص به آن بخشیده است. کاروانسرای قدیمی که مخروبه شده دارای مساحت ۸۵۵ متر مربع و مساحت کاروانسرای جدیدتر ۳۱۸۴ متر مربع است. این افزایش مساحت طی ۱۰۰ سال در این دو بنا که کاربری یکسانی داشته‌اند، مبین این نکته است که این مسیر پر رفت و آمد شده بوده و احتیاج به وسعت و گنجایش بیشتر باعث افزایش سطح بنای جدیدتر شده است.
