به دلیل شباهت این بنا با بناهای متعلق به اواخر دوره قاجار شیوه معماری آن شبیه به معماری دوره انتقال است که در اواخر قاجار و اوایل پهلوی اول شکل گرفت.
ساختمان موزه میرعماد در گذشته محل زندگی دو تن از فرزندان پهلوی دوم (فرحناز و علیرضا) بود.
این بنا در کنار ساختمان لیلا (موزه آبکار) و کاخ ولیعهد (موزه بهزاد) قرار دارد و شامل دو طبقه است. طبقه اول با زیر بنایی برابر ۱۹۶ مترمربع و متراژ اعیانی ۳۱۰ مترمربع روی سکویی به ارتفاع ۵/۱ متر احداث شده است.
در مورد تاریخ دقیق ساخت بنا، مدارکی در دست نیست اما تاریخ آن به اوایل دوره پهلوی اول می‌رسد. این بنا بعد از اقامت رضا پهلوی برای مدتی متروک باقی ماند و بعدها تبدیل به دفتر مخصوص شد.
بعد از پیروزی انقلاب، اموال کاخ فرحناز هم به جای دیگر منتقل شد و در سال ۱۳۵۷ محل استقرار و مطالعه اشیای چرمین بود (موزه چرم). پس از مدت زمانی بنا بصورت بدون استفاده باقی ماند تا در سال ۱۳۷۱-۷۲ طرح ساماندهی مجموعه آغاز شد.
ساختمان موزه دارای دو طبقه است و با تلفیقی از معماری سنتی ایران و اروپا ساخته شده است که پس از انقلاب تا مدتها بدون استفاده بود تا زمانی که سیاست‌های سازمان میراث فرهنگی این بنا را محلی برای نمایش آثار خطی مناسب تشخیص دادند و در نتیجه با تفکیک بخش‌های مختلف آن تغییراتی در کل ساختمان به وجود آمد و مرمت آن آغاز شد.
معمار داخلی بنا، خانم مهندس فیروزه اطهاری و طراحی خارجی بنا توسط مهندس هومن صدر صورت گرفت. با حذف دیوارهای اضافی و تبدیل بنا به یک فضای مناسب موزه‌ای، ساختمان تبدیل به موزه خط و کتابت شد و در سال ۱۳۷۶ این موزه با نام بزرگترین استاد خوشنویسی قرن ۱۱ قمری میرعماد الحسنی سیفی قزوینی افتتاح شد.
بنای این موزه بیشتر به عنوان یک ساختمان مسکونی و یا کوشک است و از چهار طرف باز می‌باشد. بنا بصورت آجر و ملات و بدون استفاده از سازه احداث شده است.
نمای خارجی بنا با آجر تزئین شده و اشکال هندسی منظم دارد. فرم‌های تزئینی آجرها شمسه – چلیپا می‌باشد و بام آن بصورت شیروانی از نوع کلاه فرنگی است.
بخش‌های مختلف موزه میرعماد:
- خطوط قبل از اسلام
- خطوط اسلامی
- خطوط تفننی
- اشیای کاربردی
- نسخ خطی