علت تخریب ارگ ارگ سمنان بنایی بزرگ و چشمگیر بوده است به نحوی که در خود ساختمان‌های اداری چون تلگرافخانه و ساختمان‌های دیگری مانند آب انبار، حمام را در خود جای داده بود همچنین در داخل دیوارهای ضخیم ارگ اتاق هایی برای نگهبانی تعبیه شده بود. این ارگ بزرگ که دارای ۱۲ برج متفاوت بود به عنوان مرکز حکومتی شهر سمنان به شمار می‌رفته است. اما علت اینکه امروزه از آن همه عظمت و زیبایی تنها دو دروازه از آن باقی مانده این است که در دوران رضا شاه پهلوی به علت عمران وساخت وساز شهری این بنا تخریب شد و با همت و ممانعت دوستاداران فرهنگ باعث شد دروازه شمالی و جنوبی این بنا از تخریب در امان باشند. امروزه این بنا مرمت شده است همچنین نوپردازی‌های زیبا باعث شده عظمت و زیبایی این دروازه ارگ در شب دو چندان شود.