این قلعه بر بالای یک تپه سنگی در دهستان طارم قرار دارد و دسترسی به آن جز از سمت شمال، بسیار دشوار است. سفیدرود از جانب جنوبی این قلعه میگذرد و آن سوی رود، رشته ارتفاعات بلند سنگی، سر به آسمان کشیدهاند. بنای اصلی قلعه در بالای کوه قرار دارد و بخشی از شیب ان را که به طرف جنوب میباشد، در بر میگیرد.
در حال حاضر از دیوارهای قلعه، گذشته از دیوار اصلی در بالا، قسمتی نیز در دامنه شمالی پابرجا است. این بخش از دیوار که بر روی یک رگه سنگی استوار شده است، به این خاطربه وجود آمده تا در مسیر دسترسی به قلعه، از این سو که راحتتر از جانبهای دیگر است، مانعی به وجود آمده باشد و امکان نفوذ به قلعه را سد ساخته باشند.
باید دانست که در دوران آبادانی این قلعه، چنان ک ناصرخسرو نقل نموده، قلعه مزبور دارای سه دیوار تودرتو بوده است.
بخش اصلی قلعه دارای طرح کاملاً منظم نیست؛ زیرا دیوار قلعه به تبعیت از صخرههای کوه و پیشآمدگی و پس رفتگی آن به وجود آمده است. با این حال طرح کلی آن نزدیک به شکل مستطیل است. در حال حاضر، سالمترین بخش قلعه دیوار شمالی آن است که از سه قسمت تشکیل شده است. قسمت اول، سمت چپ و جانب شرقی دیوار است که به صورت دیوار بلندی محصور میان دو برج مدور سالم خودنمایی میکند. برجها و دیوار با سنگهای لاشه و ملات گچ ساخته شدهاند و ارتفاع آنها به 8 متر میرسد. در جریان بنای دیوار و برجها، برای جلوگیری از فروریختن آنها و هم این که برپاداشتن دیوار و برجها به صورت منظم و مرتب صورت پذیرد، در فاصلههای یک متری یک کلاف چوبی در تنه بنا به کار بردهاند که از دور به صورت یک رج سنگ دیده میشود.در بنای دیوار قلعه، گاه به گاه، آجر نیز به کار رفته و این بیشتر مربوط به قسمتهای بالای دیوار است که به احتمالی، مربوط به تعمیرات بعدی بناست.
برجهای دو گانه که در قسمت بالا جای گرفتهاند، دارای پنجرههای بلند مستطیل شکلی با قوس تیزهدار هستند، و بیشتر برای نگهبانی پایین قلعه مورد استفاده قرار میگرفتهاند. ساختمان قسمت سمت راست یا غربی دیوار جانب شرقی بسیار متفاوت دارد. در این قسمت از وجود برجهای مدور خبری نیست، و تنها دیواری صاف وجود دارد که ساختمانهای این گوشه قلعه را در بر گرفته است. بنای این قسمت از دیوار از نظر موقعیت حایز اهمیت است؛ زیرا که برفراز یک صخره کاملاً عمودی برپا گردیده که سفیدرود از پای آن میگذرد و موقعیت آن، چنان است که به هیچوجه امکان تسلط براین قلعه از این سو میسر نیست.
با توصیفی که تاریخنگاران قدیم از این قلعه نمودهاند. می-توان گفت که این قلعه هم چون بسیاری از دژهای کوهستانی منطقه، تنها کارکرد دفاعی و نظامی نداشته، بلکه منظور اصلی از بنای آن، سکونت بوده است. بر روی زمینهای اطراف قلعه تا مسافتی بسیار قطعههای فراوان سفال پراکنده است. سفالینههای مزبور همگی مربوط به دورههای پس از اسلام هستند.