در هشتم شوال سال ۱۳۴۴ق مصادف با ۱۳۰۴ش دوباره به دست امیرمحمد حاکم مدینه و به دستور پدرش عبدالعزیز آل سعود ویران شد.در کنار مرقد امامان چهارگانه، قبر عباس بن عبدالمطلب و قبر منسوب به حضرت فاطمه زهرا(س) یا فاطمه بنت اسد قرار دارد. عباسیان، برای حفظ قبر عباس، بنایی روی آن ساختند. این بارگاه یا بقعه، بر همه آن قبور یکجا بنا شد. پیش یا پس از آن، بقعه‌هایی نیز برای همسران و عمه‌های پیامبر و نیز امام مالک ساخته بودند و از قرن ششم به بعد، کسانی از بزرگان نیز که علاقمند به برخی از مدفونین در این مکان بودند، بقعه‌هایی برای آنان ساختند