Dedicado a la Virgen de Baramus, Deir El-Baramus (también llamado Monasterio de los Romanos) es probablemente el primer monasterio establecido en el Wadi El-Natron. La tradición del lugar dice que el monasterio fue construido en el sitio donde vivió San Macario. El nombre 'Baramus', que significa "El de los romanos", proviene de un grupo de romanos que se fueron a vivir al monasterio tan pronto como el propio San Macario, y en el lugar de sus celdas, después de su muerte, una capilla fue construido El monasterio fue identificado también como el Monasterio de San Moisés el Negro, que era un criminal etíope arrepentido, asesinado en el siglo V, durante el ataque de los nómadas. Al igual que los otros edificios en el área, el monasterio fue dañado durante los ataques de los nómadas del desierto y fue restaurado varias veces. En el siglo IX, el patriarca Shenouda II construyó los muros alrededor del monasterio para protegerlo de los ataques de los nómadas. Cubierto por una gruesa capa de yeso, estas paredes (aún sobreviven) miden aproximadamente 11 m de alto y 2 m de espesor. Sobre las paredes, hay una pasarela. La entrada real está en el lado este.