على الرغم من بناء هيرميتاج في مقاطعة أكوماك على نطاق متواضع، إلا أنه يتميز بالجودة المعمارية التي تتميز بها المساكن الكبيرة في الشاطئ الشرقي. يُعد المنزل مثالاً ممتازاً على العمارة القديمة لطبقة النبلاء في فرجينيا، حيث يتميز المنزل بجملوناته القرميدية المزخرفة بالطوب ونوافذه النائمة وواجهته المتناسقة وأبعاده المبهجة. وهو أيضًا من بين أفضل المنازل المحفوظة من نوعه في المنطقة، حيث يحتفظ بمدخنة الصالة المزخرفة بشكل غني ودرج جورجي مع درابزين مصبوب ودرابزينات مخروطية. بُنيت هيرميتاج على مرحلتين بين 1769 و 1787 على يد إيمانويل بايلي، وهو أحد أفراد عائلة بارزة من عائلات الشاطئ الشرقي. أدار بايلي عملية زراعية ناجحة بشكل ملحوظ هنا، حيث قام بتربية الذرة والشوفان والكتان والماشية والأغنام والخنازير. يحافظ المنزل على محيطه الريفي.