حصلت هاردنز في الأصل على براءة اختراع في 1638 لإليزابيث غراين، وزُرعت كوحدة منفصلة لما يقرب من ثلاثة قرون ونصف، وهي عبارة عن مزرعة في نهر جيمس كانت في السابق مزرعة فرعية أو ربع مزرعة شيرلي. كانت ممتلكات مقاطعة تشارلز سيتي في وقت من الأوقات تسمى هاردينجز، وكذلك هاردينجز لاندينج. يُظهر مسح 1818 ولوحة بيانية مسكناً في الموقع التقريبي للمنزل الحالي. وهو مثال نموذجي للهندسة المعمارية الريفية العامية في منتصف19القرن العشرين في فرجينيا، وقد شيد الجزء الرئيسي من المنزل الهيكلي الحالي في 1846 من قبل هيل كارتر، من شيرلي، لابنه لويس وارينغتون كارتر، وقد يضم أجزاءً من مبنى سابق. استحوذ ديفيد ووكر هاكسال على شركة هاردنز في 1852 لتوريد الأخشاب لعمليات الطحن الواسعة لعائلته في ريتشموند. خلال الحرب الأهلية، كان المكان بمثابة محطة اتصالات للاتحاد ومعسكر للرائد. الجنرال جورج ب. ماكليلان في 1862.