كانت إلمهورست في يوم من الأيام جزءًا من مزرعة ألبان ناجحة كانت تخدم فريدريكسبيرغ والمنطقة المحيطة بها، وقد بُنيت في 1871 ، مع إضافات في 1900 و 1910s. على الرغم من عدم بقاء أي من مباني الألبان الأخرى، إلا أن المنزل لا يزال يمثل الفترة الانتقالية في مقاطعة سبوتسيلفانيا بعد الحرب الأهلية، عندما تنوع الاقتصاد الزراعي في أعقاب فقدانها للعمالة. كان إلمهرست هو منزل واشنطن إلمز وعائلته، وهم مزارعون جاءوا إلى فرجينيا من نيويورك. وواصلت عائلة إلمز عملية إنتاج الألبان بعد وفاته في 1895 حتى 1907 ، عندما باعوا العقار إلى سي. جونز، وهو رجل أعمال شهير في فريدريكسبيرغ. وقد أجرى جونز بعض التعديلات على المنزل المصمم على الطراز الإيطالي بما في ذلك الشرفة الأمامية الرائعة ولكنه استمر في تشغيل مصنع الألبان حتى 1933. في تلك المرحلة، تم تقسيم العقار إلى قطع أرض سكنية، مما يعكس النمو السريع لمدينة فريدريكسبيرغ. تعرضت إلمهرست لتعديلات كبيرة في 1980، ولكن في وقت إدراجه في السجلات كان قد تم ترميمه بشكل حساس وأصبح مرة أخرى مثالاً على هذا الطراز المعماري غير الشائع نسبياً في فريدريكسبيرغ.