تقف مدرسة جاكسون ب. بيرلي الثانوية في شارلوتسفيل، التي سميت على اسم معلم أمريكي من أصل أفريقي وقائد مجتمعي محلي، على أرض تم الحصول عليها من أرملة بيرلي. يمثل المبنى حالة نادرة سعت فيها منطقتان محليتان - تشارلوتسفيل ومقاطعة ألبيمارل - إلى تحقيق مرافق تعليمية "منفصلة ولكن متساوية" أثناء الفصل العنصري - وفي وقت كانت الدعاوى القانونية الناجحة الجارية في أماكن أخرى في فرجينيا تتحدى الظروف غير المتكافئة والمكتظة في مدارس السود. وقد نتج الاتفاق على بناء مدرسة ثانوية جديدة منفصلة للسود عن اكتظاظ المرافق المخصصة لهؤلاء الطلاب في كلتا المنطقتين وعدم كفايتها بشكل خطير. في غياب الطعون القانونية المعلقة، وبعد أن قامت شارلوتسفيل ببناء مدرسة ثانوية حديثة كبيرة للطلاب البيض في 1940 ، قامت المدينة والمقاطعة بشكل مشترك ببناء مدرسة بيرلي الثانوية وامتلاكها وتشغيلها لخدمة الطلاب السود في كلتا المنطقتين. افتتحت مدرسة جاكسون ب. بيرلي الثانوية في 1951 ، وكانت مدرسة جاكسون ب. بيرلي الثانوية جزءًا من الجهود التي بذلتها العديد من السلطات القضائية في ولاية فرجينيا لدعم الفصل العنصري من خلال بناء مدارس ثانوية جديدة منفصلة ومجهزة تجهيزًا جيدًا للطلاب الأمريكيين من أصل أفريقي. انتهى هذا النهج عندما حكمت المحكمة العليا الأمريكية في 1954 في قضية براون ضد مجلس التعليم بأن التعليم العام المنفصل غير دستوري. من الناحية المعمارية، يعد مبنى مدرسة بيرلي من أوائل المدارس في المنطقة المصممة على الطراز الكلاسيكي الحديث المجرد. يتألف المبنى من طابقين على شكل حرف U ويضم قاعة في أحد طرفيه وصالة للألعاب الرياضية في الطرف الآخر. على الرغم من أن مبنى المدرسة قد خضع للعديد من الإضافات والتعديلات، إلا أنه يحتفظ بسلامته المعمارية. في عام 1967 ، أنهت المدينة والمقاطعة الفصل العنصري في المدارس، ويضم المبنى الآن مدرسة جاكسون ب. بيرلي المتوسطة، التي تملكها الآن مقاطعة ألبيمارل وحدها.