El Distrito Histórico de Hillsville contiene 16 edificios contribuyentes que constituyen el bloque central histórico de la sede del condado de Carroll. El distrito incluye el edificio 1857 Carter que fue ampliamente remodelado en los años 1920; el Palacio de Justicia del Condado de Carroll de 1875, diseñado en estilo neoclásico; el Banco del Condado de Carroll 1907; y el 1936 Hillsville Diner. El magnate de Hillsville, George L. Carter, trabajó en el edificio Carter y en la tienda de Wilkinson antes de la Guerra Civil, luego se casó con la hija de Wilkinson, Mayetta, y más tarde dirigió el Ferrocarril de Clinchfield y varias compañías mineras. En 1922, Carter vendió todas sus participaciones a la Consolidated Coal Company de Nueva York y se retiró al Edificio Carter, que había ampliado a 36 habitaciones a su muerte en 1936.