El estanco, comerciante e inversionista ferroviario Samuel Miller (1792-1869) salió de la pobreza para convertirse en uno de los hombres más ricos del sur antes de la guerra. Recluso, residía en esta modesta ca. 1826 casa de madera en las afueras de Lynchburg y amasó silenciosamente su fortuna. Durante la batalla de Lynchburg (junio de 1864), una escaramuza de caballería tuvo lugar aquí, y las tropas de la Unión saquearon la casa de Miller. Al entrar, se encontraron con un Samuel Miller, anciano, postrado en cama pero desafiante, que había ocultado con éxito sus importantes documentos financieros. Considerado un avaro durante su vida, pero un generoso filántropo después de su muerte, Miller legó fondos y tierras a la ciudad de Lynchburg. Sus dotaciones educativas hoy en día ayudan a apoyar a la Universidad de Virginia y a dos instituciones que llevan su nombre: la Escuela Miller de Albemarle y el Hogar Miller para Niñas de Lynchburg.