La casa de James A. Fields fue adquirida en 1897 por Fields para su residencia principal y bufete de abogados. Fields, nacido esclavo, se convirtió en un prominente ciudadano afroamericano en Newport News después de estar entre la primera clase de graduados de la Universidad de Hampton en 1871. Al ser nominado por el delegado Robert Norton, Fields se desempeñó como juez de paz en 1879, convirtiéndose en el primer funcionario judicial negro de Virginia. En 1881 se graduó de la Facultad de Derecho de la Universidad Howard en Washington, D.C., y pasó a enseñar a jóvenes estudiantes negros durante 14 años y a ser tutor de los mayores en las teorías y la práctica del derecho. Fields fue elegido para varios mandatos en la Asamblea General y se desempeñó como Fiscal de la Mancomunidad para el Condado de Warwick (ahora la Ciudad de Newport News). Tras la muerte de Fields, su casa de ladrillo de estilo italiano albergó brevemente el Whittaker Memorial Hospital, que se estableció en 1908 como el primer hospital para negros en Newport News.