Geboren in Waco, Texas, als Sohn von Jefferson Whitfield Harrell, Lehrstuhlinhaber für Mathematik, und Margaret Teny, besuchte James N. Harrell die Waco High School, das Baylor University und erwarb an der Trinity University einen Master in Drama. Seine Schauspielausbildung erhielt er am ursprünglichen Baylor Theater bei Paul Baker und 1940 im Michael-Chekhov-Acting-Studio in Ridgefield, Connectic…