Né en août 1983 - James a fait ses classes en karting entre 1998 et 2000. Passé à l'automobile par le biais de la Formule Palmer Audi en 2001, il a continué son apprentissage dans les rangs du championnat anglais de Formule Renault où il décrochera la 3ème place en 2003.

James terminait ensuite à la 3ème place du championnat de F3, l'année du sacre de Piquet Jr ! 7ème des F3 Euroséries en 2005 - Rossiter participait en 2006 aux World Séries by Renault. L'équipe Honda F1 l'a intégré à son programme de développement pour jeunes pilotes. Il a été promu pilote d'essais pour 2007 et 2008 chez Super Aguri.