Scott wurde in London als einziges Kind des Antarktis-Forschers Robert Falcon Scott (Scott der Antarktis) und der Bildhauerin Kathleen Bruce geboren. Er war zwei Jahre alt, als sein Vater starb. In einem letzten Brief an seine Frau riet Robert Scott ihr, "den Jungen für Naturgeschichte zu interessieren, wenn Sie können; das ist besser als Spiele".
Er studierte an der Oundle School und am Trinity College in Cambridge, wo er zunächst Naturwissenschaften belegte, aber 1931 seinen Abschluss in Kunstgeschichte machte. Nach seinem Abschluss studierte er Kunst in Deutschland und London.
Seine erste Ausstellung hatte er 1933 in London, und er verkaufte seine ersten Bilder. Im Jahr 1935 veröffentlichte er den von ihm selbst illustrierten Morgenflug. Als junger Mann war Scott nicht wohlhabend, und das Einkommen aus seinen Gemälden war die Grundlage seines Lebens. Die Gemälde selbst verkauften sich gut, aber der größte Teil des Einkommens stammte aus Büchern und Reproduktionen. Die Reproduktionen, die von Ankermann von der Bond Street gedruckt wurden, verkaufen sich immer noch gut. Von diesem "Einkommensstrom" konnte Scott eine Familie ernähren und einen Teil des Landes kaufen, das er sich als Zufluchtsort für Wildvögel wünschte.
Bei den Olympischen Spielen 1936 in Berlin vertrat er Großbritannien beim Segeln und gewann eine Bronzemedaille in der kleinsten Bootsklasse, der O-Jolle oder Jolle.
Zweiter Weltkrieg
Als sich der Krieg näherte, trat er 1939 der Royal Naval Volunteer Reserve bei. Im Jahr 1940 war er als Leutnant in einem Zerstörer. Nach seinem Eintritt in die Küstenstreitkräfte stieg er zum Oberstleutnant auf und kommandierte eine Flottille von Kanonenbooten im Kanal. Er wurde mit dem Distinguished Service Cross mit Stange und einem MBE (Military Division) ausgezeichnet. Im Jahr 1944 wurde er Stabsoffizier und im März 1945 zum Kapitän der nagelneuen Fregatte HMS "Cardigan Bay" ernannt.