Al college Scott giocò a football a Georgia, vincendo il campionato NCAA nel 1980. Fu scelto nel corso del primo giro (13º assoluto) del Draft NFL 1982 dai New Orleans Saints.[1] Nella sua prima stagione, accorciata a nove partite per uno sciopero dei giocatori, ricevette 7 passaggi per 251 yard, venendo inserito nella formazione ideale dei rookie dalla Pro Football Writers of America. Rimase con i Saints fino alla stagione 1985, dopo di che si ritirò.
^(EN) 1982 National Football League Draft, Pro Football Hall of Fame. URL consultato il 18 ottobre 2012 (archiviato dall'url originale il 3 dicembre 2013).