Richardson fu scelto nel corso dell'ottavo giro (201º assoluto) del Draft 1980 dagli Atlanta Falcons[1]. Nella sua prima stagione condivise il premio di rookie difensivo dell'anno col compagno linebacker dei Falcons Buddy Curry e fu inserito nella formazione ideale della stagione All-Pro dopo avere fatto registrare 7 intercetti. Giocò tutti i sei anni di carriera professionistica con Atlanta, ritirandosi dopo la stagione 1985.
^(EN) 1980 National Football League Draft, Pro Football Hall of Fame. URL consultato il 20 ottobre 2012 (archiviato dall'url originale il 1º novembre 2013).