Его отец работал водителем грузовика.
Полное имя — Чарльз Стэнли Даттон (Charles Stanley Dutton).
Находясь в тюрьме, освоил двухлетнюю программу Hagerstown Community College.
Получил степень магистра по актерской игре в Йельской школе драмы.
В 17 лет Даттона обвинили в убийстве, и следующие несколько лет он провел в тюрьме. Но именно в местах не столь отдаленных он и нашел себя. Во время отбывания своего второго срока Даттон на шесть дней угодил в одиночную камеру, куда по случайности взял с собой антологию пьес. По окончании недели в «одиночке» он обратился к начальству тюрьмы с просьбой организовать драматический кружок.