Nipote di Tiberio e zio di Caligola, venne emarginato fin da piccolo in quanto balbuziente e zoppo, dedicandosi quindi agli studi. Era anche profondamente disprezzato anche dalla madre Antonia minore che lo definiva "abbozzo d'uomo".