Agripa murió en el año 12 a. C., y Julia aún contraería un tercer matrimonio: Tiberio tuvo que divorciarse de su amada esposa, Vipsania, para casarse con ella a disgusto. Vipsania esperaba por entonces su segundo hijo. Julia solo tendría un hijo de Tiberio, un niño que falleció durante la infancia. Suetonio afirma que él desaprobaba el carácter de su esposa, mientras que Tácito dice que Julia despreciaba a su marido por considerarlo por debajo de ella.