Второй знатной матроной в семье была Ливия, прабабка Калигулы. Ей тогда исполнилось 85 лет. С рождения она принадлежала двум великим семьям: Клавдиев и Ливиев, поскольку ее отец, урожденный Клавдий, был воспитан в семье Ливиев. Его мать Альфидия, напротив, по происхождению была из семьи муниципальных нобилей Фонтеев. Из наших документов можно предположить, что имел место неравный брак, по крайней мере, так считал сам Калигула (Светоний, 23, 3). Она родилась 30 января 58 года до н.э., вышла замуж еще совсем молодой за своего двоюродного брата Тиберия Клавдия Нерона. От этого брака родились Тиберий (16 ноября 42 года до н.э.) и Друз I (апрель 38 года). 17 января 38 года она вышла замуж, достигнув соглашения со своим первым мужем, за Августа, с которым создала примерную супружескую пару. Ее целомудрие было известно всем, так же как и ее сдержанность, но плодовитостью она не отличалась, поскольку не смогла родить Августу ни одного ребенка. Она сопровождала своего мужа почти во всех его путешествиях, но при его жизни получила мало признания. Ливия была добродетельной супругой и матерью, глубоко привязанной к своим детям, озабоченная тем, чтобы обеспечить им хорошее будущее. Калигула назвал ее «Улисс в юбке», что подчеркивает ее хитрый ум. Действительно, она по праву выступала в качестве первого советника своего мужа и затем и сына. Имела ли она большое влияние? Несомненно, ее роль была преувеличена и в первую очередь ее друзьями, которые этим хвалились. До конца жизни признаки заискивания, проявленные в форме публичного уважения, были оказаны ей повсюду, но в области управления делами она была осторожна, вероятно, потому, что не нашла общий язык с Агриппиной, женой своего внука. Тацит считает, что именно после ее смерти Тиберий начинает злоупотреблять властью. Калигула приходил к ней по возможности скрытно, чтобы предстоящий судебный процесс против Агриппины не коснулся самого младшего из ее детей. Вероятно, что в эти драматические моменты 28-29 годов Калигула сопоставлял поведение своей матери и бабушки: одна полна искренности и высокомерия, другая была приветливой и скрытной, и, наверное, более умной.
Остается бабка Антония; о ней мы не знаем почти ничего. Эта дочка Марка Антония и Октавии, сводной сестры Марцелла, основная наследница своего деда Августа, сводная сестра Юлия Антония, известного любовника Юлии I, дочки Августа, приговоренная за то, что подготовила заговор, была воспитана строгой матерью Октавией, плодовитость и целомудрие которой ставились в пример. Агриппина теми же качествами ее потом затмила. Как и Ливия, Октавия не вмешивалась в политику после смерти своего сына Марцелла. Антония пошла по пути матери. Родившись 31 января 36 года до н.э., она вышла замуж за Друза I, второго сына Ливии, которого сопровождала в его провинциальных должностях. Она имела много детей, трое из которых достигли зрелости; это — Германик, Ливилла, которая вышла замуж за Друза II, и будущий император Клавдий. После смерти своего мужа в 9 году она отказалась выйти замуж во второй раз, выбирая вдовство. Отныне она решила посвятить себя распоряжению своим необъятным имуществом, поскольку была наследницей части состояния своего отца Марка Антония в Азии и Египте. Такое уединение иногда шокировало, как и то, что она не появилась на похоронах своего сына Германика. При жизни Ливии она не участвовала в общественной жизни, но когда умерла вдова Августа, она взяла к себе двух детей — Гая и сестру Гая Друзиллу. При восшествии на престол Калигулы она оказалась единственной, оставшейся в живых из его советников, и честь, оказанная ей, подчеркивает уровень признательности, если не любви, со стороны Калигулы. В своем роде она была наследницей Ливии в императорской семье.