В 1693 году Жан Жозеф женился на Симоне Рапийон, дочери торговца. В этом браке родился Франсуа Ампер, который посвятил жизнь производству шелка и торговле им. Только через три поколения семья Амперов сумела стать частью торговой буржуазии Лиона, что позволило ей войти в самые влиятельные круги города. Франсуа женился на дочери парламентского адвоката Анн Бертей. У них родилось четверо детей, последний из которых, Жан-Жак Ампер, продолжил дело отца. В июле 1771 года Жан-Жак женился на Жанне Антуанетте де Сютьер-Сарсей, также происходившей из семьи производителей шелка. Семьи Амперов и Сарсей процветали в царствование Людовика XV, однако революция лишила их потомков этого благополучия. У Жан-Жака и Жанны Антуанетты родилось трое детей.
С одной стороны, это была самая обыкновенная семья, каждое поколение которой поднималось все выше по социальной лестнице. Однако Андре-Мари Ампер стал не обычным ее представителем, а одним из самых исключительных ученых в истории Франции. Итак, в отличие от многих других гениев, Ампер вышел из семьи торговцев.
Жан-Жак Ампер и Жанна Антуанетта купили небольшой домик в деревне Полемье-о-Мон-д'Ор. В детские годы Андре- Мари Ампера по соседству с ними жили еще пять семей буржуа из Лиона, а всего деревушка едва насчитывала 400 жителей. Дом был куплен за 20 тысяч ливров. Кроме того, дядя Жанны Жак де Сютьер-Сарсей подарил супругам 25 тысяч ливров. Добавим сюда и мебель стоимостью около 6 тысяч ливров — часть наследства Жанны. Общее состояние пары составляло около 100 тысяч ливров, что было по тем временам немалой суммой.
Сначала супруги жили не в Полемье, а в фамильном доме Жан-Жака, под номером 44 по улице Сен-Антуан города Лиона. Там 20 января 1775 года и родился Андре-Мари. Дом стоял у слияния Роны и Соны. Андре-Мари был вторым ребенком, у него была старшая сестра Антуанетта (родилась в 1772 году) и младшая, Жозефина (родилась в 1785 году). Он был единственным мальчиком в семье.
Сведения о детстве Андре-Мари скудны, хотя мы располагаем двумя их главными источниками. Первый — автобиография Ампера, написанная ученым за 12 лет до смерти, в 1824 году, она представляет собой крайне интересный исторический документ, содержащий ценную информацию о его самообразовании. Стоит заметить, что это выдающееся жизнеописание ученого, в котором Ампер говорит о себе в третьем лице. Второй источник — это биография, написанная французским ученым и политиком Франсуа Араго (1786-1853): она во многом подтверждает написанное в автобиографии, но ей порой не хватает объективности. Араго, который часто встречался с Андре-Мари, очень ценил их научное сотрудничество, как мы увидим позже.