Первая жена — Елена Валк, на которой он женился, чтобы получить московскую прописку; вместе не жили.

Вторая жена — Оксана Павловна Ярмольник (Афанасьева) — дизайнер, театральный художник по костюмам и актриса, изготавливает коллекционные куклы и игрушки. Бывшая возлюбленная певца и актера Владимира Высоцкого, с которым была вплоть до его смерти в 1980 г.

Дочь — Александра Ярмольник (1983) — художник по стеклу, изготавливает стеклянные скульптуры. Закончила МГХПУ им. Строганова.