Знакомство Александра Ширвиндта со своей будущей женой Наташей Белоусовой состоялось еще в начале 50-х под Москвой, в дачном поселке НИЛ, который основал ее дед в свою бытность главным архитектором Москвы. Согласно легенде, в начальной стадии знакомства с Натальей Ширвиндта пленило в девушке, прежде всего, то, что у нее в хозяйстве имелась... корова. Будучи патологическим «молокоголиком», Ширвиндт не мог пройти мимо этого факта. Однако, полюбив корову, он постепенно увлекся и ее хозяйкой. Правда, на момент женитьбы молодых обстоятельства сложились таким образом, что с коровой Белоусовым пришлось расстаться. Так что дармовым молочком жениху так и не довелось побаловаться.

По профессии Наталья Николаевна - архитектор. По своим корням жена Александра Ширвиндта - столбовая дворянка. Ее род по матери восходит к знаменитому Семенову-Тян-Шанскому, предки по отцу - в старое московское купечество.

В 1965 году Александр Ширвиндт вместе с женой и сыном переехал в знаменитую высотку на Котельнической набережной, обменяв две комнаты в Скатертном и однокомнатную квартиру в «хрущевке» на трехкомнатную квартиру. В этой элитной высотке жили Людмила Зыкина, Лидия Смирнова, Клара Лучко, Фаина Раневская и другие знаменитости.

В 1958 году А. Ширвиндт стал отцом - родился сын, которого назвали Михаилом. Михаил, закончив Театральное училище им. Щукина, несколько сезонов отработал в театре «Сатирикон». Однако в 1993 году он уходит на телевидение, бросив театр. Вел «Лотто Миллион». В 1994 году создал студию «Весы», которая трансформировалась затем в телекомпанию «Живые новости».

У Михаила Ширвиндта двое детей: сын Андрей (1981 г.р.), студент юридического факультета РГГУ, дочь Саша (1986 г.р.).

Александр Анатольевич увлекается рыбалкой, баскетболом, игрой на скрипке. Более 40 лет курит трубку, которая стала его непременным атрибутом.

В 1997 году Институт теоретической астрономии Российской академии наук присвоил одной из малых планет имя «Ширвиндт».

На вопрос: «Как Вы к жизни вообще относитесь?» - Александр Ширвиндт отвечает: «Пытаюсь воспринимать ее иронично-философски, понимая всю бренность нашего существования».