Впервые Дворжецкий женился на девушке по имени Альбина, которую встретил на танцах на Сахалине. У пары появился сын Александр, однако семья вскоре распалась: по слухам, из-за измены. Именно из-за разлада с супругой Владислав Вацлавович вернулся в Омск, где по велению судьбы начал актерскую карьеру. На театральных подмостках артист встретил вторую жену, Светлану Пиляеву. Она ни на минуту не сомневалась в талантах Дворжецкого и была рядом, когда ему дали роль Хлудова. В браке у актеров родилась дочь Лидия, судьба которой сложилась трагически: после серьезного обморожения девушке ампутировали ноги, и впоследствии она не дожила до 30…

Из-за ревности и бытовых скандалов второй брак Дворжецкого распался, впрочем, вскоре он нашел утешение в объятьях манекенщицы Ирины. Третья супруга подарила артисту сына Дмитрия, но и этот союз оказался недолгим. Что же было причиной столь скоропалительных разводов: интрижки, непостоянство? Дети подрастали, а актер считал, что непременно должен обеспечить им достойные условия жизни, которых сам в детстве был лишен. Поэтому Дворжецкий соглашался на любую работу, лишь бы платили деньги. Статистика получалась невероятная: за восемь лет артист участвовал в 18 фильмах, а параллельно ездил на творческие встречи по всей стране.

Любовные неудачи он не скрывал и, встретив новую пассию Наталью Литвиненко, сразу рассказал о трех детях от разных женщин. Честность актера покорила сотрудницу исполкома. В то время она переживала бракоразводный процесс и как никогда нуждалась в поддержке человека, который и сам перенес личную трагедию. Поначалу они виделись в компании друзей, затем перешли на свидания тет-а-тет: ходили в ресторан Дома кино, катались на машине по улицам Москвы.