Актер мастерски перевоплощался на экране как в протагонистов, так и в негодяев, но какую роль он играл за кадром? Амплуа романтического героя Раков впервые примерил в начале обучения в ГИТИСе. Мало кто знает, что тогда девушкой Виктора была Елена Яковлева. За ней ухаживали многие студенты, однако Раков оказался настойчивее других и добился расположения пассии. «Мы некоторое время «романились», а потом расстались на втором курсе. Она была достаточно пухленькой. Это потом уже похудела, и ей это очень шло», — вспоминал Раков.

Расставание прошло без скандалов и драм, так что через короткий промежуток времени Яковлева уже вышла замуж за Сергея Юлина, ну а Виктор Раков связал судьбу с однокурсницей Ольгой Илюхиной, которая казалась ему идеалом женщины и супруги. Не все в семье было гладко, свекровь и вовсе подозревала, что Илюхина не любит Ракова. Однако артист верил, что с рождением ребенка супруги станут по-настоящему близки. Случилось наоборот: вскоре после появления на свет сына Бориса союз распался из-за измены Ольги. Разрыв тяжело дался актеру, но, как говорил сам Виктор Викторович, превратил его из инфантильного юноши в мужчину.

«Когда жена призналась, что полюбила другого, я чуть не умер от горя, — делился Раков. — Так плохо мне было и физически, и морально. На тот момент у меня была уже хорошо развита фантазия. Когда придумываешь человека, а он на самом деле оказывается абсолютно другим, очень трудно потом с образом расставаться».Артист пробовал забыться в пьяном угаре, проводил время в разных компаниях, а потом возвращался в свою пустую комнату в общежитии. Целый год он переживал этот мучительный разрыв. «Ольга рассталась с любовником, потом были так называемые «приходящие», затем вышла замуж счастливо, но в итоге разошлась и с тем человеком. Ее жизнь, я в подробности не вдаюсь», — отмечал актер. Хуже всего оказалось то, что несчастья начали преследовать сына Ракова Бориса. С самого детства мальчик рос болезненным: ему удалили почку и селезенку, после кровоизлияния в мозг делали трепанацию. Виктор не сомневался, что таким образом Бог покарал родителей ребенка, наказал Ольгу за неверность. К счастью, с возрастом проблемы наследника со здоровьем перестали быть столь критичными, хотя и не исчезли совсем.