看蔡國威的簡介，說他是家中獨子，原來他的家庭較為複雜，「我出身於單親家庭，」在他剛出生時，父母就離婚了，哥哥跟媽媽，他跟父親，可是在十歲之前，爸爸把他放在一個婆婆家托養，到了十歲才突然接他回家。那一年他見過媽媽及哥哥一次，對眼前的女士，爸爸叫他：「叫聲媽媽。」他叫了，可是並不由衷，自此之後，母子之間再無見面。
當時無意識的叫一聲媽媽，蔡國威內心好像沒什麼，平時也不會想起她，也從未想過要找回媽媽，可是他知道，唯一一次見媽媽，其實在他的內心是相當震撼，「因為過了幾十年，我仍然記得她的樣貌。」至於大他兩歲的哥哥，也從此失聯，沒有聯絡。十歲回去跟父親，父子的感情也很疏離，沒有交流。中學畢業後，父親更叫他出來打工，講明不會再供他讀書。「那時候我們的關係更惡劣。」
後來直到他被叮醒了，積極改變想法，改變人生，他才想到自己怎樣都要孝順爸爸，盡兒子的責任，和父親的關係才緩和及改善，「以前真是沒有交流沒有溝通，我內心亦恨他把我托養給婆婆，沒有理會我。有一段時間，甚至沒有和爸爸同桌吃飯。後來我當然知道，爸爸的內心是疼我的，不過男人通常內歛不會表達。於是到自己有能力賺錢時，我也供養他，也照顧他。」
也因為從小在不完整的家庭長大，他自小就變得非常獨立，幸好父親的親戚知道他的處境，倒是很疼他。童年的陰影對他傷害很大，因此他從未想過有家庭，「或者你話我自私都好，反正我不想負任何的責任。」
以前他也拍過拖，但是很快就覺得女仔很令他煩厭，確定戀愛關係後，開始查勤，如果沒有接電話又問長問短，去食飯明明說吃什麼都可以，後來又嫌三嫌四，總之拍拖的經驗，不但沒有令他有戀愛的快樂，甚至覺得困身及諸多遷就。
三十歲之後，不結婚的決定更為堅決，他為自己落了閘，就算有些女仔向他表示好感，他都完全沒有反應，「我知自己事，不會給別人機會，何必浪費人家的時間？」他的耐性只給朋友及屋企的親戚；對愛情，他一點都不動搖。「我避得開，又扮傻，人家自然知難而退。」
不婚的信念實在太強，他分析自己是不想有任何責任，「一個人樂得逍遙自在，如果有對象，怎樣都要照顧對方，真的很累。我可以和任何人做朋友，可以和任何人玩，可是如果確定了戀愛關係，難以絕無牽掛，對我來說，這就是負擔。」
因為獨立慣了，他也不知道什麼是寂寞，「我有好多好多朋友在身邊，就算大家唔得閒，我亦可以安排自己，一個人吃飯、一個人看電影、一個人運動、一個人旅行、一個人行街，我不需要伴。」不過世事很難預料，或者到老了，又緣份到了，那時才找到一個伴也說不定。
在亞視後來那幾年，他賺到錢，但不懂得投資，又很揮霍，他沒留下太多錢。他是屋邨長大，爺爺留下一間公屋，爸爸走了之後，就留給他，威威花四十多萬買下，花了二十萬裝修，總算有瓦遮頭，他也樂得自在。「初初在無綫搵錢不多，所以積蓄也花了不少。現在我一聽到有工開就好開心，可以回去見到很多朋友，大家有傾有講，日子容易過。」