Andy Williams擅長唱冧歌，一生也至少有三段刻骨銘心的感情。在三年前出版的回憶錄，他自揭1950年代曾跟比自己年長18歲的才女Kay Thompson，有過一段「母子戀」。Kay Thompson活躍於廣播和歌影界，又寫童書，威廉斯兄弟出道早年常跟她在夜總會同場演出，Andy的歌唱事業亦多得她提攜。
Andy Williams1961年跟法籍女歌手Claudine Longet結婚，育有三名子女，1975年兩人離婚。Claudine在1976年被控槍殺滑雪冠軍男友薩比奇（Vladimir Sabich），她聲稱是意外走火，他全力為前妻辯護，甚至出庭作證，最後她獲輕判入獄30日。Andy Williams的第二任妻子黛比（Debbie Haas）則是酒店行政人員，1991年結婚後一直伴隨他走完人生之路。美國《華盛頓郵報》