高澄之妻是孝静帝的妹妹冯诩公主,她生得容貌秀美,妇德优良,并为高澄生下了一男二女。但高澄品行败坏,生活糜烂,毫不珍视冯诩公主的感情。
当时,高阳王元斌的庶妹元玉仪,因行为不轨而为家人所不齿。后来被一位名叫孙腾的人纳为女妓,不久又遗弃。有一天,高澄在路上遇见了她,竟然一见钟情,将她收为侧室,十分宠爱,还让孝静帝册封她为琅琊公主。元玉仪有位胞妹名叫元静仪,是黄门侍郎崔括之妻。高澄听说她颇有姿色,硬将她夺为己妾,也让孝静帝封她为公主。御史中尉高仲密的妻子聪明漂亮,高澄听说后又让人将她诱骗到自己的府第。由于那妇人坚贞不屈,他竟将其衣服全都撕破,强行奸污了她!
此外,高澄还令崔季舒等心腹之人四处为他找美女。在他初得元玉仪时,他还抱怨过崔季舒说:“尔由来为我求色,不如我自得一绝异者!”
更有甚者,高澄还强奸其弟媳、庶母,由此而被时人私下骂为禽兽不如!