也许天见犹怜，一个男人的出现成为她生命的转折点。  

1935年，张伯驹到天香阁应酬，当他看到潘素那一刻开始，他的心乱了，这让他30年来第一次体验到怦然心动的感觉。情不自禁地赠了一副对联给她：“潘步掌中轻，十步香尘生罗袜妃弹塞上曲，千秋胡语入琵琶。”  

潘素也对这个满腹才情的男人一见倾心，两人很快两人坠入爱河。然而，潘素身在风月场中多年，多才多艺，容貌出众，看上她的人很多。国民党中将臧卓早就追求她，想收为己有，见潘素与张伯驹来往频繁，一气之下把潘素软禁起来。  

张伯驹大惊失色，好在他的人脉很方，在朋友的帮助下买通了看守，趁臧卓外出办事时，把潘素劫了出来，两人立即离开上海，并且逃到北京，迅速成婚。结婚以后，张伯驹将两笔巨款分给两房太太，办了离婚手续，结束了复杂的家庭关系。从此，他就专宠潘素一人。