賈琏這個人在美色方面非常沒有底線，用賈母的話就是香的臭的都往自己屋裡拉。他招惹了很多他本不該招惹的人，比如秋桐和尤二姐等。秋桐本是賈赦的妾，賈琏卻私下總是和秋桐眉來眼去，連賈蓉都知道：“連那邊大老爺這麼厲害，琏叔還和那小姨娘不幹淨呢”。尤二姐就更是賈琏在國孝和家孝兩個重孝之下偷娶的。

賈琏身邊有名分的女人雖然不多，但是他接觸過的女人并不少。賈母曾說過，王熙鳳和平兒是一對美人胚子，但是賈琏總是不滿足，在外面偷腥一次比一次厲害。王熙鳳生日當天，他竟然和鮑二媳婦在家厮混，被王熙鳳捉奸在床之後，鮑二媳婦就上吊自盡了。更甚至在巧姐出痘的時候，他招惹上了多姑娘，禁欲回來之後還帶回來多姑娘的一縷頭發。

賈琏的種種做法似乎都在表明着，他在美色方面極度不滿足，也十分沒有底線。然而奇怪的是，他招惹的人一次比一次危險，也一次比一次不堪，而對于近在眼前的平兒，賈琏卻似乎總是躲得遠遠的。即便他偶爾想和平兒親近，但如果平兒不願意，他就不會再強求了。

很多人說是因為王熙鳳不允許，所以賈琏不敢和平兒親近。然而接觸秋桐比接觸平兒要困難多了，并且還是冒着大不敬的風險，但是書裡說賈琏和秋桐早就有舊，說明二人眉目傳情也不是一天兩天了，甚至鮑二家的和多姑娘還都是有夫之婦。為何賈琏甯願招惹這些棘手的人物，卻不強求近在眼前的平兒呢？

其實縱觀賈琏喜歡的這些人，都有些輕浮之态，或者說都不太本分。王熙鳳不用說了，大家族出身，是名副其實的大家閨秀，但是賈琏對于這樣的人并不感冒，他對王熙鳳更多的是懼怕和敷衍，而且他還不止一次表示想休掉王熙鳳。娶尤二姐的時候他就是本着将來要把尤二姐扶正的想法去的，在和鮑二媳婦厮混的時候他也說過想休妻。

平兒是從小跟随王熙鳳的人，雖然平兒的為人要比王熙鳳溫柔并且也善良，但是她身上始終帶着王熙鳳特有的标簽，即便她身份低微，但一樣有一種不可侵犯的威嚴。賈琏最初可能也對平兒有過好感，有時候也被平兒的嬌俏所迷戀，但是平兒在他這裡始終是一個可有可無的人。

賈琏很多時候都把平兒看成王熙鳳的影子，并且說話時也把平兒和他的界限劃分得很清楚，總是對平兒稱呼王熙鳳為“你主子”或者“你奶奶”。在他的潛意識裡，他把平兒和王熙鳳歸為了一類人，即便她們本質不同，但是在男歡女愛的感情裡，賈琏始終對她提不起興趣。

還有一方面的原因就是，在賈琏和平兒後來的相處中，賈琏把平兒當作了帶點恩情的紅顔知己。王熙鳳和賈琏後來越來越不和睦，并且王熙鳳非常強勢，很多時候都讓賈琏很痛苦也很為難。這時候的平兒就總是在幫着賈琏，幫他藏多姑娘的頭發、善待尤二姐、幫他偷王熙鳳的錢來給尤二姐辦葬禮等等。八十回後還說平兒把巧姐給救回來了，賈琏十分感激她，要把她扶正。

平兒的人品和為人在賈琏這裡其實早就有了定論，他後來越來越敬重平兒，把平兒當作類似恩人的紅顔知己。平兒這個人很本分也念舊恩，她怕王熙鳳不高興，所以她總是避免和賈琏獨處。賈琏對平兒本來就不算太感冒，又加上後來對平兒的各種敬仰，所以如果平兒不願意，他絕對不會像對待其他女人那樣沒有底線，用各種手段來強求平兒。

平兒雖然出身低微，但是她在賈琏心裡是有一絲高貴的。賈琏和尤二姐在小花枝巷有過一段甜蜜的時光，兩個人也有過刻骨銘心的愛情，但是對于平兒，賈琏更多的是敬重，即便和平兒有過夫妻之實，卻也是一種戀人未滿的狀态。賈琏喜歡的女人大多都帶有一點挑逗性的色彩，尤其多姑娘，他甯可冒着危險也要挑戰這種刺激。然而平兒高貴的人格和溫順的性情讓賈琏始終對她産生不了沖動，并且後來平兒對他的各種相助，讓賈琏對平兒越來越敬重，絕對不會有輕薄之意。平兒懼怕王熙鳳不願意和他親近，賈琏自然不敢強求她。