如果要问“最爱的女人”‘肯定是紫姬。
这点明石中宫已经回答了十分准确了，藤壶是他一生的初恋，得不到的白月光。
紫姬才是相濡以沫一生的真爱伴侣，在那个社会那个年代，他对紫姬的尊重和喜爱真的是非常难得的。
避免重复，我来从不一样的角度回答下吧。
源氏最爱的人，那肯定是他自己啊。在他自己面前，老婆孩子都要靠后的。
这一点是可以理解的，因为没有人不自私，更何况在那个男权主义社会，源氏身为一个身份尊贵的男人加上自身条件特别好，不自恋不自我才有鬼。
源氏不仅仅是个多情好色的富贵公子，他还是一个现实虚伪的政客。
尤其是从须磨明石回来之后，尤为明显。
把秋好收为养女嫁给冷泉帝
把明石的孩子给紫姬抚养
把玉鬘送进宫
娶三公主
等…种种事情表明，他虽然爱这些女子，但都比不得他自己的利益的。
每次伤害了一群女人然后找点我没有办法的理由开脱，喜欢上人家了说是情不自禁仰慕已久，违反了法律说是心中感情难以抑制，在外面找女人还好跟紫姬说是逢场作戏我最爱你…
他的内心里有悔恨有忏悔，但下次犯错误的时候还会继续找理由为自己开脱。
每次看到他这种行为我总会噗的笑出声，然后说一句，太狡猾了，你怎么每次都有理由可说呢。
看看他对很多女人的态度，再看看他对紫姬，你会肯定的说，紫姬绝壁是真爱!让这个自大自我自恋狂放低态度去喜欢去尊重，这已经是很难得的了。
但这些也要归功于紫姬的性格和脾气秉性，不然你看紫姬要是任性些他肯定翻脸…或者性格叛逆的陇月夜，高贵的葵姬，他也虽喜欢，但他肯定不会视为真爱的。
他对很多女人的喜欢，是在“能满足个人需求”的前提之下的，比如肉体的满足(陇月夜，前期明石)，虚荣的满足(前期六条)，美色吸引(玉鬘)，对他的依顺(夕颜，紫姬)，政治因素(葵姬，后期明石)等。
说白了只有他的需求得到了满足，他才会觉得这些女人可爱。
所以你说他，真的懂得怎么去爱吗?如果他真的爱这些女人，他不会去和藤壶啪啪啪，不会出轨明石，不会认为陇月夜轻浮，不会对玉鬘进行骚扰，不会有些强迫性的夺明石的孩子，不会娶三公主…
他最爱的人，还是他自己，他爱自己要比爱紫姬更多。
源氏对紫姬就是像个小孩子似的(虽然他也经常为紫姬考虑，比如抚养明石小女公子，但大多情况下，他必须要把自己排在紫姬之前的)出轨明石之后解释了一大堆说白了就是给自己约炮找理由，最后紫姬都快病抽过去了，他也不允许紫姬出家得到解脱，虽然说他是爱紫姬舍不得人家，依我看这就是自己不想一个人过非得拉人家陪自己的自私想法而已。
而紫姬最爱的人是源氏，她才是付出了一辈子去爱的，虽然有时候也会嫉妒自私，但她会首先考虑到源氏的利益，不让他为难。这并不仅仅是紫姬不敢，而是她心是真的好。书中她仅有的自私想法无非是对明石嫉妒和后来想出家时候，即使这样，她也把明石小女公子抚养成人，善待明石姬。想出家的时候还考虑源氏会难过的心情不敢出家，最后郁郁而终。
(这里再补充一条我忘了写，紫姬是有嫉妒有吃醋有小性子的女人，这也是她爱源的证明。但有时侯，她没有明确的表达出来，其原因一是她识大体，原因二就是吃太多醋源本人也会觉得受不了。所以我这里写，紫姬有时候也是因为满足源的个人需求做出了很大的让步，否则如果她什么事都表露出来，和源说出来的话，一次两次还好，次数多了源也会烦，从坦诚到啰嗦，再到不懂事。类似的例子可以见夕雾云居雁夫妇)
说了这么多并不是怀疑源对紫姬的感情，而是解释了下为什么有人说源氏最爱的是自己。
But，源氏的自我和自私也是他的魅力之一，要是他像个玛丽苏剧男主一样专一痴情为别人想，估计这部《源氏物语》也成不了名著。
为什么呢?
纵观世界上著名的感情小说，男主角基本都是浪子，女主角基本都是烈女(心灵or肉体)。
如：中国的《红楼梦》，美国的《飘》，法国的《茶花女》，英国的《简爱》，俄罗斯的《安娜卡列尼娜》等…
这些小说虽然结局差不多都比较悲惨，但个个都是经典，因为他们把人性写的很赤裸很正确。
所以《源氏物语》作为一个古典现实爱情小说，里面的人性都是很现实甚至苍凉的，源氏的自我和自私才是一个风流皇子狡猾政客应该呈现的面貌。
所以源氏最爱自己，是应该的，是必须的，是非常合理的。
如果你们想看一男一女一生一世一双人的甜死人玛丽苏剧情可以去看看现在的网文，一搜一大把，但不要妄图在名著里找类似的故事。
名著里男女爱情永垂不朽的要么是殉情早死的(罗密欧朱丽叶)，要么是没往下写婚姻生活的(傲慢与偏见)，要么是被改编的童话(白雪公主)，因为这些故事再往下写估计就会把你搞的不相信爱情。
当然我是相信爱情的，我相信大家都是渴望爱情的。所以不要学习源氏那么自私，多互相沟通理解，现在是21世纪，我们的选择权很多，不会像古典名著里的人那样有很多束缚，所以要好好经营自己的命运和感情，我祝大家都能和真爱长久幸福。作者：夏日初
