作为《雪山飞狐》和《飞狐外传》两部武侠的男主，胡斐的地位也算是独一无二。而书中的亮点不仅在于胡斐卓绝的武功、行侠仗义的故事，更在他错综复杂的情感纠葛，书中，他与三位女主有过感情纠葛，他最终和谁在一起了呢？
【1】
在《雪山飞狐》当中，胡斐已经二十七岁，而《飞狐外传》中他不过只有十八岁。按说到了《雪山飞狐》当中，胡斐已经走向成熟，他应该知道自己究竟爱的是哪个女人。而他表现出来的，也是对苗若兰毫无保留的爱。原文道：
两人心中柔和，古人咏叹深情蜜意的诗句，忽地一句句似脱口而出。胡斐不自禁低声说道：'宜言饮酒，与子偕老。'苗若兰仰起头来，望着他的眼睛，轻轻的道：'琴瑟在御，莫不静好。'这是《诗经》中一对夫妇的对答之词，情意绵绵，温馨无限。”
苗若兰比胡斐小上十来岁，当时不过十七八岁，对于古时夫妻来说，原也寻常，就算是现在，情侣之间差上十来岁也不算稀奇。
只不过武侠小说当中，多是让男女主人公拥有最美好的爱情，故而二人一般年纪都相仿，就算是《神雕侠侣》当中，杨过和小龙女姐弟恋，小龙女也不过比杨过大了四岁而已。
关键是从胡斐的心中，丝毫看不到其他女人的影子，要知道当初他和袁紫衣、程灵素绝对是有感情的。这其实就要说到，金庸先生创作这两部作品的时间顺序了，虽然《雪山飞狐》的故事晚于《飞狐外传》十来年，但是，金庸先生实际上是先写《雪山飞狐》，后写的《飞狐外传》，所以，故事中的人物，不能做到一一呼应。
也就是说，金庸先生在描写苗若兰这个人物的时候，其实没有想到袁紫衣和程灵素。
从《雪山飞狐》看，胡斐当然是爱苗若兰的，而且这是一段琴瑟和鸣的爱情。唯一的遗憾，就是胡斐和苗若兰的父亲苗人凤有误解。
苗若兰温柔可爱，美丽动人，善解人意，虽然缺少其他特色，但也绝对算得上是理想伴侣了。然而，她和胡斐之间的爱情，虽然美人爱英雄，算得上符合现实，但是，却缺少了彼此之间的情感历程。
即便如此，胡斐的最终归宿，还是和苗若兰在一起了。
【2】
比较而言，袁紫衣和程灵素与胡斐之间则是纠葛多多。
说起来，《飞狐外传》中的胡斐，不过年仅十八岁，虽然勉强也算成人了，而且古时婚嫁早，谈个恋爱也不算早恋。
但是，当时的胡斐，一门心思只想为钟阿四一家复仇，千万里追杀恶霸五虎门掌门凤天南，其实对男女之事，并未多想。
胡斐看上袁紫衣，完全是因为对方的容貌，在《飞狐外传》当中算是数一数二的了。少年心性，爱美之心人皆有之，也算正常。
更何况，袁紫衣开局就在胡斐不知情的情况下，偷走了他的包裹，这份功夫自然让刚刚十八岁，除了练武就没有其他喜好的胡斐惊叹。
胡斐早已看清来人是个妙龄少女，但见她身穿紫衣，身材苗条，正是途中所遇那个骑白马的女子。她背上负着一个包袱，却不是自己在饭铺中所失的是什么？只见她一张瓜子脸，双眉修长，眼大嘴小，姿形秀丽，容光人，不禁大为惊讶：'这女子年纪和我相若，难道便有一身极高武功，如此轻轻巧巧地取去包袱，竟让我丝毫不觉？'”
英雄爱美人，特别是一个有本事的美人，自然会得到特别青睐。
接下来，这个美人和胡斐连续多次偶遇，胡斐自然不可能不多加留意。
若有若无，看似捣乱，其实创造了相见的机会。一个年轻小伙，一个美貌姑娘，胡斐纵然说不上爱上袁紫衣，喜欢总是喜欢的。
而这其中，还因为袁紫衣也看上了胡斐，胡斐不仅是名门之后，辽东大侠胡一刀之子，更是红花会三当家赵半山的义弟，就武林当中来说，算是有根有底，大有身份。
而以武功而论，胡斐虽然和袁紫衣同龄，但武功竟然还比袁紫衣还高上一筹。作为江湖儿女，不爱官位，不爱有车有有三金，自然是爱对方的武功了。
胡斐人品优良，侠肝义胆，相貌堂堂，彼此之间可谓是一对璧人，相当般配了。原文道：
她每天只行五六十里路程，但胡斐始终没追上来，芳心可可，竟尽记着这个浑身臭泥的小泥鳅胡斐。……袁紫衣轻叹一声，柔声道：'胡大哥，你当真不给我一点儿面子么？'火光映之下，袁紫衣娇脸如花，低语央求，胡斐不由得心肠软了，见到她握着银鞭的手莹白如玉，一股冲动，便想抛下单刀，伸手去握她的小手。”
然而说到底，胡斐虽然看上了袁紫衣，也很喜欢袁紫衣，甚至想让对方做自己的恋人，但是，比起和程灵素在一起的经历，就逊色太远了。
【3】
程灵素虽然武功不高，但是聪慧之极，甚至不逊色于蓉，而人品之高，远在蓉之上。奈何，她出现在《飞狐外传》当中，只能注定了悲剧角色。
见她除一双眼睛外，容貌却也平平，肌肤枯，脸有菜色，似乎终年吃不饱饭似的，头发也稀干枯，双肩如削，身材瘦小，显是穷村贫女，自幼便少了滋养。一身荆钗布裙，衣衫甚是干净齐整，浆洗得不染丝毫尘土泥污。她相貌似乎已有十六七岁，身形却如是个十四五岁的幼女，但见她拔草理花时手脚利落。”
在路人的眼中，程灵素就是一个农家贫女，第一印象自然不能和袁紫衣相比。胡斐第一眼不要说爱上，就是喜欢上也是绝不可能。
更为关键的是，程灵素虽然人品之佳，整个金庸武侠女主无出其右，但是，为人聪慧的过度，胡斐远不是郭靖那么木讷之人，然而在程灵素的面前，就是一个处处想法都被看穿的小白。
程灵素虽然比胡斐年幼，虽然深爱胡斐，但是，胡斐在程灵素的面前，却是毫无自信，程灵素不仅事事都能预料到，而且做事无可挑剔，简直就是完美。
胡斐武功虽然高，但在程灵素面前却是自卑的，除了武功，他完全不认为自己哪一方面比程灵素强。
虽然，胡斐对程灵素没有产生男女之爱，但是，程灵素给他一生的心灵震撼，绝对是独一无二的。