第二年（232年），自我感觉良好的刘琰，竟然跟诸葛亮的亲信，前军师魏延发生口角，在口角时，刘琰因为说话过于狂妄，而被魏延添油加醋反馈给诸葛亮。诸葛亮非常不满，对刘琰加以指责。这时的刘琰才如梦方醒，此时掌握大权的刘备已经安息，，掌权的诸葛亮他得罪不起。于是写信向诸葛亮谢罪，虽然态度诚恳，但刘琰被诸葛亮堤防，虽然没有调动他的官位，但将其从前线送到成都，刘琰知道自己在斗争中败北，失去权势，精神恍惚，经常大发肝火。
诸葛亮
公元234年正月，按照蜀汉的规矩，朝中大臣的母亲和妻子，要入朝庆贺。刘琰发达后，娶了一位年轻貌美的妻子胡氏夫人。胡夫人在进宫向皇太后吴氏拜年的时候。被皇太后留在宫中居住，长达一个月之久。此时的刘禅已经27岁，刘琰怀疑自己的老婆和自己的老板刘禅，有什么不干净的事情。于是逼问胡夫人，还命令府中吏卒动手打老婆，甚至用鞋子抽胡夫人的脸蛋。然后刘琰无故休妻，将老婆胡氏赶出家门。
古代美女
胡氏不服，向有司反应这一情况。当时成都内外风言风语，让后主刘禅脸面无光。刘禅责令有司尽快办理此事，而有司认为，身份低贱的吏卒不应该责打没有犯下罪行的大臣妻子，而人脸也不是承受鞋子拍打的地方。加之刘琰此事有关皇帝威严，必须严惩才能止住风言风语，于是刘琰被判了斩决弃市之罪，以儆效尤，让好事者知道其中利害。而这位没有本事，没有能力，又喜欢造谣的刘琰为自己的行为付出了惨痛的代价。
