不过，俩人的感情最终在2006年走到了尽头，分手原因据说是聚少离多，因为长期跟随成龙在外拍戏，卢惠光与黎淑贤相处的时间很少，渐渐地便产生了间隙。离婚后，卢惠光更是费尽心思获得两个儿子的抚养权。
话说，卢惠光颇有女人缘，才离婚不到半年，就有了新女友：上海姑娘小琦，这次这位小女友不仅比卢惠光小24岁，而且还对卢惠光与前妻所生的两个儿子视如己出，一家四口也是其乐融融。
英雄迟暮、美人白头，随着年龄的增长，卢惠光的身手也开始变得大不如前，更悲剧的是，老板成龙直接将卢惠光扫地出门，当时卢惠光的月薪有2万5千港币，按法律规定，成龙必须赔他50万港币做补偿，结果成龙只付了10万港币，因为卢惠光与成龙平时皆以兄弟相称，工作也没有什么合同什么的，也没有一纸合约，所以才造成现在这种尴尬的局面。
当时成龙身家上亿，却只给老员工10港币遣散费，不得不让卢惠光心寒，为此，他还特地在媒体上手撕起对方。
为了维持生计、补贴家用，卢惠光不得不出去打零工。
很多观众会问，有这么落魄吗？以前拍戏没有积蓄吗？当时的卢惠光是按月领工资的，一个月就几万港币，有2个儿子、女友要照顾，不像现在的小鲜肉，随便找一个片酬就上百上千万，吓都吓死了，所以缺钱也是正常的。
不过幸好，小女友并没有嫌弃卢惠光，在他最迷茫无助的时候，默默地在背后支持着卢惠光，助他度过难关！
