裴炎被处死的时候，十七岁的裴伷先被免去了太仆寺丞贬谪岭外。这要是别人，留得青山在不怕没柴烧，必定先忍气吞声走了，可裴伷先偏不。年少气盛的他不但请见女皇，而且在女皇接见的时候痛斥她作为李家的媳妇应该任命贤德大臣，以东宫太子为帝，否则就会重蹈汉时吕氏家族的覆辙。可想而知，女皇听到这种话勃然大怒，召集群臣于朝堂对裴伷先处以杖刑百。就是这样几乎能打死人的惊人杖刑，此君居然忍受了下来，之后长隶攘州娶妻卢氏，这才有了裴愿。

  妻子死后，他又带着儿子偷偷潜回原，结果事发之后再次被杖刑百，流放北庭都护府，而这次流放反而成就了他。到北庭头五年，他经商累积财富数千万钱，门下更有食客数千。紧跟着他又被庭州附近拥有军民过万帐的可汗看，可汗不但把唯的女儿嫁给他，还额外附赠牛羊黄金数。他却点都不吝惜钱财，都馈赠给门下食客，在从洛阳到庭州的路上都布下了眼线。

  因此，在女皇派流人使大诛流人的时候，预先得到消息的裴伷先带着自己的新任妻子准备妥当之后开始逃亡。虽说很不幸地遇到了各种事件被抓了回来，但因为他的事情比较严重需要上报处置，前来处死流人的流人使没看到名字，杀了几百个人却唯独漏了他。之后女皇把滥杀事件都推在了臣下身上，此君也就得到了赦免。