1941年后，他一直在刘庙自称为聊城抗日政府县长，而又依附于齐匪三支队，在刘庙据点保护下，搞“曲线救国”。
这个刘佩芝可谓作恶多端，过去害了范筑先，现在又继续与人民为敌，专和共产党作对。柴龙把逮捕刘佩芝的计划上报了武训县委书记张大千，张大千要求务必抓活的，送交县公安局处理。
为了完成这一任务，柴龙叫伪四区的地下党员暗暗派人跟踪刘佩芝的活动。
有一天中午，得知刘佩芝正在李庄集东头路北小酒铺里与人喝酒。柴龙估计刘佩芝不可能晚上回据点据住，很可能去有关系的邓王庄住宿，而且又是他单人活动，正好可以设伏。柴龙立刻调出了聊城古庙据点的李少卿，还有另外一个同志，设伏抓捕刘佩芝。
当太阳快落山的时候，刘佩芝酒足饭饱，提着菜篮子向邓王庄方向走去。
越走人越少，刘佩芝的酒劲也上来了，东倒西歪的，恨不能要摔倒，两边的青纱帐在不停地晃动，就像是一个个的人影似的。青纱帐里浮现出一个个的活人，他们伸着手在向自己索命，刘佩芝定睛一看，这些人都是他杀掉的一个个的xxx。
刘佩芝吓了一跳，不得不唱起了小曲儿壮胆：“小妹妹送情郎啊送到了大门南，顺腰中掏出来一呀么一串钱，这串钱留给情郎路上用啊，情郎哥你渴了饿了，好用它打打尖啊！小妹妹送情郎送到了大门西，一抬头碰见了一个卖梨的，有心给情郎买个梨吃，想起了昨晚的事儿吃不得凉东西……”
到了一条荒僻的小路时，李少卿突然从一棵树后走了出来，拿枪顶住了刘佩芝。“刘县长，近来可好啊？”
刘佩芝一愣，酒吓醒了一半儿，随即也掏出枪来，问：“你是什么人？”
李少卿嘿嘿一笑说：“没外人，聊城军统局的，我们站长想请刘县长到他那里说几句话。”
这时候，柴龙和另一个同志也从后面拿着枪走了过来。刘佩芝害怕了，问：“你们真是军统局的人？”
柴龙回答道：“是赵站长让我们来的，想请刘县长去一趟，商量一点儿事情。”
刘佩芝一看，自己被三个人拿枪逼着，知道也没有什么退路，只好束手被擒。柴龙上去下了他的枪，并把他绑了起来，要押他走下小路时，刘佩芝更慌了，追问道：“你们真是军统局赵洪武的人？”
柴龙不理他，诈他说：“听说你私通柴龙，我们站长要你去问一问？”
刘佩芝急忙说：“我怎么能私通他？他是个小孩子，听说厉害得狠呢！要是叫他逮住，那才倒了八辈子血霉呢！”
柴龙心想，我和刘佩芝打了几年的交道，斗得死去活来，如今真正见了面，他却不认得我。真是怪事了！
柴龙、李少卿几个，把刘佩芝顺利地押解到了武训县公安局，交给了县委书记张大千。张大千高兴地说：“好哇，柴龙同志，你们捉到了鲁西北的大国特了。你们真是立了大功了！”
刘佩芝听说眼前抓他的小伙子，就是威名赫赫的柴龙，不禁惊奇地问：“你真是柴龙？”
柴龙笑着说：“不是管换！”
后悔得刘佩芝啊，真想自己扇自己两个耳光，但是手被缚着，就是想扇自己，也没有机会了。
1944年的12月，抗日战争进入了反攻阶段，日本鬼子和汉奸走狗们，惶惶不可终日。日伪为了收缩兵力，想把伪四区保安队收编为县保安中队，调离聊城古庙。时任古庙保安队小队长的李少卿，立刻把这个消息回报给了区委和武训县委。
韩行、王秀峨、张大千立刻研究了这个情况。韩行说：“原来的情况是，伪四区的保安中队有四个小队，其中，我们的党员控制着两个小队，所以说可以暂时不动它。可是现在，如果伪四区的保安队调入了城里，情况就不好说了。所以，现在必须拿下它。”
张大千说：“可是附近没有主力部队，只有武训县独立团的三个连，第三连又是梁水镇伪据点才起义的，不光战斗力差，而且枪支弹药也缺，我们根本就不具备攻坚的条件。”
韩行想了想说：“要想拿下古庙据点，必须里应外合，主要的还得指望内应。”
县委迅速把这个消息送到了古庙据点里，据点里的秘密党员和进步士兵都同意，只有阎学旺小队长不愿意。他说：“要我起义，我没有把握，我得听听我兄弟柴龙的意见。我们的这些力量，是柴龙发展起来的，他说办得就办得，他说办不得，我就不办！”
原来这个阎学旺，是柴龙在古庙当区队副的时候发展起来的秘密党员，一直受柴龙的垂直领导。他江湖思想比较严重，依靠柴龙也习惯了。
韩行叫柴龙做一做阎学旺的思想工作。两个人约定，在据点外的一个小茶馆里见面。两人见了面，当然是分外高兴，阎学旺对柴龙说：“兄弟呀，我这辈子就听你的。你叫我怎么干，我就怎么干，就听你一句话了？”
柴龙摇了摇头说：“你听我的，我听共产党的，你还得听共产党的。好大哥，我要你听从李少卿的指挥，带领你的部队起义！”
阎学旺欣然同意了柴龙同志的意见，对柴龙说：“好兄弟，我听从李少卿的指挥，我以后就听共产党的。”
柴龙嘱咐阎学旺，回去告诉李少卿，起义就在今晚，围墙上划火吸烟为号，外边也划火吸烟为答应，随即古庙打开围子门，外边带部队进据点督促部队