朱有孝命令赵彦用牛刀杀鸡的力量，迅速秘密派兵围捕徐鸿儒，不得放一人漏，尤其是会首徐鸿儒，必须抓到送京城受审，凡是抓获的传头，必须将他们迁徙到辽东，将这些骨干分子送入辽东的军屯里，让他们进行劳动改造，并且全部是无期徒刑，直至死亡而不得归回原籍。
赵彦接到圣旨不敢有任何疏忽，接连不断秘密派出暗探和官军行动，彻底掌握了徐鸿儒召集教众骨干传教的规律。在天启二年四月初一的晚，五千多官兵在赵彦的率领下，悄悄的包围了徐家庄，随后官兵迅速冲进庄内，将没有任何准备的徐鸿儒和闻香教骨干一打尽，人赃俱获。接下来顺藤摸瓜，将整个山东的闻香教势力连根拔起，彻底摧毁了闻香教的根基。