此前一直坐观的霍山贼也开始率聚落归附。
初来光州，赵怀安说要靠刀把子和官袍子剿抚，如果说之前对光山贼是用刀把子，而对于赵怀安自己的乡党，霍山贼，就是用官袍子。
这些归附的霍山棚帅们看中的就是赵怀安许诺的世袭罔替。因为像他们这些人即便是棚帅了，实际上也不能把位置留给子孙。
山中是以力称强的，谁能带领聚落活，谁就有威望，谁就能做棚帅。
可人皆爱子孙，以前没有赵怀安的这项都户制也就罢了，可现在有了，这些人就心动了。
作为掌握这片区域最大的暴力组织，赵怀安有足够的威信保障这套制度。
甚至在这些山棚们看来，纵然没有朝廷的光州刺史的头衔，赵怀安也足以成为八百里大别山的主人。
所以一旦赵怀安能保障这些棚帅的利益，这些人纷纷投靠。
赵怀安也以此为契机，让丁会等霍山党返回霍山，宣谕保义军的政策，并呼吁相熟的聚落来归。
而这其中，赵怀安的身份和威名起到了决定性的作用。
本身就是霍山人，这些自诩为赵怀安乡党的山棚，投靠起来没有任何的犹豫，他们这些人本就比光山、舒州的山棚更松散。
所以自军中的霍山党入山后，几乎每日就有聚落来归。
而开启归附浪潮的正是一个坐落在举水以西的小聚落。
该聚落的棚帅叫贾世臣，其人带着霍山山棚六十户来归，并向赵怀安献上牛皮十张、鹿茸十对，狐皮二十张，骏马两匹，健骡两头，猎犬四头。
作为最先归附的霍山贼，赵怀安对他赏赐很重，他没有赏赐什么山里人没感知的金银，而是直接赏赐了大批物资。
在听到贾世臣率山棚六十户来归时，赵怀安不仅让衙军去迎接，还亲自出关迎接。
人来后，就是一顿大宴，然后赵怀安就开始大赏。
先是直接拨了雄、牝壮牛十头，然后赐缎面的袍子、长衫袍子、皂靴、雕花腰带、另有四季常服布衫、裤和褥、衾等六十套，
后面赵怀安第二天吃完酒，还亲自送了大批生活用品，如锅、席、碗、碟、筷子、水桶这些，全都充足地补给他们。