流民帥及其手裡的兵是一股大勢力，但是在汝南各豪族的眼裡，這也是一塊巨大的蛋糕，雖然難以吞咽，但是一旦咽下去一塊，自己豈不是可以一.夜而肥，甚至一躍壓制郡內其他豪族在本地當土皇帝也不是不可能啊。
於是，從六月初第一群流民帥開始進入汝南地界並屯駐於各大田莊之外和汝南北部各大豪族們對峙開始，各大豪族們各出奇招。
有的偷偷給流民帥送金送銀，許以重禮，試圖用禮物勸降流民帥；
有人搞詐騙，白天上門說決定全族投靠流民帥，結果半夜派大量部曲衝進流民帥的大營；
也有人派人先投靠流民帥，再在人家大營搞離間，最後直接帶跑一部分流民；
還有人趁機向流民帥送消息：自己的好夥伴某某不日就將偷襲你們的大營了，我特地送信給你，你好好防備，下次有事，我還透露給你，咱們都是好朋友，只要以後你支持我在汝南占某某的田地就行。
當然，別看豪族們都在搞事，流民帥們也不是吃乾飯的。
雖然流民帥們和太守陳光約定了大部隊不會主動攻打，可是再厲害的統領，也總會有不服自己管的手下嘛，素質不好的流民自己跑出去把你搶了，流民帥們可不會管的。
當然，要是手下一去不回了，流民帥們也沒有辦法。
流民帥們和豪族們你來我往，各自都在暗中積蓄力量。
而作為在汝南郡最有名望的兩大豪族之一，當郡中其他豪族皆主動大肆吞併流民，充做部曲奴隸增加自己實力時，霍家卻出奇地在這場盛事中銷聲匿跡，老老實實地龜縮在南部，不和其他豪族搶流民，更不派人和流民帥接觸。
當太守的人派人南來和霍家人交流，要求霍家作為汝南郡大族之一也必須出一部分糧食時，霍家利落地拿了糧食出來，但是除了應官方的召喚交了這批防止流民帥衝擊各大莊園的「保護費」，從五月到八月之間，霍家再無其對外的舉措。
考慮到霍宴那對鬥爭避之不及的性格，汝南其他豪族想了想，覺得這也不是他做不出來的事，甚至應該說，這才是霍宴會做的事嘛。
汝南諸豪族開個小宴私底下將霍宴笑話了一番，又各自專心投入到抓流民的活動中去了。
等到八月，最大的一批流民開始進入汝南，汝南中北部豪族們吞併零散流民的速度比不上進入汝南郡的流民團體數，不少小規模流民團體都越過了中北部豪族們聯手設下的流民捕捉網絡，進入霍家的勢力範圍。
霍家開始被動對付這些流民團體。