对那些前来投奔的中央军们，唐寅以礼相待，并没有动，但对各地充军的百姓，他则一律吸纳到天渊军内，并入郡的直属兵团中，原来天渊郡的直属兵团只有三个，现在一下子扩充到十三个。
唐寅把前头投军的百姓都收纳到他的麾下，自然引起梁兴、舞虞和子阳浩淳的不满，纷纷来找他质问，向他要人，唐寅则以他们三家的兵团还未稳定下来为借口，拒不分给三家一兵一卒。
这时，三家人已对唐寅生出不满之意。
天渊郡的兵力从二十万一下子增加到四十万，不仅财政上支撑不起，连粮草都成问题。
这时候唐寅想起了关南郡的郡首赵辉。
天渊郡养不起四十万的大军，不过若是加上关南郡可就差不多了。他派人给赵辉送去一封书信，请赵辉增援天渊郡军资粮饷，为讨伐逆贼钟天出一份力。信中的内容很客气，但里面不止一次提到天渊军已扩充到四十万的字样，这就是在暗中威胁赵辉，若不给物资不给钱，四十万的天渊军随时都会攻入他的关南郡。
赵辉那么机灵哪能看不出唐寅的言外之意，他没敢怠慢，急忙给唐寅写了回信，满口答应会全力资助天渊郡。