不幸的是，与朱执一样，成功拿下倭寇的胡宗宪也遭到了朝中内外的猜忌。百姓认为他收受汪直数十万两金银，为海寇说情。朝中官吏弹劾他放纵汪直登陆抢掠，就连俞大猷，也对胡宗宪的招抚方案极为反感。