ICP申请被多次退回确实可能会加大后续申请的难度。这主要是因为通信管理部门对于ICP许可证的办理越来越严格，对于多次申请不通过的公司会形成一定的负面印象。当公司的ICP申请被多次退回时，通信管理部门在后续的每次提交中都会更加严谨地审核，可能会对公司的网站内容、企业法人进行约谈，甚至到企业现场进行核实，包括办公地址、人员以及业务操作过程等。

这样的审核流程可能会消耗大量的时间，粗略估计中间花费的时间可能要大半年。此外，多次申请被退回也可能给公司的业务运营带来一定的不便和影响。

因此，为了避免ICP申请被多次退回，建议公司在申请前充分了解并遵守相关的申请要求和流程，做好充分的准备和规划。同时，也可以考虑寻求咨询或代ban服务，以提高申请的成功率。

请注意，具体的申请难度和影响因素可能因地区、行业以及具体政策而有所不同。因此，在申请ICP许可证时，建议咨询当地的通信管理部门或相关机构，以获取更准确和具体的指导。