日UV超过一千，必然会出现的问题

几个域名，都是日活UV到一千多，就会出现各种无效搜索引擎蜘蛛、各种大模型公司（最恶心的是国内作坊）蜘蛛、各种下级网站挂源、各种本地APP把网站当做牛马小说源，谁都顶不住，分分钟卡出翔。
怎么解决？
一个一个来，搜索引擎的蜘蛛最简单，robots.txt 挂上，一般有节操的搜索引擎就不会破门而入，但是没有节操的以及不做搜索引擎但他也来爬的，就不行了