网站抓爬虫转发你的广告:哪些办法真正管用,哪些只是看起来管用

被换了名字重新冒出来的广告
广告主写信来,语气困惑,有时还带着怒气:自己的照片和电话号码竟然出现在一个他们从未注册过的网站上,套用的是别家的页面样式和品牌标识。客服也会接到用户来电,询问为什么“你们另一个网站”的收费标准不一样。在搜索引擎里查自己某个城市页面,结果却跳出一份复制品,有时排名甚至还高于原版。这一切的起点都不是什么安全漏洞,而是一段脚本,用和浏览器一样的方式读取你公开的页面,只不过规模远超任何真人访客,把能抓到的内容统统存了下来。
分类信息网站特别容易成为这类抓取的目标,原因在于内容本身就是结构化的。每条广告都按固定格式排列:城市、分类、价格、照片、电话号码,再加一小段文字说明。抓取脚本不需要“看懂”内容,只需要知道去哪里找,而按城市和分类组织起来的网站,恰好把这套结构白白奉上。方便用户浏览的同一套编排方式,也同样方便脚本批量搬运。
对方的动机很少是出于欣赏。有些经营复制网站的人,看中的是你的页面已经积累的流量,他们用几乎一模一样的页面样式转发你的广告,好让搜索结果指向自己而不是你。还有人在建立一个客户数据库,把电话号码和照片转卖给与广告主、与你本人都毫无关系的第三方。更少一部分人干的事更接近诈骗:做一个看起来像真实广告的镜像页面,联系方式或付款渠道却完全导向别处,借用真实广告主的名字和照片,给这个本不该有可信度的页面镶上一层假的信誉。
不管动机是什么,伤害其实同时落在两个地方,而且需要两种不同的应对办法。一个是复制页面从原始页面那里抢走的搜索排名和流量。另一个,是广告主本人要承受的后果:他们的照片和号码出现在一个自己从未同意出现的网站上,而那个网站没有你平台上建立的任何审核或下架机制。如果只把这当成一个SEO层面的麻烦来处理,就忽略了问题的另一半,而往往正是这一半,会招来语气更激烈的投诉邮件。
那根已经拉不动的杠杆
许多经营者的第一反应,是把抓取行为当成一种“闯入”:抓取者碰了它本无权碰的计算机系统,这应该归反黑客法律来管。在美国,这部法律就是《计算机欺诈与滥用法》(CFAA)。有大约十年的时间,2013年针对聚合平台3Taps的一项判决似乎支持了这种直觉。当时一家联邦法院认定,Craigslist向3Taps发出的停止侵权函加上随后的IP封锁,已经把原本公开的访问变成了“未经授权”的访问,从而为CFAA诉求打开了大门。
这种解读并没有在全国范围内站稳。2021年,美国最高法院在Van Buren v. United States一案中,把CFAA的适用范围收窄为“闸门是开是关”的测试:一个人对系统某个区域是否有访问权限,答案只有有或没有,至于进去之后做了什么,并不改变他是否“越权”这一事实。第二年,负责加州及美国科技行业大半地区的第九巡回法院,把这套逻辑用到了抓取案件上,在hiQ Labs v. LinkedIn一案中第二次裁定:从不需要登录的页面上抓取数据,并不构成CFAA意义上的“未经授权”访问,即便被抓取的网站已经发函要求对方停止也是如此。这项裁决是在初步阶段作出的,案件本身几个月后以和解收场,并未经过完整审理,但它在CFAA问题上的论理并未被推翻,至今仍是该巡回区法院遵循的裁判标准。
真正还站得住的界线,是公开页面与需要登录才能看到的内容之间的那条线。第九巡回法院另一个案件,Facebook v. Power Ventures,认定停止侵权函加上IP封锁,确实让继续抓取的一方承担了CFAA责任,但这是因为那些数据藏在密码之后,不是任何人不开账号就能打开的页面。一条本来就是为了被搜索引擎收录而存在的分类广告,站在这条线公开的一侧;广告主的私人后台则不然。闯入第二类页面的抓取者,和复制第一类页面的抓取者,所处的法律境地完全不同。
这一点对成人分类信息网站有直接影响,因为抓取者想要的广告,几乎永远是面向公众的那些页面。这就排除了经营者最常想到的那条捷径,至少对任何访客都能看到的页面是这样。但这不意味着无计可施,只是说真正可行的办法,在接下来两个部分里,而不是一份黑客指控状。
在美国真正管用的办法:版权才是主力
关于抓取纠纷在法庭上到底值多少钱,美国最清晰的先例来自2017年的两起Craigslist案件,而真正重要的细节,不是那个引人注目的总数字,是数字背后的构成。Craigslist在房产信息网站RadPad破产、停止应诉之后,拿到了一份6050万美元的缺席判决:其中约2040万美元是版权侵权赔偿,4000万美元来自违反CAN-SPAM法案,源于RadPad向被抓取的用户群发了约40万封未经同意的邮件,而只有16万美元,总额中的一小块,是因为违反了RadPad在使用该网站时已经同意的服务条款而判定的违约赔偿。同一年另一起针对二手车信息网站Instamotor的案件,以3100万美元的约定判决金额和解,同时法院还下令销毁所有抓取到的数据,并永久停止抓取行为。
从这个构成能看出两点。第一,这两起案件实际上都是在对方已经经营不下去、放弃应诉的情况下打赢的,并不能证明一家正常运转的企业,能从一个仍在正常经营、打算死磕到底的竞争对手那里拿到类似金额;这些数字应该被理解为法院在纸面上会判多少,而不是一家小型分类信息网站能够真正指望收回的赔偿方案。第二点更有实际参考价值:在整份判决里真正起作用的,是广告照片和文字的版权,不是服务条款违约的主张,也不是任何关于未经授权访问计算机系统的理论。
这就让版权成为真正值得使用的那根杠杆。如果你平台的服务条款规定,广告主发布的内容的相关权利会转让或授权给平台方,而不是完全保留在广告主一人手中,你就可以向抓取者所用的主机服务商发出下架通知,要求撤下被复制的页面,同时向收录了这些页面的搜索引擎单独提交移除请求,而完全不需要证明抓取者当初是怎么拿到这些材料的。主机服务商如果无视一份程序合规的通知,就有可能失去自己对侵权内容承担“避风港”责任豁免的资格,这通常足以让即便毫无合作意愿的主机也作出回应。这其实是虚假版权投诉把你自己的广告挤出搜索结果的另一面:那种情况下你是在应对别人发来的通知,这里你是发出通知的一方,但走的是同一套流程,只是方向相反。
基于服务条款提出违约主张,值得作为备用手段留着,主要原因是一份列明具体页面的书面通知,能形成一条文件记录,为日后的任何行动提供支撑,但不要指望它能单独撑起一整个案子。在一份主要靠版权撑起来的数百万美元判决里,违约主张只值几十万美元,这大致就反映了它单独能有多大分量。
欧洲的另一条路径,以及藏在底下的隐私问题
在美国之外,欧洲有几个司法辖区保护着版权本身管不到的另一个对象:数据库本身。根据欧盟法律,一个系统性编制、代表了可观投入的数据库,也就是一个拥有成千上万条结构化广告的分类信息网站显然符合这个条件,可以享有独立于版权之外的自身保护,不需要去论证某一条具体广告是否有足够的创作性来单独获得版权。抓取者只要提取并再利用了该数据库中相当大的一部分,就可能要承担责任,不管它复制的某一页单独拿出来是否能通过版权测试。
法国一起房产信息案件,展示了这套理论在实际操作中的样子,行业不同,但用的是分类信息网站同样可以借用的法律依据。聚合类应用Jinka在2025年12月被判向SeLoger网站支付6万欧元,原因是自动化提取了该网站的房源信息;2026年4月又被判向leboncoin支付20万欧元,原因是未经授权再利用了对方的房源信息,法院在两起案件中都把涉事平台的房源信息认定为受保护的数据库。2026年7月的第三份判决更进一步,认定Jinka自己的广告语,宣称一个应用就能覆盖所有房源网站,属于误导性商业宣传。这几起案件都不需要证明抓取者“闯入”了什么,争议焦点在于被拿走、被再利用的是什么内容,以及抓取者自己的宣传说了什么,而不在于数据是怎么被获取的。
如果只把这当成一个排名问题来看,就会漏掉真正重要的一面:被复制的广告,对广告中那个真实的人会造成什么后果。广告主选择了你的网站,是在你的审核规则、你的验证流程之下,并且知道如果改变心意可以走你的下架渠道。这些在一个他们从未同意出现的镜像网站上统统不存在,发现自己的照片躺在一个陌生网站上,甚至可能被安在一个冒用其姓名的诈骗预约页面旁边,这种伤害和搜索流量的下滑完全不是一个量级。照片未经本人同意就出现在网络上时所适用的那份责任,不会因为发布者是一段抓取脚本,而不是前任或陌生人,就不再适用;无论是哪种情况,广告主都同样没有同意这种曝光方式。
该怎么做,按顺序来
第一步,在真正需要举证之前,先让“被复制”这件事变得可以证明。在每条广告的联系方式路径里嵌入一个独一无二的追踪编号,或者在原本相似的广告措辞里留一点细微差异,都能把“这看起来很像”变成主机服务商或法院几分钟内就能核实的对比证据。
第二步,先分清轻重缓急,再决定要不要追。一个没有流量、也没人投诉的镜像网站,不值得花员工的时间去处理;但一个排名超过你自己页面、或者已经有广告主打电话来问的镜像网站,就值得。先判断某个举报属于哪一类,再决定怎么处理。
对值得出手的那些,优先用版权这一招。先确认自己的服务条款,确实授予了平台就广告主发布内容发出下架通知的资格,然后把通知发给主机服务商,而不只是发给抓取网站上那个看得见的联系地址,再向收录了复制页面的搜索引擎单独提交移除请求。这比打任何官司都来得快,花费也更低。
把停止侵权函和技术性封堵手段,比如基本的访问频率限制或IP段封锁,当作一个有记录的第二步,而不是整套方案。它现在已经不能单独打赢一场黑客指控,但它留下的记录,能为后续的任何行动提供支撑,也能拖慢那些无视下架通知的抓取者。
最后,一旦发现广告主的内容被镜像到别处,尽快告诉他们,最好是在他们自己发现之前。主动提出帮他们处理下架,记录下你发现了什么、采取了什么行动,并把这份记录并入你平台已有的验证和删除请求存档体系。一个你无法彻底拦住的抓取者,仍然是一个你可以证明自己认真对待过的问题,而这种“认真对待”的态度,才是广告主,以及最终的监管机构,真正会记住的东西。

