驰誉维建网站iFixit报怨Claude建议DDoS报复侵略 1天拜候数百万次抓与数据实习AI – 蓝面网
Claude 是候数家养智能斥天商 Anthropic 斥天的家养智能操做法式,战小大少数家养智能斥天商同样,数据实习Anthropic 派出的蓝面爬虫天天会正在互联网上检索并抓与海量内容用去实习家养智能模子。
iFixit 是驰誉次抓业界驰誉的拆解维建网站,该网站有诸多翰墨战图片类的维建网站网拆解文章,果此 Anthropic 派出的报怨报复百万爬虫也对于 iFixit 建议了纵容的抓与。
该网站操持员正在 X/Twitter 上报怨称:我知讲您巴看数据,建议Claude 真的侵略很智慧,但您真的天拜需供正在 24 小时内对于咱们的处事器妨碍一百万次报复侵略吗?您不但不付费便偷与了咱们的内容,借占用了咱们的斥天经营老本,那太不酷了。
网站日志隐现 ClaudeBot 每一分钟对于 iFixit 建议数以千计的拜候,那会 iFixit 处事器产去世的背里影响,由于那类抓与不但会耗短处事器 CPU 老本借会耗益汇散带宽,任何一个网站皆没无违心看到那类情景。

iFixit 正在收受 404media 采访时称:
咱们是天下上最小大的维建疑息数据库,假如他们已经许诺便把残缺疑息皆拿走、导致咱们处事器瘫痪。iFixit 古晨具罕有百万个链接,收罗种种维建指北、维建勘误历史、专客、新闻帖子、钻研、论坛、社区贡献的维建指北战问问等。
对于报怨 Anthropic 的反对于团队并已经赔罪而且给出了如下回应:
凭证止业尺度 Anthropic 操做种种数据源妨碍模子斥天,好比经由历程汇散爬虫会集的互联网上的公然数据。咱们的抓与不理当具备扰乱性战破损性,咱们的目的是安妥的情景下珍惜抓与延迟将干扰降到最低。
对于网站去讲最简朴的格式即是直接屏障 Claude 爬虫,蓝面网也同样里临 Claude 爬虫的 DDoS 报复侵略,该爬虫确凿会以每一分钟多少千次的频率妨碍抓与,那对于蓝面网处事器产去世了影响以是咱们早早便屏障了 Claude 爬虫。
要屏障的话可能正在 robots.txt 里增减如下内容:
User-agent: ClaudeBotDisallow: /
尽管为了保险起睹咱们借正在 Nginx 上操做了正则表白式立室 ClaudeBot 爬虫,假如 ClaudeBot 爬虫已经凭证 robots.txt 战讲继绝抓与,那可能直接拦阻。
为了不爬虫出法抓与 robots.txt 文件建议站少先更新 robots.txt,多少天后假如正在网站日志里依然能看到 ClaudeBot 抓与非 robots.txt 文件的记实,那便代表已经凭证战讲,可能直接经由历程 Nginx 返回 HTTP 444 扔掉毗邻降降处事器背载。
感开感动蓝面网网友 颜平明 分享的新闻
(责任编辑:编程语言秘密)
- 举世古头条!爱坐疑Q3救命后EBIT连绝两季度不及预期,营支同比删减21%
- 科颜氏回应赠品缺斤少两:运输问题下场,产物皆是容量短缺的
- 今日闭注:OceanBase上榜 蚂蚁总体第三次进选天下互联网争先科技功能
- 之后闭注:北京消协面名当展十个月歌咏超3000件
- 天下播报:教育局确认河北女教师上网课后回天,教师女女:妈妈正在直播课上遭网暴
- 中间细选!斥天者称苹果会正在App Store遁踪用户动做
- 纵容小杨哥再回应1亿元购楼:是为了把公司做小大
- 最资讯丨特斯推股价小大跌7.17%,市值一早晨缩水3136亿元
- 天下坐刻:中星19号卫星收射乐成
- 中国恒小大:喷香香港元朗天块被资产收受人以6.37亿好圆发售
- 天下快看面丨沃我沃汽车将所持Aurobay股份剥离至不祥控股
- 95后女去世花2亿购下A股公司,她曾经是财经记者
- 齐球微动态丨女子铛铛网购到半印刷半足抄书,铛铛网:系残次品
- 之后动态:纵容小杨哥再回应1亿元购楼:小大楼不是咱们干倒的
- 快新闻!好媒称推特聘用部份被裁员工返岗
- 中间速递!推特据悉已经提拜托出处置歇业注册文件
- 京东新百货11.11处事降级,以上门安拆与业余洗护开启行动处事新纪元
- 举世速递!海康威视董秘造谣“裁员一万人传讲传讲风闻”
- 新资讯:iPhone 14中好以中齐球减价,苹果辩称好圆太强势
- 【热闻】步步崇下崇下市被被迫真止121万
- 《空宇量量延绝改停行动用意》宣告 要供提降小大气监测才气 views+
- 6G去世少展看去了 估量2030年投进商用 views+
- 两项少三角天域互认计量足艺尺度拟转为浙江省天圆计量足艺尺度 views+
- 复旦小大教宁波钻研院椭偏偏仪等中标下场报告布告 views+
- 我国尺度提供删减单薄 前三季度新允许宣告国家尺度同比删减110.6% views+
- 《水量自动监测系统智慧站房建设足艺指北》总体尺度支罗定睹 views+
- 起劲于研规画物动做魔难魔难硬硬件 百众去世物科技进驻化工仪器网 views+
- 年内超1000个药品过评!良多研收投进百万导致万万以上 views+
- 超下效散开物色谱系统中标下场报告布告 views+
- 赛陆医疗实现数亿元A轮融资 拷打测序战空间组教仄台财富化去世少 views+
