中华网 china.com

新闻

苹果AI内容抓取机器人被屏蔽

小 大

用微信扫描二维码
分享至好友和朋友圈

关键词：
2024-08-30 22:24:23  IT之家

苹果AI内容抓取机器人被屏蔽

8月30日，《连线》杂志发表了一篇博客文章，揭示了一个有趣的现象：不少主流媒体开始拒绝苹果的数据抓取工具Applebot的访问。Applebot初次进入公众视野是在2014年11月，随后苹果在2015年5月正式公布了这一技术。作为Applebot的升级版，Applebot-Extended在过去十年间持续抓取网页内容，旨在提升Siri和Spotlight搜索等功能的表现。

苹果AI内容抓取机器人被屏蔽

近期的研究显示，多数主流出版机构通过robots.txt文件来限制苹果的抓取行为。据统计，大约有6%到7%的高流量网站已阻止了Applebot-Extended的访问。另一项由Ben Welsh进行的研究则指出，在他考察的网站样本中，有高达25%的网站对Applebot-Extended实施了屏蔽措施。此外，研究还发现，OpenAI的爬虫在新闻网站中的遭遇更为严峻，被53%的站点拦截，而谷歌的Google-Extended爬虫也被43%的网站拒绝。

《连线》分析认为，尽管网站或许并不介意苹果的智能搜索触及它们的内容，但Applebot及其增强版之所以被较低比例的网站阻挡，主要是因为这些机器人的知名度相对较低，尚未引起广泛的企业关注。

(责任编辑：卢其龙 CN070)
关闭

全国各地迎开学 紧锣密鼓备教材

全国各地迎开学2024-08-30 22:23:24

刀郎线上演唱会 逾2000万观众重温经典，情怀满溢云端

刀郎线上演唱会2024-08-30 22:21:33

BLG3-0击败WBG夺LPL夏季赛冠军：强势横扫夺冠

BLG3-0击败WBG 夺LPL夏季赛冠军2024-08-30 22:21:12

刀郎线上演唱会 逾2000万观众重温经典，情怀满溢云端

刀郎线上演唱会2024-08-30 22:21:33

中泰高铁隧道塌方致3死 2人为中国籍 救援行动结束，悲剧原因查明

中泰高铁隧道塌方致3死 2人为中国籍2024-08-30 21:30:50

全红婵偷拍樊振东睡觉 见证调皮队宠日常

全红婵偷拍樊振东睡觉2024-08-30 21:32:04

马龙给全红婵买饮料 兄妹情深暖人心

马龙给全红婵买饮料2024-08-30 21:32:12

我国首次发布仙宾礁珊瑚礁“体检”报告 菲方炮制言论毫无科学和事实依据

我国首次发布仙宾礁珊瑚礁“体检”报告 菲方炮制言论毫无科学和事实依据2024-08-30 10:31:52

史上最大海警船，不是中国的！网友：该出动辽渔16号、鲁渔17号了……

史上最大海警船，不是中国的！网友：该出动辽渔16号、鲁渔17号了……2024-08-30 09:31:28

“我们为什么要抓？他是英雄”，波兰不配合逮捕“北溪”案嫌犯激怒德国

“我们为什么要抓？他是英雄”，波兰不配合逮捕“北溪”案嫌犯激怒德国2024-08-30 09:45:14

澳大利亚，不小心暴露了一个大秘密

澳大利亚，不小心暴露了一个大秘密2024-08-30 09:24:58

重庆南桥寺站有人偷拐孩子？假 实为乘客纠纷打架

重庆南桥寺站有人偷拐孩子？假2024-08-30 21:30:39

美国军方将协助特勤局负责大选安保 强化安全防线

美国军方将协助特勤局负责大选安保2024-08-30 21:30:30

警方回应女子手绘网红墙屡遭破坏 恶意涂鸦引众怒

警方回应女子手绘网红墙屡遭破坏2024-08-30 21:31:45

张云松谈引进周琦和陈盈骏 双向奔赴的抉择

张云松谈引进周琦和陈盈骏2024-08-30 21:31:50

被逆行路虎女打伤的男司机是退伍军人 退役军人遭殃引众怒

被逆行路虎女打伤的男司机是退伍军人2024-08-30 21:29:33

中学辟谣160人住一间宿舍 实为80人午休宿舍

中学辟谣160人住一间宿舍2024-08-30 21:31:04

大放厥词！美国印太司令部“护航菲舰”有几分底气？

大放厥词！美国印太司令部“护航菲舰”有几分底气？2024-08-30 10:03:36

美陆战队MQ-9无人机中队部署嘉手纳，意图监视中俄朝

美陆战队MQ-9无人机中队部署嘉手纳，意图监视中俄朝2024-08-30 09:39:11

中国军机+金字塔！网友：硬核“游客照”！

中国军机+金字塔！网友：硬核“游客照”！2024-08-30 10:06:36

台军多枚导弹掉到海里！“烂就烂，理由还这么多”

台军多枚导弹掉到海里！“烂就烂，理由还这么多”2024-08-30 09:29:06

在理！董路：国足不是因为输日韩 而是输不如自己的队进不了世界杯 提早集训惹争议

在理！董路：国足不是因为输日韩 而是输不如自己的队进不了世界杯2024-08-30 21:31:19

篮网新赛季阵容：15人满员+2双向，崔永熙签双向合同加入

篮网新赛季阵容：15人满员+2双向2024-08-30 21:30:34

全国各地迎开学 紧锣密鼓备教材

全国各地迎开学2024-08-30 22:23:24

被指“威胁美国安全”，宁德时代驳斥：毫无根据！

被指“威胁美国安全”，宁德时代驳斥：毫无根据！2024-08-30 09:55:54

武契奇希望向法国购买“阵风”战机，称交易“迫在眉睫”

武契奇希望向法国购买“阵风”战机，称交易“迫在眉睫”2024-08-30 10:02:38

BLG3-0击败WBG夺LPL夏季赛冠军：强势横扫夺冠

BLG3-0击败WBG 夺LPL夏季赛冠军2024-08-30 22:21:12

车辆遭以军枪击，联合国世界粮食计划署暂停在加沙地带活动

车辆遭以军枪击，联合国世界粮食计划署暂停在加沙地带活动2024-08-30 09:41:54

莫迪在通话时是否向普京提出和平解决乌克兰问题的计划？克宫回应

莫迪在通话时是否向普京提出和平解决乌克兰问题的计划？克宫回应2024-08-29 10:23:53

乌军一架F-16战机坠毁，飞行员死亡

乌军一架F-16战机坠毁，飞行员死亡2024-08-30 09:43:51

英意日联合研制六代机，从概念模型到真机试飞还有多远？

英意日联合研制六代机，从概念模型到真机试飞还有多远？2024-08-30 10:34:23

美舰在台湾海峡遭遇侮辱性对待，武直10在中印边境“大胜”阿帕奇

台退将谈解放军武直-10驱离美舰2024-08-30 21:30:19

停火协议前途未卜！以军坦克开进加沙地带汗尤尼斯

停火协议前途未卜！以军坦克开进加沙地带汗尤尼斯2024-08-30 10:04:40

乌克兰要欧盟作出“大胆决定”！俄外长警告：考虑允许乌使用西方导弹打击俄腹地是在“玩火”

乌克兰要欧盟作出“大胆决定”！俄外长警告：考虑允许乌使用西方导弹打击俄腹地是在“玩火”2024-08-30 09:52:03

已有超20所高校计划停撤超100个专业 高等教育加速转型

已有超20所高校计划停撤超100个专业2024-08-30 21:32:37

相关新闻

主编邮箱
网上不良信息举报电话：010-56177181
关于中华网 | 广告服务 | 联系我们 | 招聘信息 | 版权声明 | 豁免条款 | 友情链接 | 中华网动态
版权所有 中华网