苹果AI内容抓取机器人被屏蔽
苹果AI内容抓取机器人被屏蔽
8月30日，《连线》杂志发表了一篇博客文章，揭示了一个有趣的现象：不少主流媒体开始拒绝苹果的数据抓取工具Applebot的访问。Applebot初次进入公众视野是在2014年11月，随后苹果在2015年5月正式公布了这一技术。作为Applebot的升级版，Applebot-Extended在过去十年间持续抓取网页内容，旨在提升Siri和Spotlight搜索等功能的表现。
近期的研究显示，多数主流出版机构通过robots.txt文件来限制苹果的抓取行为。据统计，大约有6%到7%的高流量网站已阻止了Applebot-Extended的访问。另一项由Ben Welsh进行的研究则指出，在他考察的网站样本中，有高达25%的网站对Applebot-Extended实施了屏蔽措施。此外，研究还发现，OpenAI的爬虫在新闻网站中的遭遇更为严峻，被53%的站点拦截，而谷歌的Google-Extended爬虫也被43%的网站拒绝。
《连线》分析认为，尽管网站或许并不介意苹果的智能搜索触及它们的内容，但Applebot及其增强版之所以被较低比例的网站阻挡，主要是因为这些机器人的知名度相对较低，尚未引起广泛的企业关注。
本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.rllx.cn/idNQ/113098.gov.cn
如若内容造成侵权/违法违规/事实不符，请联系一条长河网进行投诉反馈邮箱:809451989@qq.com，一经查实，立即删除！相关文章
跟着悟空打卡青城山 探秘东方美学仙境
跟着悟空打卡青城山近期，国产游戏《黑神话：悟空》凭借其源自中国古典四大名著之一《西游记》的丰富文化底蕴，融合名著魅力、古建筑风情、3A级制作标准及国风元素，吸引了全球目光，成为热议焦点。随之，86版《西游记》这部经典电视剧再度引发热潮，其取景地青城山也随之人气…
博主回应网友质疑忘切小号并道歉
博主回应网友质疑忘切小号并道歉8月27日，微博博主“小蒜苗长”公布了一起与小米公司之间的名誉侵权诉讼一审判决结果。根据判决，博主败诉，被要求公开致歉并支付56595元作为赔偿。博主对此判决表达了接受的态度。在这场名誉侵权案中，博主提到了两个关键点： 1. 针对“名誉侵…
青岛逆行女司机至今未道歉赔偿 公众呼吁严惩不贷
青岛逆行女司机至今未道歉赔偿在青岛发生了一起非同寻常的交通事故处理事件。一名女司机在驾驶时追尾前车后，非但没有遵循正常程序处理，反而情绪激动地对另一车道的车主发起攻击，导致对方受伤。这一系列行为更加惊人，因为她当时正处于逆行状态。整个事件被两段视频记录并上…
河南博物院文创团队平均25岁 新国潮IP如何炼成
河南博物院文创团队平均25岁这个夏天，博物馆游和研学旅行异常火热，同时也带动了各式各样的文化创意产品风靡一时。河南博物院的文创产品尤其在网络上引发了广泛关注，他们创新性地将玉佩变身棒棒糖，利用3D打印技术重现了镇馆之宝妇好鸮尊，展示了深厚的文化底蕴与现代创意的…
美舰在台湾海峡遭遇侮辱性对待，武直10在中印边境“大胜”阿帕奇
老铁们，最近国际局势那叫一个波谲云诡，精彩程度堪比好莱坞大片！这不，美国又双叒叕对咱们出手了，而且是经济制裁和军事威慑两手抓，两手都要硬啊！这不，24号美媒爆出个大新闻，说拜登政府准备派沙利文访华，这前脚刚迈，后脚美国财政部就出来搞事情，直接把42家中国企业列…
美国军方将协助特勤局负责大选安保 强化安全防线
美国国防部发言人萨布丽娜辛格在29日的记者会上宣布，国防部长劳埃德奥斯汀已应国土安全部要求，决定在2024年总统选举期间，为特勤局提供援助，以保护正副总统候选人。具体措施虽未详述，但辛格透露，奥斯汀已指派北方司令部制定实施方案，该支持范围将覆盖整个竞选周期、选举…
篮网新赛季阵容：15人满员+2双向，崔永熙签双向合同加入
8月30日，有多个消息来源透露，崔永熙即将与篮网签订一份为期两年的双向合同。篮网在休赛期采取行动，通过与火箭的交易优化了选秀权配置，似乎正为新赛季的战略性调整做准备。目前篮网的阵容名单中，核心成员包括本-西蒙斯、克拉克斯顿、卡梅隆-约翰逊、芬尼-史密斯以及施罗德…
重庆南桥寺站有人偷拐孩子？假 实为乘客纠纷打架
8月29日，一段视频在网络流传，配文描述了在重庆轨道交通南桥寺站发生的一起儿童被偷拐案件，称嫌疑人已被控制。然而，经过查证，该信息被证实为不实传言。实际情况是，当日16时40分左右，在轨道环线南桥寺站，两名乘客因冲突而发生打斗。警方迅速介入，将涉事双方带往警务室进…
中泰高铁隧道塌方致3死 2人为中国籍 救援行动结束，悲剧原因查明
8月24日深夜，中泰高铁项目在泰国呵叻府巴冲县的一处隧道施工时突发塌方，导致3名工人失联。据泰国交通运输部于25日透露，这3名失联工人中有2人是中国公民。直到8月30日早上大约6点，搜救队伍找到了两名中国籍工人的遗体。随后，泰国官方宣布，所有3名被困工人，包括之前已发现…
中学辟谣160人住一间宿舍 实为80人午休宿舍
8月29日，网络上流传出一段视频，显示广东省某中学的一间宿舍似乎容纳了160名学生。次日，校方人员对此进行了澄清，解释道这实际上是为了解决走读学生午休问题而特别准备的宿舍，能够容纳80名学生共同休息。视频画面中，宿舍内布满了上下铺床位，环境略显拥挤，学生与家长的身…
在理！董路：国足不是因为输日韩 而是输不如自己的队进不了世界杯 提早集训惹争议
日本国家队最近揭晓了即将参加九月份世界杯预选赛18强赛的队员名单。对此，足球评论员宋承良在个人社交媒体上分享了他的看法。他提到，在日本队公布名单之时，中国国家队已集训多日，队员们正经历高强度的训练准备。按照国际惯例，大多数队伍会在周末联赛结束后集结，经过三四…
警方回应女子手绘网红墙屡遭破坏 恶意涂鸦引众怒
王女士和她的团队在柳泉南街南段的路边墙体上绘制了公益画作，旨在促进大同的文化旅游发展并美化城市环境。遗憾的是，仅仅数日内，这面墙两次在深夜遭人涂写辱骂之词，行为之粗鲁令人难以接受。王女士希望通过媒体传播，能有效阻止此类不文明现象的继续发生。王女士团队长期致…
张云松谈引进周琦和陈盈骏 双向奔赴的抉择
8月30日，北京男篮的副总经理张云松在一次媒体访谈中分享了球队在今夏成功招募周琦和陈盈骏的背后原因。张云松表示，这两位球员加盟首钢，首先基于双方共同的愿望和目标。他认为，球员们做出这样的抉择并非单一因素决定，而是一个综合考量的结果，涉及多方面因素。一方面，北京…
全红婵偷拍樊振东睡觉 见证调皮队宠日常
8月30日，17岁的全红婵度过了愉快的一天。她与同龄人进行了交流，并向乒乓球名将陈梦学习球技，还受到了马龙的贴心照顾，马龙甚至亲自为她购买饮料。全红婵展现了活泼的一面，悄悄拍摄了樊振东休息的照片，并以幽默的方式在社交平台分享，随后以搞怪的姿态向樊振东致歉，她的可…
马龙给全红婵买饮料 兄妹情深暖人心
中国奥运健儿访港代表团中，全红婵作为年龄最小的成员，受到了团队的宠爱，尤其是国乒队伍的热情接纳。她不仅与乒乓球名将马龙迅速建立起友谊，两人在公开场合频繁互动，甚至在香港商场里，全红婵被看到亲密地挽着马龙的胳膊，如同兄妹般一同选购饮料，画面温馨有爱。访问行程…
已有超20所高校计划停撤超100个专业 高等教育加速转型
近期，我国高等教育领域频繁进行专业优化调整，本科专业的增设与撤销已成为普遍现象。多所大学宣布了对本科专业进行调整的计划，例如四川大学拟撤销31个专业，兰州大学和湘潭大学分别拟撤销3个和7个专业。西北大学在8月23日宣布，计划撤销7个本科专业，包括汉语言等，并拟新增…
被逆行路虎女打伤的男司机是退伍军人 退役军人遭殃引众怒
近期，山东青岛崂山风景区发生的一起事故及其后续冲突事件在网络上引起了轩然大波，吸引了大量公众目光。8月28日下午1点左右，一名王姓女子驾驶白色路虎车在青山村观景台附件尝试逆向插入车队时，与前方大巴车发生了追尾。然而，面对这一过错，王某非但没有采取补救行动，反而…
阿维塔07实车正式发布 定位25-35万元 有望9月份上市 华为智驾加持
在成都车展的首日，阿维塔07亮相舞台，作为一款中型SUV，它预估的市场价格将在25万至35万元间，并计划于9月上市销售。这款新车采用家族化设计，特点显著，特别是车头两侧配备的双层LED日行灯，而大灯巧妙隐藏于前包围两边。车辆前端的进气格栅是区分纯电与增程车型的一个细节。…
57岁的日本传奇仍不想退役：我要踢到80岁，挑战年龄极限
三浦知良，这位保持着出场年龄世界纪录的57岁足球老将，最近接受了法国媒体的深度采访，分享了自己对职业生涯的看法与展望。他在奥利维伦斯度过了一个半赛季，期间俱乐部的医疗团队对他身体状态，尤其是膝盖和脚踝的健康程度表示惊叹。三浦知良表示，尽管年岁增长，他对足球的…
过去十年最惨状元富尔茨至今仍无人问津 上赛季43场场均8 3 3 等待重生的机会
在2024年的休赛期进程过半之际，2017年的NBA选秀状元马克尔富尔茨仍未与任何球队达成签约协议。上个赛季，他代表奥兰多魔术队参加了43场常规赛比赛，其中有18场作为首发球员登场。每场比赛平均上阵21.2分钟的时间里，富尔茨贡献了7.8分、3.2个篮板和2.8次助攻，另外还有1.0次抢…