百度百科屏蔽谷歌/必应等搜索引擎防止内容被抓取训练AI

3个月前来源：观看：32

近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。

百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。

谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。

百度百科屏蔽谷歌/必应等搜索引擎防止内容被抓取训练AI

虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。

不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。

点击展开全文

本文链接：http://www.gihot.com/news-15-2504-0.html百度百科屏蔽谷歌/必应等搜索引擎防止内容被抓取训练AI

声明：本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。

上一篇：西部数据或扩建泰国生产设施首次扩张HDD生产线

下一篇：华为：西方AI把中国的数据都送到国外我们接受不了

为你推荐

铁岭京东白条取现新手必用步骤（值得一试的四个方案现已公布）

近些年,分期消费成为互联网金融热点。各家平台推出多种分期消费产品,市场规模持续增长。从市场主体看,除了银行,越来越多互联网企业加入分期市场。比如京东白条就是其中一个...

07-26

【达沃斯声音】服务消费势头强劲麦肯锡：看好中国消费市场前景

　　中国日报网6月27日电（记者樊菲菲徐子茗欧阳诗嘉）近日，国家统计局发布的数据显示，5月份，社会消费品零...

06-28

2024“二月二”老龙头全国舞龙大会盛大启幕

二月二，龙抬头，请来关城走一走。3月9日，2024“二月二”老龙头全国舞龙大会在秦皇岛市山海关区老龙头景区盛大启幕。舞龙表演精彩亮相。长城网·冀云客户端记者武佩剑摄一进景...

03-10

粤港澳大湾区首个变速抽蓄工程进入机电安装阶段

近日，粤港澳大湾区首个变速抽水蓄能工程——肇庆浪江300兆瓦级大型抽水蓄能电站地下厂房开挖完毕。这标志着该工程全面进入机电安装阶段...

08-15

惊愕:重庆江北区套信用卡微信分期支持线下当面秒，本地用户推荐！

重庆江北区当面套VISA境外卡花呗白条分付【微电：150 0062 3958】全天在线欢迎打电话，当面办理安全靠谱！京东白条作为消费金融的主力军，具有连接用户、商户、场景的天然优势，是京...

08-06

总结四个办法: 京东白条额度最新提现方法六十秒教你三种提现方法

天行健，君子以自强不息。地势坤，君子以厚德载物。——《周易》　　译：天(即自然)的运动刚强劲健，相应于此，君子处世，应像天一样，自我力求进步，刚毅坚卓，发愤图强，永不停息；大...

08-06

全网最详细: 羊小咩享花卡额度怎么套出来快速变现

利于国者爱之，害于国者恶之。　　译：对于国家有利的事就要热心地去做，对国家有害的事就要憎恶它，远离它。人生天地间，忽如远行客。——《古诗十九首》我们只有献出...

08-03

经济大省挑大梁丨向新逐“链” 稳韧前行——湖北加快建成中部地区崛起重要战略支点观察

新华社武汉9月28日电　题：向新逐“链” 稳韧前行——湖北加快建成中部地区崛起重要战略支点观察新华社记者徐海波、王自宸今年上半年，湖北实现地区生产总值27346....

09-29

白条加油额度怎么套出现金四大攻略：全天取现商家：

现在网络鱼龙混杂，请认准靠谱八年商家，金牌小帮手——小创(137-1300-6106可v可来电)(全年365天不掉线) 【白条加油额度怎么套出来】【教你京东C店套白条】【京东信...

08-15

smart 精灵#3 25 周年星空纪念版车型今日上市，5.4 秒“破百”

1 月 19 日消息，为了庆祝smart品牌25周年，smart推出了一款特别的车型—— smart精灵#3 25周年星空纪念版。据了解，该车将于今天正式上市，售价暂未公布，预计略高于2023款s...

01-19

黄石贝丝为什么不能生育

近期，围绕电视剧《黄石》中贝丝无法生育的情节，引发了广泛讨论。观众的兴趣不仅仅局限于这一情节本身，还扩展到了剧情设计、演员表现及特效制作等多个层面。本...

09-15

张兰律师称大S向汪小菲索赔4亿元大S工作室发文回应：假

　　编辑李硕琳 ...

09-04

抖音月付额度可以全套出来吗？怎么把抖音月付提现出来

抖音月付是属于抖音钱包针对个人用户开放申请的一款纯线上的个人信用dai款产品;其实大家对于抖音钱包里面的放心借和抖音月付也不算陌生的，因为之前很多用户都有申请过放心借...

09-06

立春后的三种食物清热解毒去湿气

立春节气的到来证明春季的正式开始，也是二十四个节气中的第一个，如何从头开始呢。立春节气以后气温回升，但是会出现气候干燥的情况，要多补水，注意吃一些清热解毒的食物，这样可以有...

04-02

实体！太原京东白条加油额度怎么套出来(9个方法全是干货)(记住这两点不会风控)

太原风控花呗白条套取秒到账：【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已实名安全的很。十...

08-31

求一个套白条的店铺怎么借钱出来?（十年本地商家这6种方法取现秒到账）

8年专业老商家微：KXA665【8年专注更专业】【靠谱秒到】24小时在线接单分付24小时回收商家（小白看完也能自己轻松取现）最近,许多商家都开始使用分付24小时回收服务了。这种服务...

08-04

当面！天津套京东白条加油包额度提现小白必读步骤流程已公开(实体店真实消费安全的很)

天津风控花呗白条套取秒到账：【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已实名安全的很。十...

08-11

三分钟看完得物分期购物额度怎么提出现金三分钟就懂：

现在网络鱼龙混杂，请认准靠谱八年商家，金牌小帮手——小创(137-1300-6106可v可来电)(全年365天不掉线) 【得物佳物分期购可以提现吗】【得物的分期购额度怎么套出来...

08-02

全部导航

百度百科屏蔽谷歌/必应等搜索引擎防止内容被抓取训练AI

和平!汕头京东白条换现金新手必读教程流程现已公布

全部导航

百度百科屏蔽谷歌/必应等搜索引擎 防止内容被抓取训练AI

和平!汕头京东白条换现金新手必读教程流程现已公布

百度百科屏蔽谷歌/必应等搜索引擎防止内容被抓取训练AI