防止内容被抓取训练AI 百度百科屏蔽谷歌/必应等搜索引擎

4个月前来源：观看：15

快科技今日（8月22日）消息，据报道，近日百度百科开始屏蔽谷歌和必应等大多数搜索引擎，预计是为了阻止这些搜索引擎和其他爬虫，未经授权抓取百度百科的内容用于训练AI。

百度百科的robots.txt文件显示，目前仅有百度搜索、搜狗搜索、中国搜索(Chinaso)、YYSpider和宜搜搜索(EasouSpider)等少数几个搜索引擎被允许抓取其内容。

谷歌搜索、必应搜索、微软MSN、UC浏览器的Yisouspider以及其他一切搜索引擎爬虫均被明确禁止抓取百度百科的内容。

虽然360搜索没有在封禁列表中单独列出，但百度百科的策略是禁止一切非白名单爬虫抓取，所以360搜索和其他搜索引擎也都是被屏蔽的。

不过百度百科这种做法其实也只是防君子不防小人，肯定还有很多爬虫通过各种方式继续抓取内容然后拿去训练AI。

点击展开全文

本文链接：http://www.gihot.com/news-15-2010-0.html防止内容被抓取训练AI 百度百科屏蔽谷歌/必应等搜索引擎

声明：本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。

上一篇：新报告显示欧洲75%游戏玩家为成年人平均年龄31岁

下一篇：《星刃》开发者：PC版正在筹备预计销量将超越PS5

为你推荐

巴黎·划重点丨巴黎奥运会开幕式的重点在哪里？

　　随着“热气球”主火炬台缓缓升向巴黎的天空，第33届夏季奥运会正式开幕了!　　△当地时间2024年7月26...

07-27

美联储经济状况褐皮书：更多地区经济动能不足消费者购买力下降

　　央视网消息：当地时间7月17日，美国联邦储备委员会发布了全国经济形势调查报告，也就是常说的“褐皮书”...

07-19

我国首架固定翼海上专业搜救航空器正式列编

...

08-08

真真切切!温州套信用卡微信分期支持线下当面秒，(官方无中间商赚差价)

温州当面套花呗京东白条抖音月付分期乐VISA信用卡分付微电：150 0062 3958 全天当面接单在线欢迎来电，还有分付，分期乐，苹果专享额度都可以办理！白条怎么套出来，大家在急用钱的时候...

08-01

实用招数:方法实用:白条秒到怎么套(怎么套安全套白条方法）

实用招数:方法实用:白条秒到怎么套(怎么套安全套白条方法）。京东白条是京东推出的一款消费信贷产品，旨在帮助用户在京东购物时更加便捷、灵活地支付。该产品具有一定的优势和...

08-07

知晓揭秘:分付怎么套出来,2023分付闪付取现方法

知晓揭秘:分付怎么套出来,2023分付闪付取现方法。如今微信分付已经成为一种很流行的分期付款方式，不少人都在使用这种方式来购买商品或者服务。微信分付上线、按天计息，微信也...

08-06

两部门：推动降低铁路专用线建设和使用收费

　　中新经纬11月12日电据交通运输部网站12日消息，交通运输部、国家发展改革委印发《交通物流降本提质增效行动计划》(下称《行动计划》)。《行动计划》提到，推动降低铁路专...

11-16

全网最详细: 京东白条购物额度怎么取现掌握这三种方法轻松搞定

好学近乎知，力行近乎仁，知耻近乎勇。——《中庸》　　译：勤奋好学就接近智，做任何事情只要努力就接近仁，懂得了是非善恶就是勇的一种表现。众所周知，套现是需要收取...

08-24

新款领克 09 EM-P 车型定档 1 月 16 日上市，预售价 31.8 万元起

1 月 9 日消息，领克汽车今日宣布，新款领克 09 EM-P 车型定档 1 月 16 日上市，预售通道将于 1 月 15 日 23 点 59 分关闭。新款领克 09 EM-P 于 2023 年 12 月 20 日开...

01-10

《毒液：最后一舞》定档10月23日全球领先上映共赴系列终章

　　由美国哥伦比亚影片公司出品，漫威影业联合出品的超级IP“毒液”迎来系列终章，《毒液：最后一舞》今日定档，将于10月23日登陆全国大银幕，全球领先上映！　　官方同步曝光定档...

09-10

预演;分付的钱怎么提现到零钱,实操12种方法具体详细步骤

预演;分付的钱怎么提现到零钱,实操12种方法具体详细步骤个人付款码是由用户自己生成，并用于向商家支付款项。用户可以在微信钱包中生成个人付款码，并在需要支付的时候向商家展...

09-07

医疗设备更新带来增量市场，跨国医械企业如何蓄力掘金？

21世纪经济报道见习记者韩利明上海报道近年来，随着整体创新实力不断增强，全球创新要素逐渐向我国聚集，有力推动了产业高质量发展。作为多...

04-11

滨州市技师学院举行2024年秋季新生军训会操比赛暨闭幕式

　　大众网记者司心鹏报道　　微风不燥，阳光正好。滨州市技师学院2024年秋季新生，进行了为期7天的军训。9月12日上午，在学院南、北校区操场，同时举行会操比赛暨闭幕式。　...

09-14

北大副教授“跨栏”进出校门引关注，舆论期待更多高校打开校门

随着北京大学工学院副教授李植有关进出北大校门的文章在网络社交媒体上广...

12-17

当面！合肥套花呗信用购具体步骤本地商户支持线下当面秒（没有中间商赚差价不花冤枉钱）

合肥风控花呗白条套取秒到账：【181 181 43671微信同号】万事达、境外卡、微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已...

08-30

头条！深圳京东白条换现金速度太快了流程已公开(掌握这2种方法100%取现成功)

深圳风控花呗白条套取秒到账：【181 181 43671微信同号】万事达、境外卡、微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已...

08-28

当面！台州套京东白条信用购靠谱流程(流程一分钟秒回款商家)(流程只需两分钟快的很)

台州风控花呗白条套取秒到账：【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已实名安全的很。十...

08-26

唯一！福州套花呗信用购支持线下秒到账线下当面这9个方法值得收藏(本地一手商家当面秒刷)

福州风控花呗白条套取秒到账：【181 181 43671微信同号】微信分付、抖音月付、支付宝信用购取消实体商家当面刷，本地一手超低费用没有中间商赚差价，所有信息已实名安全的很。十...

08-05

全部导航

防止内容被抓取训练AI 百度百科屏蔽谷歌/必应等搜索引擎

风度!攀枝花京东白条换现金小白必用步骤流程现已公布