中文字幕欧美日韩|日韩性色一区二区三区|精品久久久久久久久久岛国|一区二区国产盗摄精品

    <td id="h1kkc"><tr id="h1kkc"></tr></td><noscript id="h1kkc"><tbody id="h1kkc"></tbody></noscript>
    <rp id="h1kkc"></rp>
    首頁(yè) > 業(yè)界 > 關(guān)鍵詞  > 百度百科最新資訊  > 正文

    防止內(nèi)容被抓取訓(xùn)練AI:百度百科屏蔽谷歌/必應(yīng)等搜索引擎

    2024-08-22 10:52 · 稿源: 快科技

    近日,據(jù)悉百度百科實(shí)施了屏蔽措施,針對(duì)谷歌和必應(yīng)等大多數(shù)搜索引擎及爬蟲(chóng)進(jìn)行了限制,旨在阻止這些外部搜索引擎未經(jīng)授權(quán)抓取百度百科內(nèi)容用于人工智能(AI)訓(xùn)練。

    根據(jù)百度百科的 robots.txt 文件,目前僅允許少數(shù)搜索引擎抓取其內(nèi)容,包括百度搜索、搜狗搜索、中國(guó)搜索(Chinaso)、YYSpider 和宜搜搜索(EasouSpider)。

    百度百科屏蔽搜索引擎

    谷歌搜索、必應(yīng)搜索、微軟 MSN、UC 瀏覽器的 Yisouspider 及其他所有搜索引擎爬蟲(chóng)均被明確禁止抓取百度百科內(nèi)容。

    雖然 360 搜索未在屏蔽列表中單獨(dú)列出,但百度百科的策略是禁止任何非白名單爬蟲(chóng)抓取,因此 360 搜索和其他搜索引擎也受到影響。

    值得注意的是,百度百科的屏蔽措施只能防范守法的爬蟲(chóng),而一些非法爬蟲(chóng)仍可能采用其他方式抓取內(nèi)容用于 AI 訓(xùn)練。

    舉報(bào)

    • 相關(guān)推薦
    • AI爬蟲(chóng)如狼似虎,維基百科已經(jīng)選擇認(rèn)慫

      美國(guó)新聞媒體聯(lián)盟發(fā)起"負(fù)責(zé)任AI"運(yùn)動(dòng),要求科技巨頭為AI訓(xùn)練內(nèi)容付費(fèi)。與此同時(shí),維基百科基金會(huì)宣布與谷歌旗下Kaggle合作,發(fā)布專(zhuān)門(mén)優(yōu)化的AI訓(xùn)練數(shù)據(jù)集,包含研究摘要、圖像鏈接等結(jié)構(gòu)化數(shù)據(jù)。此舉旨在應(yīng)對(duì)AI廠商爬蟲(chóng)帶來(lái)的帶寬壓力——維基百科發(fā)現(xiàn)AI爬蟲(chóng)雖僅占訪問(wèn)量的35%,卻消耗了65%的核心數(shù)據(jù)中心流量。通過(guò)提供機(jī)器友好的JSON格式數(shù)據(jù),維基百科希望引導(dǎo)AI廠商使用規(guī)范渠道獲取內(nèi)容,而非無(wú)節(jié)制抓取原始網(wǎng)頁(yè)。這反映了內(nèi)容平臺(tái)在AI時(shí)代面臨的兩難:既要維護(hù)用戶體驗(yàn),又難以完全阻擋技術(shù)迭代帶來(lái)的數(shù)據(jù)需求。

    • 國(guó)內(nèi)MCP服務(wù)有哪些?MCP服務(wù)器搜索引擎哪家好?

      隨著MCP協(xié)議的廣泛應(yīng)用,國(guó)內(nèi)出現(xiàn)了越來(lái)越多的MCP服務(wù)提供商,這些服務(wù)覆蓋了從開(kāi)發(fā)工具、數(shù)據(jù)科學(xué)到金融、游戲等多個(gè)領(lǐng)域。如果你對(duì)MCP協(xié)議和相關(guān)開(kāi)發(fā)感興趣,可以訪問(wèn)AIbase。物流路徑優(yōu)化:批量算路功能,優(yōu)化物流配送路徑。

    • 昔日搜索引擎霸主加入戰(zhàn)局!雅虎也欲競(jìng)購(gòu)Chrome瀏覽器

      雅虎高層表示,若法院判定谷歌需剝離Chrome瀏覽器業(yè)務(wù),雅虎將參與競(jìng)標(biāo)。雅虎搜索總經(jīng)理在谷歌反壟斷案庭審作證時(shí)透露,預(yù)計(jì)該瀏覽器售價(jià)將達(dá)數(shù)百億美元。雅虎2000年代曾是搜索領(lǐng)域領(lǐng)導(dǎo)者,后被谷歌取代,2021年被阿波羅全球管理公司收購(gòu)。目前雅虎正重振搜索業(yè)務(wù)并研發(fā)自有瀏覽器,同時(shí)考慮收購(gòu)其他瀏覽器產(chǎn)品。美國(guó)司法部主張谷歌應(yīng)出售Chrome以打破其在搜索領(lǐng)域的壟斷地位。除雅虎外,OpenAI等機(jī)構(gòu)也對(duì)收購(gòu)Chrome表示興趣,預(yù)計(jì)將面臨激烈競(jìng)爭(zhēng)。

    • 全球首個(gè)!百度發(fā)布內(nèi)容操作系統(tǒng)滄舟OS 讓AI無(wú)所不能

      百度在Create2025開(kāi)發(fā)者大會(huì)上推出全球首個(gè)內(nèi)容領(lǐng)域操作系統(tǒng)"滄浪OS"。該系統(tǒng)支持全模態(tài)內(nèi)容輸入輸出、多智能體調(diào)用,適配MCP協(xié)議,突破場(chǎng)景和入口限制,實(shí)現(xiàn)端到端交付。滄浪OS整合百度文庫(kù)、網(wǎng)盤(pán)等產(chǎn)品線的AI業(yè)務(wù)框架,包含數(shù)百個(gè)經(jīng)過(guò)驗(yàn)證的Agent工具,支持跨模態(tài)、跨格式的內(nèi)容理解。系統(tǒng)打通百度文庫(kù)、學(xué)術(shù)數(shù)據(jù)庫(kù)及全網(wǎng)公開(kāi)內(nèi)容,同時(shí)支持用戶授權(quán)的本地或網(wǎng)盤(pán)私有內(nèi)容。目前滄浪OS已全面擁抱MCP生態(tài),通過(guò)標(biāo)準(zhǔn)化協(xié)議對(duì)外開(kāi)放核心能力,降低接入門(mén)檻,推動(dòng)AI應(yīng)用普及。

    • 百度文庫(kù)、百度網(wǎng)盤(pán)聯(lián)合發(fā)布全球首個(gè)內(nèi)容操作系統(tǒng)「滄舟OS」,致力于讓AI「無(wú)所不能、無(wú)處不在」

      4月25日,百度在Create2025開(kāi)發(fā)者大會(huì)上推出全球首個(gè)內(nèi)容領(lǐng)域操作系統(tǒng)"滄浪OS"。該系統(tǒng)整合百度文庫(kù)和網(wǎng)盤(pán)資源,構(gòu)建"公私有知識(shí)框架+工具框架"體系,通過(guò)知識(shí)化框架(公域/私域/記憶三大知識(shí)庫(kù))和工具化框架(多模理解、檢索、文件解析等組件),實(shí)現(xiàn)內(nèi)容元素級(jí)拆解。滄浪OS還包含閱讀器、編輯器、播放器三大組件,通過(guò)調(diào)度中樞協(xié)調(diào)AI Agent工作。目前該系統(tǒng)已集成數(shù)百項(xiàng)AI Agent功能,覆蓋圖文影音等多種內(nèi)容形態(tài),并與華為、三星等廠商展開(kāi)深度合作,將MCP架構(gòu)應(yīng)用于手機(jī)云存儲(chǔ)等場(chǎng)景,提升文件管理效率。

    • 百度優(yōu)選MCP,AI電商新解法

      AI技術(shù)正在重塑全球電商行業(yè)格局,百度推出MCP開(kāi)放平臺(tái),為開(kāi)發(fā)者提供AI電商解決方案。文章指出,AI已實(shí)現(xiàn)24小時(shí)智能直播、精準(zhǔn)選品匹配、自動(dòng)化營(yíng)銷(xiāo)等功能,幫助商家降本增效。數(shù)據(jù)顯示,49%美國(guó)消費(fèi)者會(huì)使用AI工具輔助購(gòu)物決策。百度MCP平臺(tái)整合搜索、交易等能力,開(kāi)發(fā)者可快速調(diào)用電商工具,同時(shí)獲得百度流量支持。目前已有上千開(kāi)發(fā)者加入該平臺(tái)。專(zhuān)家認(rèn)為,未來(lái)電商競(jìng)爭(zhēng)將轉(zhuǎn)向AI應(yīng)用深度和生態(tài)開(kāi)放度,中國(guó)企業(yè)出海需構(gòu)建AI技術(shù)壁壘。

    • 百度宣布3年開(kāi)放2.1萬(wàn)個(gè)校招實(shí)習(xí)崗:還要培養(yǎng)AI技術(shù)大佬

      百度招聘官宣,未來(lái)三年,百度將開(kāi)放21000個(gè)實(shí)習(xí)崗位給優(yōu)秀校園人才,并持續(xù)加強(qiáng)對(duì)實(shí)習(xí)生的培養(yǎng),進(jìn)一步提升實(shí)習(xí)轉(zhuǎn)正率。據(jù)介紹,今年3月,百度已面向在校學(xué)生開(kāi)放3000暑期實(shí)習(xí)崗位,87%與AI相關(guān),覆蓋大模型、機(jī)器學(xué)習(xí)、無(wú)人駕駛等領(lǐng)域。此外,百度今年也將啟動(dòng)管理培訓(xùn)生計(jì)劃、AIDU計(jì)劃,面向AI領(lǐng)域招募頂尖校園人才,致力于培養(yǎng)AI時(shí)代核心

    • 第十二屆百度獎(jiǎng)學(xué)金揭曉:半數(shù)攻堅(jiān)大模型,AI解鎖醫(yī)療、交通新場(chǎng)景

      4月25日,第十二屆百度獎(jiǎng)學(xué)金頒獎(jiǎng)典禮在武漢舉行的"Create 2025百度AI開(kāi)發(fā)者大會(huì)"上舉行。10位來(lái)自全球頂尖高校的青年學(xué)者獲獎(jiǎng),每人獲20萬(wàn)元科研資金。獲獎(jiǎng)?wù)哐芯糠较蚝w大模型、多模態(tài)學(xué)習(xí)、醫(yī)療AI等前沿領(lǐng)域,超半數(shù)聚焦大模型技術(shù)創(chuàng)新應(yīng)用。百度CTO王海峰勉勵(lì)青年人才共同奔赴智能時(shí)代。該獎(jiǎng)學(xué)金自2013年設(shè)立以來(lái)已累計(jì)支持116名全球頂尖學(xué)子,提供獎(jiǎng)金超千萬(wàn)元。除資金支持外,百度還通過(guò)實(shí)習(xí)、項(xiàng)目合作等方式搭建產(chǎn)學(xué)研聯(lián)動(dòng)平臺(tái),持續(xù)推動(dòng)AI技術(shù)生態(tài)繁榮。

    • 百度、優(yōu)酷,要打一場(chǎng)“橫豎爭(zhēng)奪戰(zhàn)”

      當(dāng)小屏幕上收獲的注意力超越大銀幕,互聯(lián)網(wǎng)大廠們的集體All in戲碼再度上演。國(guó)家電影局今年元旦發(fā)布的數(shù)據(jù)顯示,國(guó)內(nèi)2024年電影市場(chǎng)總票房為425.02億元?!吨袊?guó)網(wǎng)絡(luò)視聽(tīng)發(fā)展研究報(bào)告(2025)》中則提到,中國(guó)微短劇市場(chǎng)規(guī)模突破504.4億元。而此前的2023年,電影對(duì)比短劇的優(yōu)勢(shì)差額還在150億元之上。形勢(shì)逆轉(zhuǎn)之快,出乎了大多數(shù)人的意料。在短劇剛剛從抖音、快手等短視頻

    • 2025百度商業(yè)AI技術(shù)創(chuàng)新大賽煥新啟動(dòng)!

      當(dāng)前,人工智能正以超乎想象的速度重構(gòu)商業(yè)邏輯。隨著大模型技術(shù)普惠化與倫理框架同步完善,這場(chǎng)由AI引發(fā)的生產(chǎn)力革命正加速催生智能文明新范式。自 2023 年,百度商業(yè)首次舉辦AI技術(shù)創(chuàng)新大賽以來(lái),兩屆比賽吸引了來(lái)自海表內(nèi)外 300 多所高校、 6000 多支精英隊(duì)伍踴躍參與。人工智能領(lǐng)域的各界英才,憑借頂尖技術(shù)實(shí)力與不竭創(chuàng)新活力,共同鑄就一場(chǎng)高水準(zhǔn)的AI技術(shù)盛會(huì),