robots/爬蟲協(xié)議
2013年06月06日10:14 | 中國發(fā)展門戶網(wǎng) www.chinagate.cn |
給編輯寫信 字號：T|T關(guān)鍵詞： 搜狗 搜索引擎 輸入法 抓取 robots 超級短信 微軟 隱私 用戶信息 音頻
robots協(xié)議也稱爬蟲協(xié)議，網(wǎng)站通過robots協(xié)議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取。robots協(xié)議是國際互聯(lián)網(wǎng)界通行的道德規(guī)范，其目的是保護(hù)網(wǎng)站數(shù)據(jù)和敏感信息、確保用戶個人信息和隱私不被侵犯。
返回頂部文章來源： 中國發(fā)展門戶網(wǎng)
