當(dāng)前位置:首頁 >  站長(zhǎng) >  搜索優(yōu)化 >  正文

全民一起屏蔽百度的爬蟲

 2008-09-16 00:39  來源: http://www.dssz.net   我來投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競(jìng)價(jià),好“米”不錯(cuò)過

奧運(yùn)之后,淘寶網(wǎng)屏蔽搜索引擎事件應(yīng)該算是互聯(lián)網(wǎng)界最為熱門的話題了,淘寶對(duì)不同搜索引擎進(jìn)行不同程度的屏蔽,宣稱這一舉措意在保護(hù)消費(fèi)者利益。其實(shí)根據(jù)羅伊網(wǎng)的調(diào)查發(fā)現(xiàn)在這消息之前淘寶網(wǎng)已將百度搜索屏蔽,不過卻沒有屏蔽谷歌對(duì)淘寶網(wǎng)的抓取。這意味著什么呢?借著近期百度C2C即將上線的新聞炒作,大家?guī)缀醵及汛鸢冈O(shè)定在“雙方在電子商務(wù)領(lǐng)域走向正面沖突的地步”,真的是這樣嗎?為了C2C之戰(zhàn),所以淘寶屏蔽百度?

屏蔽百度的方式,是通過在網(wǎng)站根目錄生成一個(gè) robots.txt的文件,內(nèi)容為:

User-agent: Baiduspider

Disallow: /

User-agent: baiduspider

Disallow: /

這幾名話的意思就是,當(dāng)爬蟲是 Baiduspider時(shí),禁止訪問當(dāng)前網(wǎng)站的所有內(nèi)容.就是只屏蔽百度的爬蟲,對(duì)其它搜索引擎,如:Google, Yahoo,有道等并不影響.自從百度長(zhǎng)大了以后,站長(zhǎng)門一直都受到百度的歁壓,隨意K掉我們的網(wǎng)站,我的網(wǎng)站: 原來每天有一萬多的IP,但自從被百度K掉以后,訪問量直線下降,搞得現(xiàn)在都沒心思搞下去了.

事到如今,有了淘寶屏蔽百度,各位站長(zhǎng)應(yīng)該在淘老大的號(hào)召下,一起屏蔽百度的爬蟲,別讓百度太囂張了.

屏蔽方式很簡(jiǎn)單,打開 保存到你的電腦里為:robots.txt,再上傳到你的網(wǎng)站根目錄,就可以把百度掃門而出.讓百度以后搜不出東西,自不然國內(nèi)的用戶就會(huì)轉(zhuǎn)到其它的搜索引擎,至少別的引擎不會(huì)亂K我們的站吧.對(duì)不對(duì)?

我現(xiàn)在把我的屏蔽網(wǎng)站給你們看,我不是說說而已的:

大家看著辦吧,你想被人K,還是你K別人!隨你喜歡了.

站長(zhǎng)網(wǎng)新聞榜 babqa.cn/top

申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)文章

  • 百度爬蟲是什么

    百度爬蟲是一種網(wǎng)絡(luò)機(jī)器人,它可以根據(jù)一定的規(guī)則,在各個(gè)網(wǎng)站爬行,對(duì)訪問過的網(wǎng)頁、圖片、視頻等內(nèi)容進(jìn)行收集整理,分類建立數(shù)據(jù)庫,呈現(xiàn)在搜索引擎上,讓用戶通過搜索某些關(guān)鍵字,就可以看到企業(yè)網(wǎng)站的網(wǎng)頁、圖片、視頻等。

    標(biāo)簽:
    百度爬蟲
  • 百度蜘蛛爬蟲的工作原理

    百度是中國目前的第一大搜索引擎,擁有完善的一套爬蟲算法,了解百度蜘蛛的爬蟲原理,對(duì)我們SEO優(yōu)化工作有著舉足輕重的作用。我們可以從下面這張圖片來詳細(xì)了解百度蜘蛛爬取網(wǎng)頁的一整套流程和體系

  • 騰訊回應(yīng)屏蔽百度系A(chǔ)PP:觸發(fā)當(dāng)日分享上限就自動(dòng)不可見

    近日有網(wǎng)友反映稱,百度系部分App遭朋友圈“屏蔽”,騰訊方面回應(yīng)稱,分享次數(shù)達(dá)到當(dāng)日上限,觸發(fā)“防刷屏機(jī)制”。騰訊方面表示,朋友圈一直有防刷屏機(jī)制,觸發(fā)當(dāng)日分享上限就自動(dòng)不可見

    標(biāo)簽:
    騰訊
    百度
    屏蔽百度
  • 影響百度爬蟲對(duì)網(wǎng)站抓取量的因素

    影響百度爬蟲對(duì)網(wǎng)站抓取量的因素有哪些?

    標(biāo)簽:
    爬蟲
    百度爬蟲
  • 哪些網(wǎng)站優(yōu)化的細(xì)節(jié)會(huì)影響百度爬蟲的抓取

    大多站長(zhǎng)都知道百度爬蟲的重要性,一般你的網(wǎng)頁參與排名要分四個(gè)步驟,分別是抓取、收錄、索引、展現(xiàn),其中抓取是我們站長(zhǎng)做SEO網(wǎng)站優(yōu)化的第一步,那么問題來了,濟(jì)南SEO培訓(xùn)告訴你站長(zhǎng)做SEO的哪些操作會(huì)影響到濟(jì)南seo網(wǎng)站優(yōu)化百度蜘蛛的抓取呢哪些網(wǎng)站優(yōu)化的細(xì)節(jié)會(huì)影響百度爬蟲的抓取看看你的IP上有沒有大站

    標(biāo)簽:
    百度爬蟲

熱門排行

信息推薦