百度里面的站長工具怎么取消(百度站長工具添加不了站點)
近日站長派發(fā)現(xiàn)一個問題,那就是網(wǎng)站開通cloudflare后,百度站長平臺的robots功能無法使用。
具體情況是這樣的:
1、站長派開通了cloudflare后使用百度站長平臺的robots功能,提示如下:
您的服務(wù)器配置有誤
百度暫時無法連接您的服務(wù)器,請檢查服務(wù)器的設(shè)置,確保您網(wǎng)站的服務(wù)器能被正常訪問。錯誤碼:500

2、根據(jù)提示顯然是網(wǎng)站的服務(wù)器有問題,但是此時網(wǎng)站是可以正常打開的,并且使用站長平臺的“抓取診斷”功能,結(jié)果提示網(wǎng)站抓取也是正常的。

3、此時站長派就對此問題提交到了反饋中心,隔天接到的反饋則是:
您好,近期工具內(nèi)部調(diào)整中,無法正常使用,很抱歉給您帶來不便,我們會盡快優(yōu)化,感謝您的反饋。

4、反饋說是功能“無法正常使用”?于是就測試了另一個沒有開通cloudflare的網(wǎng)站,則提示:您的Robots文件已生效

由此說明,并不是百度站長平臺的Robots功能不能使用了,而是對于開通了cloudflare的網(wǎng)站無法抓取或者識別他的Robots,算是一個BUG,也希望官方人員早些修復(fù)此功能。
知識拓展:
一、什么是cloudflare
簡單來說cloudflare 是一家國外的 CDN 加速服務(wù)商,還是很有名氣的。提供免費和付費的加速和網(wǎng)站保護(hù)服務(wù)。站長派就使用了cloudflare免費的加速和網(wǎng)站保護(hù)服務(wù)。
具體方法大家可以直接到cloudflare的官網(wǎng)了解,因為整個設(shè)置的過程屬于傻瓜式操作,所以站長派就不做具體說明。
二、百度站長平臺的robots功能是做什么的?
其實就是提供檢測網(wǎng)站的robots文件并測試網(wǎng)址是否被阻止抓取的功能,具體如下:
1、robots.txt可以告訴百度您網(wǎng)站的哪些頁面可以被抓取,哪些頁面不可以被抓取。
2、 您可以通過Robots工具來創(chuàng)建、校驗、更新您的robots.txt文件,或查看您網(wǎng)站robots.txt文件在百度生效的情況。
3.、Robots工具目前支持48k的文件內(nèi)容檢測,請保證您的robots.txt文件不要過大,目錄最長不超過250個字符。

如若轉(zhuǎn)載,請注明出處:http://www.qjsdgw.cn/73443.html