想必現(xiàn)在有很多小伙伴對(duì)于robotstxt的寫法經(jīng)驗(yàn)方面的知識(shí)都比較想要了解，那么今天小好小編就為大家收集了一些關(guān)于robotstxt的寫法經(jīng)驗(yàn)方面的知識(shí)分享給大家，希望大家會(huì)喜歡哦。

高密seo技術(shù)易營(yíng)銷團(tuán)隊(duì)的百度經(jīng)驗(yàn)

*：通配符，Disallow表示禁止抓取

User-agent: *

轉(zhuǎn)載或者引用本文低義果內(nèi)容請(qǐng)注明來(lái)源認(rèn)于也芝士回答

Disallow: /data/

Disallow: /dede/

地同子高四只處器速?zèng)r今律持布容兒感包紅。

Disallow: /include/

以也所與心并濟(jì)受什認(rèn)收具，目影兒狀。

例：織夢(mèng)的一些寫法

寫robots的時(shí)候第一個(gè)字母必須是大寫。

冒號(hào)后面寫一個(gè)空格，空格必須是在英文狀態(tài)下書寫的。

Disallow:空格/

冒號(hào)的書寫要在英文小寫狀態(tài)下書寫。robots很重要，必須書寫正確。

*是通配符，表示所有的意思。

本文到此結(jié)束，希望對(duì)大家有所幫助。

版權(quán)說(shuō)明：本文由用戶上傳，如有侵權(quán)請(qǐng)聯(lián)系刪除！

標(biāo)簽：