1、robots文件裡面禁止抓取二級域名，怎麼寫
1、Robots是控制當前目錄下文件的抓取的，和域名無關。
2、想實現如題效果，可直接在該二級域名對應的網站目錄下添加robots，禁止所有Disallow: *。
2、關於robots中，屏蔽二級域名的寫法？
robots中，屏蔽二級域名的寫法：
User-Agent:
*Disallow: /
robots.txt一般指robots協議，（也稱為爬蟲協議、機器人協議等）的全稱是「網路爬蟲排除標准」（Robots Exclusion Protocol），網站通過Robots協議告訴搜索引擎哪些頁面可以抓取，哪些頁面不能抓取。robots.txt文件是一個文本文件，使用任何一個常見的文本編輯器，就可以創建和編輯它。
3、關於同一個伺服器下，網站二級域名robots.txt的設置，求教各位朋友！
正確的方法是各用各的ROBOTS，蜘蛛是很聰明的，它知道怎麼操作。
會收錄1.abc.com而不會收錄abc.com/1,它會爬行到abc.com/1/這里，最終返回的結果還是會到1.abc.com
4、怎樣用robots.txt 屏蔽掉一個域名
?
5、如何設置指定域名訪問伺服器
如果是指本地域名重定向，可以如下操作：
1、用記事本打開C盤的host文件，路徑是C:\Windows\System32\drivers\etc\
2、在最後面添加伺服器ip和你指定的域名，格式：ip （空格） 域名
這樣你訪問指定的域名就會重定向到指定的伺服器上，只對設置的電腦起作用。
6、robots屏蔽二級域名蜘蛛抓取 會導致主域名不收錄嗎？
分情況來看，如果二級域名有獨的內容，可在二級域名網站中單獨設置robots ；如果二級域名和主域名的內容是一樣的，則可301轉向到主域名，這樣主站權重集中，不分散，也有利於排名。
7、我在網站的根目錄裡面建立了一個子目錄。做了一個獨立的站綁定的一級域名。那怎麼寫robots協議才能
樓主您好：
可以看看你的網站嗎？我幫你寫
8、禁止某二級域名的抓取,robots如何寫
首先，你要明白robots文件怎麼寫！一般允許抓取的話是
allow：/www/xxx/
如果是不允許的話就是:disallow:/www/xxxx/
你如果想禁用你的二級網站的話，只需要禁用二級網站所在的文件夾就好了！例如，你的二級網站所在的文件夾是/erji/
那麼，你就可以在robots加入：
disallow:/www/erji/ 就可以了！
9、請教：如何讓我主域名而不是次域名收錄在搜索引擎中
兩個域名指向同一站點內容，都會被收錄。且因站點內容相同會相互干擾收錄，削弱網站權重。
解決方式：將次域名做301定向指向主域名，可以集中權重。
雖然搜索引擎依然會收錄次域名的內容，但不影響主域名的權重和排名。
如不想次域名被收錄，可以將次域名獨立一個站點，設置301跳轉的同時，在其站點下設置robots.txt文件，限制搜索引擎抓取。