
標題: [求助] 請教管理我這個禁止搜索引擎訪問的方法是否正確和可行 [打印本頁]
作者: leleshe 時間: 2013-6-18 22:49 標題: 請教管理我這個禁止搜索引擎訪問的方法是否正確和可行
本帖最后由 leleshe 于 2013-6-18 22:54 編輯
說明 Robots工具 robots.txt可以告訴搜索引擎您的網(wǎng)站哪些頁面可以被收錄,哪些頁面不可以被收錄,如果您不想讓搜索引擎收錄您網(wǎng)站的某些內(nèi)容,請用robots.txt文件指定搜索引擎在您網(wǎng)站上的抓取范圍。該工具可以檢測您的網(wǎng)站是否有robots.txt文件,及robots.txt文件內(nèi)容,并能按照您的需求生成正確的robots.txt文件。
下載 (7.89 KB)
2013-6-18 22:47
我在百度上看到這個robots工具 所以我就想讓搜索引擎不抓取 /linux下的目錄創(chuàng)建規(guī)則如下
然后生成robot.txt文件下載下來
下載 (3.1 KB)
2013-6-18 22:51
我吧它放在了www下
下載 (5.98 KB)
2013-6-18 22:49
請問管理這樣可行么?行了的話方的地方對不對? 請教
這是禁止所有搜索引擎抓取的代碼規(guī)則
圖片附件: 4.png (2013-6-18 22:47, 7.89 KB) / 下載次數(shù) 10852
http://m.ahbydz.com/bbs/attachment.php?aid=3102&k=9088ba1a48164753ebc8433d04572b89&t=1747155451&sid=EPr00E

圖片附件: 7.png (2013-6-18 22:49, 5.98 KB) / 下載次數(shù) 10824
http://m.ahbydz.com/bbs/attachment.php?aid=3104&k=0ba13179aac79f3ef141a3561c7c660f&t=1747155451&sid=EPr00E

圖片附件: 5.png (2013-6-18 22:51, 3.1 KB) / 下載次數(shù) 10883
http://m.ahbydz.com/bbs/attachment.php?aid=3105&k=2578cc07a99a252e5e408104dd5f62df&t=1747155451&sid=EPr00E

作者: leleshe 時間: 2013-6-18 22:54
本帖最后由 leleshe 于 2013-6-18 22:56 編輯
這是百度站長工具里面的 大家可以去看看
另外請管理幫忙看看這個帖子的問題謝謝
http://m.ahbydz.com/bbs/thread-6217-1-1.html
作者: admin 時間: 2013-6-19 08:30
這個是放在網(wǎng)站的根目錄下
作者: leleshe 時間: 2013-6-19 11:28
回復 3# admin
是要放在wdlinux下面么?
作者: hwzaw88 時間: 2013-6-19 16:54
robots 僅是對你網(wǎng)站目錄起作用,應該放在你的目錄下。路徑必須可以訪問
作者: leleshe 時間: 2013-6-19 19:45
回復 5# hwzaw88
額 那就是說這個對后臺控制面板沒有作用了呀,郁悶
作者: admin 時間: 2013-6-19 23:15
不明白
歡迎光臨 WDlinux官方論壇 (http://m.ahbydz.com/bbs/) |
Powered by Discuz! 7.2 |