網(wǎng)站扶植初始技巧即網(wǎng)站在建立階段，就必須全盤綜合推敲的技巧細(xì)節(jié)，因為后續(xù)在網(wǎng)站運營過程中再進(jìn)行調(diào)劑，會牽扯太多方面，甚至無法履行。
1.網(wǎng)站站點地圖(Sitemap)的設(shè)置和技巧細(xì)節(jié)
Sitemap是一種通知機(jī)制，就是經(jīng)由過程創(chuàng)建一個文件的方法，把網(wǎng)站網(wǎng)頁的URL提交給搜刮引擎，在Sitemap中定義好頁面的URL地址、權(quán)重、更新頻率等。經(jīng)由過程把Sitemap提交給搜刮引擎，搜刮引擎爬蟲沿著Sitemap里面的鏈接地址進(jìn)行爬行，這就是Sitemap的機(jī)制。
通俗Sitemap文件的建立如下。經(jīng)由過程XML的方法創(chuàng)建Sitemap，這是最常見也是最簡單的一種方法。
網(wǎng)址
2015.01.03T04:20.08:00
always
1.O
網(wǎng)址
2015.01.02T20:20:36Z
daily
O.8
1.百度Sitemap
網(wǎng)頁地址
1.0
2015-01-01
1.0
2.重要字段含義
?changefreq：指定提交的URL對應(yīng)頁面內(nèi)容的更新頻率，例如，daily、weeIdb，、monthly、yearly。這個參數(shù)用于設(shè)置搜刮引擎頁面更改的頻率，即考量是否須要蜘蛛經(jīng)常爬行并更新網(wǎng)頁的內(nèi)容。
?priority：定義頁面的權(quán)重，權(quán)重越高，相對于其他頁面，當(dāng)前頁面的優(yōu)先級越高。
?：用描述具體的鏈接地址，這里須要留意的是鏈接地址中的一些特別字符必須轉(zhuǎn)換為XML(HTML)定義的轉(zhuǎn)義字符，簡化版的
Sitemap也可以采取記事本方法，就是直接打開一個記事本，然后把URL填入，每個URL一行，然后直接提交搜刮引擎，也能實現(xiàn)同樣的目標(biāo)。
3.超等門戶的Sitemap模式
搜刮引擎并不限制每個網(wǎng)站提交的Sitemap文件的個數(shù)，是以，假如網(wǎng)頁
URL條目比較多，可以對新增的頁面進(jìn)行差額提交。
在創(chuàng)建多個Sitemap文件時，可以經(jīng)由過程一個父Sitemap文件鏈接多個子
Allow： /cgi.bin/see
Sitemap文件，子Sitemap文件經(jīng)由過程填充分際URL條目標(biāo)模式完成，如許可以確保
要跨越1000個。
下面是一個例子。
http://www.abc.com/sitemap1.xml.gz
http://www.abc.com/sitemap2.xml.gz
Sitemapl：
URLl
daily
2015-01-01
1.0
URL2
20 1 5..0 1.，0 1
daily
1.0
每個Sitemap文件的URL條目不會特別多，建議一個Sitemap文件的URL條目不
URL3
2015.01.01
(3)應(yīng)用“*”，限制拜訪帶某個后綴的域名。
?lastmod：當(dāng)前頁面內(nèi)容最后的修改時光，這個參數(shù)可以給搜刮引擎一個參考，就是時效性的參考，某些內(nèi)容，特別是咨詢類的，搜刮引擎會將內(nèi)容的更新時光作為排序的一個因子。
提交Sitemap的方法有多種，平日的做法是創(chuàng)建百度或者其他搜刮引擎的站長賬戶，然后在站長后臺把Sitemap的uRL提交上去，在站長后臺可以看到每個Sitemap的處理進(jìn)度和收錄的數(shù)據(jù)。
dafly
dafly
URL4
20 l 5―0 1.0 1
daily
1.0
2.Robots文件設(shè)置和技巧細(xì)節(jié)
Robots.txt文件放在網(wǎng)站的根目次下，重要用于通知蜘蛛在該網(wǎng)站上的抓取范圍，搜刮引擎優(yōu)化可以在這個文件中聲明該網(wǎng)站中不想被搜刮引擎收錄的部分，或者指定搜刮引擎只收錄特定的部分。
(1).經(jīng)常應(yīng)用到Robots.txt文件的情況
?網(wǎng)站進(jìn)級，老版本網(wǎng)站的很多頁面在新版本網(wǎng)站中去掉落了，在這種情況下，可以經(jīng)由過程Robots文件告訴蜘蛛不再抓取這些已經(jīng)被去掉落的頁面。
DisallOW：/*?*
?網(wǎng)站存在很多反復(fù)的內(nèi)容，比如一個網(wǎng)站同時存在動態(tài)頁面和已經(jīng)經(jīng)由靜態(tài)化處理的頁面，這些頁面在內(nèi)容上都是完全反復(fù)的內(nèi)容，為懂得決反復(fù)的問題，可以在Robots文件中禁止蜘蛛抓取動態(tài)頁面。
?網(wǎng)站內(nèi)部有些內(nèi)容不便于公開宣布，然則須要許可內(nèi)部查閱。碰到這種情況，可以在Robots中告訴蜘蛛不要抓取。
(2).Robots文件的根本寫法
User-agent：
Allow： /tmp/hi
Allow： /~joe/look
Disallow： /cgi.bin/
Disallow： /t.mp/
Disallow：|00e|
Allow是許可蜘蛛爬行的頁面，而Disallow后面則是不許可蜘蛛拜訪的路徑和文件。
