網(wǎng)站建好后想被百度、谷歌搜到，得先讓搜索引擎的 “蜘蛛” 爬取到內(nèi)容。但很多網(wǎng)站明明內(nèi)容不錯(cuò)，蜘蛛?yún)s不愿意來(lái)，或者說(shuō)是找不到路，其實(shí)是被這幾個(gè)因素?fù)踝×耍旅婢蛶Т蠹乙黄饋?lái)了解一下。

　　1、網(wǎng)站加載太慢，蜘蛛等不及就走了。

　　蜘蛛在爬取信息的時(shí)候，通常是沒(méi)有耐心等的，要是網(wǎng)站打開(kāi)要3秒以上，那蜘蛛加載卡半天，可能會(huì)直接放棄爬取這頁(yè)內(nèi)容，所以大家要想讓蜘蛛愿意等，就得精簡(jiǎn)代碼，壓縮圖片，以保證網(wǎng)站打開(kāi)速度更快。

　　2、網(wǎng)站結(jié)構(gòu)像迷宮，蜘蛛找不到路。

　　蜘蛛爬取靠“鏈接導(dǎo)航”，要是網(wǎng)站導(dǎo)航混亂，比如沒(méi)明確的“首頁(yè)→分類(lèi)→內(nèi)容頁(yè)”層級(jí)、又或者是沒(méi)加 “面包屑導(dǎo)航”（像“首頁(yè)→手機(jī)→蘋(píng)果機(jī)型” 這樣的路徑提示），更糟糕的是有“死鏈接”（點(diǎn)進(jìn)去顯示 “404 頁(yè)面不存在”），這些情況，都會(huì)導(dǎo)致蜘蛛爬不到內(nèi)容，所以大家在建網(wǎng)站的時(shí)候要記得把導(dǎo)航做清晰，并定期檢查并刪掉死鏈接，給蜘蛛留條“順暢的路”。

　　3、內(nèi)容沒(méi)“營(yíng)養(yǎng)”，蜘蛛不愿帶。

　　蜘蛛爬取是為了抓取有價(jià)值的內(nèi)容，要是網(wǎng)站內(nèi)容全是大段的圖片/視頻（沒(méi)配文字說(shuō)明，蜘蛛看不懂）、或直接抄其他網(wǎng)站的內(nèi)容，沒(méi)啥價(jià)值的話(huà)，蜘蛛根本就不想抓取，因?yàn)檫@樣的內(nèi)容給不了搜索引擎用戶(hù)幫助。所以要讓蜘蛛愿意爬，內(nèi)容要得原創(chuàng)、有干貨、有價(jià)值才行。

　　4、亂設(shè)“禁止入內(nèi)”，把蜘蛛擋在門(mén)外。

　　網(wǎng)站根目錄有個(gè)“robots 協(xié)議”，相當(dāng)于門(mén)口貼的“訪客須知”，要是誤設(shè)置成“禁止所有蜘蛛爬取”，比如新手不懂，隨便復(fù)制別人的 robots 代碼，蜘蛛看到直接轉(zhuǎn)身走。建網(wǎng)站后一定要檢查 robots 協(xié)議，只禁止爬取沒(méi)用的頁(yè)面，核心內(nèi)容頁(yè)（首頁(yè)、產(chǎn)品頁(yè)）要允許蜘蛛進(jìn)入。

　　5、移動(dòng)端沒(méi)法看，蜘蛛“另眼相看”。

　　現(xiàn)在搜索引擎先爬取移動(dòng)端內(nèi)容，要是網(wǎng)站只做了電腦端，手機(jī)打開(kāi)后文字小到看不清、按鈕擠在一起（沒(méi)做響應(yīng)式適配）。比如用戶(hù)用手機(jī)看你的博客，文章段落全堆在一起，沒(méi)換行沒(méi)分段，蜘蛛爬取時(shí)也會(huì)覺(jué)得“體驗(yàn)差”，爬取優(yōu)先級(jí)會(huì)降低。在建網(wǎng)站的時(shí)候也一定要做移動(dòng)端適配，才能保證手機(jī)端能正常瀏覽。

　　其實(shí)影響蜘蛛爬取的核心，就是 “讓蜘蛛好爬、好懂、有收獲”，大家可以多看看以上幾點(diǎn)，來(lái)幫助網(wǎng)站吸引蜘蛛頻繁 “上門(mén)” 爬取，從而進(jìn)一步讓更多用戶(hù)找到你。