我的網頁遭到 robots.txt 封鎖

一、什麼是網路爬蟲？

網路爬蟲也叫網路蜘蛛（spider），簡單來說，是一種瀏覽世界上各種網站的機器人。目的一般為編纂網路索引。我們所在做的SEO優化換句話說也就是能夠讓網路爬蟲能更加清晰的讀取網頁的內容，使使用者在網路上搜尋時，更容易找到您的網店。

二、為何會遇到遭到robots.txt封鎖的情形？

robots.txt 為EasyStore所加入的語法來封鎖Google的網路爬蟲，目的是為了能夠避免爬蟲擷取某些特定的頁面，來避免搜尋時顯示不必要的頁面，同時，為了能夠維護資訊的安全，避免爬蟲自行增加訂單或註冊帳號，因此並不會影響任何SEO唷！

目前EasyStore所設置的Robot txt. 會影響到以下幾種頁面
-購物車
-結帳流程
-付款頁面
-個人資料
-聯繫我們
-幫助中心

更新時間： 28/09/2022