一、什么是yisouspider？
神馬搜索的爬蟲user agent是yisouspider，神馬搜索抓取了網(wǎng)站內(nèi)容才能在用戶檢索時提供相關(guān)的網(wǎng)頁內(nèi)容。
二、神馬搜索引擎UA和IP段
神馬蜘蛛UA標(biāo)識：YisouSpider 真是簡單明了，IP端也很簡單，及時UC帶來的流量，所以IP端也是從阿里云來的：
神馬蜘蛛User_agent：Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36
對應(yīng)IP段：
42.156.136.*-42.156.139.*
42.120.160.*42.120.161.*
Mozilla/5.0 (iPhone; CPU iPhone OS 10_3 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) CriOS/56.0.2924.75 Mobile/14E5239e YisouSpider/5.0 Safari/602.1
對應(yīng)IP段：106.11.15*.*
最新整理的一批神馬搜索蜘蛛IP段
42.156.136.0/24
42.156.137.0/24
42.156.138.0/24
42.156.139.0/24
42.120.160.0/24
42.120.161.0/24
42.156.254.0/24
42.120.234.0/24
42.120.235.0/24
42.120.236.0/24
106.11.152.0/24
106.11.153.0/24
106.11.154.0/24
106.11.155.0/24
106.11.156.0/24
106.11.157.0/24
106.11.158.0/24
106.11.159.0/24
