大战优先策略思路-深圳南山淘宝代运营

       淘宝大战优先策略思路很直接：以淘宝用户网站为单位来衡量网页重要性，对于待抓取淘宝商品URL列表中的网页，根据所属于淘宝商品网站归类，如果哪个网站等待下載的页面最多，则优先下载这些链接。其本质思想倾向予优先下裁大型网站，因为淘宝大型网站往往包含更多的页面，鉴于大型网站往往是著名企业的内容，其淘宝网页貭量一般较高，所以这个淘宝思路虽然简单，但是有一定依据，实验表明这个算法效果要比宽度优先好。深圳南山淘宝代运营