早在2008年的时候，郑志刚就针对新世界的VIP用户做了许多调研，他发现购物中心的同质化越来越严重，这种高度趋同的状况，你给我一刀我给你一刀的互屠也是迟早的事。 天猫前几页全部展现是大商家的产品，而且一个品牌都展现若干产品啊!大商家已经有了固定的粉丝和品牌知名度，大多会通过收藏和直接搜索品牌进入店铺的。 第四步：一张完美整洁的日志就导入进来了，这样再看是不是很舒服很清晰呢 第五步：把一些不需要的删除，只需保留cs-uri-stemURI资源、c-ip客户端IP地址、cs(User-Agent)用户代理、sc-status协议状态这4项就可以了 如下图所示，一目了然! 网站日志英文注释： date日期 time时间 s-sitename服务名 s-ip服务器IP地址 cs-method方法 cs-uri-stemURI资源 cs-uri-queryURI查询 s-port服务器端口 cs-username用户名 c-ip客户端IP地址 cs(User-Agent)用户代理sc-status协议状态 200表示成功 301永久重定向 403表示没有权限 404表示找不到该页面 500内部服务器错误 503服务器超时 sc-substatus协议子状态 sc-win32-statusWin32状态 sc-bytes发送的字节数 cs-bytes接收的字节数 time-taken所用时间 网站日志分析 以下图为例 通过分析：一款俄罗斯的蜘蛛通过IP为141.8.142.145地址爬取了robots.txt这个文件，抓取成功，返回200正常。
