当前位置: 代码迷 >> Java相关 >> 关于网络爬虫爬取淘宝商品数据的有关问题。
  详细解决方案

关于网络爬虫爬取淘宝商品数据的有关问题。

热度:373   发布时间:2016-04-22 21:08:33.0
关于网络爬虫爬取淘宝商品数据的问题。。
        我目前正在准备做获取淘宝,或者其他电商数据的网络爬虫,但是通过几天的学习发现想获取淘宝的数据并没有想象中那么简单,不知道有木有曾经做过的大神,在网上找资料也没发现有多少是可以参考的资料。
         初步想法有两种:
         第一是利用淘宝提供的API来获取数据,可是真心不太会用淘宝的API,而且利用淘宝提供的API不知道会不会免费?主要还是不知道怎么学习淘宝的API,也就不知道怎么利用API来获取定量的数据。
         第二,就是利用网页链接以及正则表达式,通过HttpClient来获取淘宝的页面信息,从而抓出其中的商品信息,可是发现这样实现起来会非常复杂。
         知道这里的大神们比较多,所以想求教这个问题,真心求想法,以及可以真正付诸实施的步骤,或者有相关的资料可以推荐给我的,请不吝赐教。

------解决方案--------------------
用API远比你爬虫来的简单
------解决方案--------------------
淘宝的数据这么不可能这么好抓的。百度一样。
大公司的数据就是金钱岂能白白流出。
------解决方案--------------------
和他们联系,通过他们的api 。。
  相关解决方案