基于 node 的微小爬虫——扒了一下知乎 about blog HOT 9 OPEN

咱俩学习的方向好像差不多。。。 canvas+node。。。

from blog.

@zzuzsj 哈哈哈这俩比较有意思

from blog.

我也喜欢这俩玩意儿 很感兴趣

from blog.

@zzuzsj 多多交流哈哈

from blog.

1127284964 我的qq

from blog.

运行了下代码,发现抓取的13个页面的内容都一样,也就是说参数传了0,5,10,15,,,,,,, 但并没有起到分页的效果,望解答

from blog.

我debug出来了, superagent.get(baseUrl).query({ params: params}) 应该改成superagent.get(baseUrl).query({ params: JSON.stringify(params)})

哥,不仔细啊

from blog.

@luozheao 谢谢指出；之前可能是没仔细看抓取的内容

from blog.

superagent.get(baseUrl)
          ...
          .end(function(err, obj) {
           ...
            res.end(JSON.stringify(items))
            ...
          })

res.end(JSON.stringify(items))
如果在这里就响应那在页面上就看不到最终的结果了--

from blog.