爬虫可以抓取豆丁文库，百度文库吗？该如何处理

热度：85 发布时间：2013-01-09 09:38:16.0

爬虫可以抓取豆丁文库，百度文库吗？
如题，大家给我讲解下吧，网络爬虫大概可以抓取哪些资源，像豆丁文库，百度文库这些是用post方式能抓取吗？
------解决方案--------------------
ASP没试过，不过用CURL应该可以。