java爬虫的步骤 Java爬虫方向怎么样？
Java爬虫方向怎么样？
我曾经在某会增大项目接受过Java的爬虫数据采集，在Java方面有一定会经验。
Java爬取应该Python爬取这个问题较低的它取决于有权限下决定的那个人和团队是更熟悉Java我还是Python。Python在爬虫方面有简单易用和结构以简洁的优势，比较适合最常见爬虫项目的开发；如果是一个纯Java架构的项目和团队，再去拿来找个人去想研究Python就各位了，而且会不能形成Java与Python的混合架构，有维护的成本，这时候Java就会占优。
爬取与反爬取如果不是好象性的网站爬取应该也很很难的，用原生HttpClient表就行。若碰到较知名的网站，而不会本身很多反爬取机制（js、验证码、图形验证码...等等），和频繁的网页改版以后，倒致爬取失效。的确，爬取工作大量的是在与网站的反爬取机制通过攻防对抗。当然了对抗技术也有很多，就不在这里发动了。
来到问题：Java爬虫方向咋样啊？这个问题在打听一下了上面的信息后，更多的是看个人兴趣和研究意愿的，每个人的答案都有所不同，大家也可以不在下面的评论中给出自己的意见。
做垂直爬虫用GO JAVA PYTHON哪个比较好?各有什么优势？
个人建议您你熟悉哪门语言就用哪个，基本是现在百度一下都有吧你自己做代码可以不用，一点改呀都能满足业务需求，我是用php的，效率绝逼有保障，也并没说会有多实在不方便，抓取信息淘宝阿里商品也是可以啦的，线程呀或者什么管理之类的，反正即便python什么的有太麻烦的，可是没准儿你得花时间去学习这门语言，你不学，不熟得不能再熟一样的懵逼，也得百度，所以才说，用自己熟悉的语言做是最好是的，我一直在是用php的curl做爬虫，应该用得很抓起，个人总结吧，爬虫和语言没太大关系，所谓的的效率好象项目也无什么大碍，优化得好，这都不是问题，但是路漫漫长吧，有时间能学python我还是python好，我只不过是我没时间去学。
俗话有句话，爬虫用得好，牢饭吃得饱，希望走正道吧。
结果选择类型Python的原因：
跨平台，对Linux和windows都有确实不错的支持。
科学计算，数值曲线拟合：Numpy，Scipy
可视化：2d：Matplotlib(做图很漂亮啊),3d:Mayavi2
奇怪网络：Networkx
统计：与R语言接口：Rpy
可视化终端
通常看你那个比较熟悉什么语言，熟悉什么语言用什么，这是最最好的选择。如果没有都是需要新学的话我推荐python，爬虫框架晚熟，语言容易上手，是最常用的爬虫语言！
Scrapy，ms4
版权声明：本文内容由互联网用户自发贡献，本站不承担相关法律责任.如有侵权/违法内容,本站将立刻删除。
