编写爬虫需要用到哪些软件?最后得到的是什么
发表日期:2019-09-02 11:10
游览次数:
网络爬虫,一般是指通过超链接扫描Web网页,使用的是HTTP网络协议,用C++等编译性语言开发出的就是exe可执行程序(可以调用微软的WinInet库),但是也可以使用Python等脚本语言编写爬虫,最后得到的就是py脚本 写爬虫也不需要什么具体的软件,主要是看你用什么语言用什么库罢了。用python实现爬虫应该是最简单的,有功能强大的urllib2,beautifulsoup,request等库,用起来很方便,网上找点教程就会了。写爬虫还可以试试 scrapy框架,可是省去好多细节,用起来很方便。如果用python等脚本来写的话需要一个解释器就够了。如果是用java等来写的话就会编译成一个exe可执行文件。 |
免责声明:本站部分资源图片及文字信息来自网络,如侵犯到您的权益,请及时通知我们:Email: 68409478@qq.com