假设我们有需要网络抓取的项目. (解析字符串(< 40)和抓取网页(创建元数据等)
我知道perl有很好的适合这个工作的cpan模块,所以我可以采取这种方式,不要那么烦.但我对速度和内存相关的东西没有任何线索.
我知道perl有很好的适合这个工作的cpan模块,所以我可以采取这种方式,不要那么烦.但我对速度和内存相关的东西没有任何线索.
那么,你会选择哪个? (可能是Python ??)就速度而言,哪一个更适合这份工作?请解释…
提前致谢.
解决方法
使用Perl或Python.两者都有大量用于网络抓取的库.
在Python中,您可以使用BeautifulSoup
来解析即使是那些糟糕的HTML页面.