爬虫效率怎么提高
python工作中的用途？
python工作中的用途？
事实上，Python在信息收集和数据分析中的应用已变得非常普遍。很多领域的从业工作者已经悄悄地使用Python来帮助自己的工作。
1.财务会计：处理发票，报表
普通人一天中的大部分时间都在处理发票，记录和查看凭证，而使用Python可以自动识别收据上所需的栏目信息并生成表格，并且能在5分钟内完成报告数据统计和录单。
2、金融业：自动生成股票图表
可以使用不到200行代码，可以自动导入密集数据，分析结果并生成股票趋势图。市场情况一目了然，避免了由主观预测误差造成的经济损失。我们不再需要花费一整天来绘制动态图，而且准确又方便。
3.运营-捕获有关竞争产品的信息并深入了解用户
操作人员可以使用Python抓取竞争产品的类型，价格，销售，客户反馈和等其他消息，输出数据分析报表，并制定更有利的运营策略。
4. 营销策略岗
在网站上爬取大量资源和数据，我们在工作中用到网络上发布的各种信息，如果用搜索引擎查找并整理，需要花费大量时间，现在python能够帮助我们，使用爬虫技术，提高数据查找和整理的效率。
尤其是在收集行业信息方面，利用爬虫查找和整理数据，能够快速找到应该用到的所有资料，能够快速帮助我们建立数据资源库。
综上所述：Python编程无所不包，可以做很多事情，并且适合于各种企业的开发工作，因此拥有一项技能是多么重要啊！
python爬虫框架哪个好用？
本来是写在推荐那片下边的评论里，还是觉得应该简单写个回答。
scrapy
适合大型、多站点爬取，支持异步，通过配置资源池，可以非常快速的爬取大量数据。同时学习成本相对也高，文档很完善，上手不难，但是大型项目里的各种规则、正则表达式啥的，就需要额外学习了。
requests bs
适合个人娱乐，针对单一站点，量不是很大，同时对效率要求不高的小型项目。如果有些it背景，requests库基本一看就懂，bs库主要是记住那些规则即可，两个库的文档都很完善，中文翻译也有。
另外再说一句，虽然爬虫库有了，但是爬虫最关键的还是初期对于目标网站的网络分析，这个不是很容易，需要配合浏览器插件或者抓包工具，对于head头里的字段要有深刻的了解，不然爬虫第一步：get返回200状态都搞不出来。然后还要考虑访问频率，不然很快你就被封ip，还有很多其他的注意事项，祝爬虫学习一切顺利。