爬虫
用python最爬虫比较方便的框架有scrapy，还有一个国人开发的pyspider。当然，对于一些比较简单的请求，用requests即可，杀鸡焉用牛刀。框架的话scrapy是比较全面的，解耦也做得比较好，做大型爬虫如果你对settings文件中的每一个选项都了解透彻的话，可以利用scrapy框架写出很好的项目代码，至少偶之前在网易实习的时候项目都是用scrapy写的。
web开发web开发方面的python框架有django、flask、tornado。三个框架各有各的好处。django开箱即用，文档丰富；flask拓展方便；tornado支持异步；如果是找工作为首位的话，推荐django，毕竟现在django的市场份额还是比较大的。如果是个人开发的话，建议用flask，几行代码就可以跑起来。
数据分析数据分析方面，numpy和pandas是必备的，然后还可以用pyecharts去制作图表。总而言之，用python去进行数据分析可以更加自由灵活的去实现你想实现的功能。
其他方面诸如人工智能、大数据因为没接触过，不好高谈论阔，欢迎其他小伙伴补充。