60行代码敲一个期货研报爬虫…1️⃣
因为工作需要,几天速学了《python3网络爬虫开发实战 第2版》,手敲了10+个期货公司网站的研报(如p1 不知道合不合规 只记个缩写),不同网站都各有特点,但都可以划分为具体的类别,对于新手入门爬虫或许是一个很好的训练依据。由于过程中很多细节性的问题网上和书上很难直接找到答案,也没有看到具体的资料,七拐八拐的解决了当时觉得很困难的问题,小小记录一下细节,以作分享。\n \n本篇记录大致流程,后续记录网站405反爬和密码登录的处理方案。\n \nps:如需要完整代码可私,共11个网站➕代理类,单纯需要获取研报也可~\n#爬虫 #数据分析 #期货交易 #量化分析 #周杰伦 #爱在西元前 #告白气球