天问

网贷数据分析

数据准备:

1、爬所有网贷品牌。

约6000多品牌!可见网贷十分繁荣。

数据来源:

http://www.p2peye.com/platform/all/

说明:

抓取每个平台的信息,包括以下(25个维度)信息:平台名称,注册天眼评级、数据排名、综合利率、期限范围、平台实力(银行存管、加入协会等把里面的内容弄下来)、用户点评、好评度、点评人数、关注人数、上线时间、地址;

首页:公司名称、公司规模、保障模式、项目类型、注册资本、债权转让、自动投标;

口碑:宜人贷口碑名称,网友名称、评论内容、评论时间;

工商/备案信息:变更记录次数、经营异常次数、失信人数。

部分结果展示:

网贷公司简要

网贷公司详情(二级抓取)

2、网贷之家(所有平台)

http://www.wdzj.com/dangan/

爬取信息:平台名称、综合指数、提现、站岗、服务、体验、平均参考收益、参考投资期限、上线时间、注册资本、注册地。

3、爬所有网贷新闻

最初考虑抓取百度搜索的新闻数据,由于不同网站数据的的不规范,为此改为抓取微信公众平台的网贷数据,这里需要克服一个难题,抓取微信扫码登录,才能获取更多的数据,否则只能获取100条数据。

 

数据分析

数据分析展示,暂略。

 

后记:

有需要数据的,或者有数据爬取,数据挖掘,数据分析需求的,扫二维码可以联系我。

博客地址:http://blog.yoqi.me/?p=3653
扫我捐助哦
喜欢 0

这篇文章还没有评论

发表评论