我更常用的从网上获取数据的方法有两种,一是下载公开数据,可以从政府、企业、统计局等机构去下载公开数据网页数据抓取。二是通过Python编写网页爬虫,收集互联网的数据。比如我就抓取过:知乎粉丝过万所有用户,咪蒙的211 万的新浪微博粉丝信息,豆瓣8分以上的书籍以及网易云音乐歌单排行榜等等。
虽然我平常撰写数据分析报告大部分都是自己写代码抓取的,但我也有在网上下载过公开数据网页数据抓取。这里我分享几个免费可获取数据来源。当然,如果是程序员的话,也可以学习怎么自己抓取数据,毕竟这样获取数据更灵活。
1.国家数据
这个数据库信息内容涵盖范围全面、详实,并且有些数据已经做好了可视化,所以具有很高的实用性;基本只要和国情相关的信息都会在里边发布;比如地区房价、工业、能源、居民消费总额、房地产投资甚至食品的平均价格网页数据抓取。
国家统计数据库包括历年月、季、年度数据,可通过数据库“搜索”、选择“指标”等方式,方便快捷地查询到历年、分地区、分专业的数据网页数据抓取。是公众快速查阅统计指标及系列数据的更便捷方法。
2.中华人民共和国国家统计局
这个网站的信息是比较宏观的,国家统计局一般只发布全国和分省的宏观统计数据网页数据抓取。但如果想获取市级、地级信息,也可以底部的友情链接中获取。
3.艾瑞咨询
是比较权威的互联网数据咨询集团,主要针对互联网市场网页数据抓取。数据更新比较及时,也很清晰,并且根据数据发表研究报告。
4.CEIC
主要涉及和经济相关信息,更大的优点就是不止可以查中国国内数据,还涉及许多其他国家,缺点就是部分免费网页数据抓取。
仁兄网页数据抓取,有帮助就留个赞呗~~~
添加上方▲技术, 在线咨询
复制微信号
声明
一、本站原创内容,其版权属于本网站所有。其他媒体、网站或个人转载使用时不得进行商业性的原版原式的转载,也不得歪曲和篡改本网站所发布的内容。如转载须注明文章来源。
二、本网站转载其它媒体作品的目的在于传递更多信息,并不代表本网站赞同其观点和对其真实性负责;如侵犯你的权益请告诉我们立即删除;其他媒体、网站或个人转载使用自负法律责任。
发表评论
2022-06-15 02:19:33回复