下面分享的大数据源网站不仅有开源可直接下载数据源的网站,还有需要自己爬取的网站,包括金融、电商、交通、移动APP、传媒类等共20多种,各有优势和行业针对性,大家可按需收藏。国家社会类企业信息类经济类互联网类传媒类电商类移动应用类交通出行类
有哪些获取海量数据源的网站?
下面分享的大数据源网站不仅有开源可直接下载数据源的网站,还有需要自己爬取的网站,包括金融、电商、交通、移动APP、传媒类等共20多种,各有优势和行业针对性,大家可按需收藏。
国家社会类企业信息类经济类互联网类传媒类电商类移动应用类交通出行类
一、国家社会类:
1、统计局
这个网站可谓是要啥有啥,如农业,生产,经济,教育等等,可以获得具有权威的数据,而且覆盖面很广。可以找到很多宏观层面的信息,GDP、人口、就业、收支等
如,我想要北京市2017年全体居民收支:
此外,它还可以链接到其他国家的统计局:
但问题也是有的,虽然全面,但是不精准,如果你想查某一个细分的数据的话,可能没办法满足:
如,主要国家年度数据…..除了内陆和,其他的我真的不怎么关心……
2、数据中心
仍然有点多而不精,但是!爽的地方在于,它有中英文以及多种格式!直接下载,就是Excel!不用自己手动粘贴!
而且,相比国家统计局,它的分类更加多样化,也就是说,数据更加精细一些。
3、经合组织开放的数据网
包含参与经济合作与发展组织的36个国家的数据,英文界面。数据也包含农业、经济、教育、能源等等,也具有多个版本可以下载使用(但没有Excel),分类也相对有心和精细。
感受下:
二、企业信息类:
针对一些公司,可以通过他们注册/上市的统计网站获得资料:
1、EDGAR
美国SEC规定上市企业的公告要在EDGAR上公开,因此可以在这个网站上找到这些上市公司的数据,信息严谨,英文界面。
2、巨潮资讯:
仍然是针对上市公司,这个网站可以拿到股票每日的数据,如下:
它可以按照行业、地区、指数、市场等分类来查询,虽然简单了些,但好在便捷。
三、经济类
1、Bloomberg
Bloomberg (彭博)是为大多数大型金融机构提供服务,用户通过“彭博专业服务”可以查阅和分析实时的金融市场数据以及进行金融交易。
彭博终端是一套让专业人士访问“彭博专业服务”(Bloomberg Professional Service)的计算机系统。彭博终端基于客户—服务器架构建立,服务器是一个多处理器的Uni台,终端用户使用的客户端是一个Windows程序。
2、FactSet
FactSet研究系统是一家金融数据和软件公司,为全球主要金融机构的分析员、证券管理员和投资银行家提供金融信息和分析软件。FactSet核心的优势主要集中在公司的财务数据,这也是为什么它成为投行Anaylst必备技能之一的原因。
FactSet在投行中的使用频率是Daily basis,而且FactSet个性化的界面,强大的功能,Excel plugin 也不差。
3、新华社-全球经济数据
主要介绍的是各国家宏观经济指数等。
4、中财网
信息面广,查找也很方便。
5、世界银行
各个国家的数据都在上面,不只有经济,还有人口、入学率等等数据。它的优点在于,数据采集时间长,数据样本量大,可以看到一个可信度较高的随时间变化的趋势。
四、互联网类
1、CNNIC互联网络信息中心
里面发布很多和互联网使用相关的信息,像网民总数、上网、网络应用、城镇农村上网状态等。
2、SimilarWeb
拥有各国各大网站的信息数据,全面性与可靠性都很好,唯一的缺点就是收费.....
3、NET MARKETSHARE
也可以看到主流的互联网软件市场份额数据。上面是折线图,下面有数据。
4.Statcounter
-media-stats
可以看到各浏览器、软件以及APP等的市场份额数据,可以按照区域、平台划分,也可以相互对比,关键是免费!
5、镝数聚
数据聚合类平台,提供了全行业的数据,查数据的时候可以更加省心,在这里可以免费下载大量各行业的统计数据和报告。
可以点击首页数据分类查询,也可以通过关键词有目的的检索。
网站还将报告中的小数据进行了拆分,也就是说再不用翻阅长篇报告找数据了,对于报告和数据之间的交叉查询非常方便,看了一下,这个平台,大部分的报告都可以免费下载。
五、电商类
1、阿里研究院——阿里价格指数
以大类划分数据,数据不多,配有数据解读。
但这个网站中还有一些相对详细一些的价格报告,虽然没有直接把数据列出来,但图表中也有一些数据可以供参考。
六、传媒类
1、BOM票房数据
很强大!不解释
(只要留心,还会发现好资源,)
2、CBO票房
数据也非常全了,不仅有票房榜,还有排片统计、购票指数等等。
3、收视率排行
有日、周、月、年的25名的收视率以及市场份额数据。
七、移动应用类
1、艾瑞数据
该网站免费公开的部分可以提供一些简单的APP使用数据以及人群、区域等分析。
2、Talking Data
它是一个监测平台,可以查询APP的相对活跃度、用户覆盖程度等,信息和数据很全面细致,而且可以直接帮你分析好!
但如果想要get详细信息,收费…..
3、七麦数据
它是针对苹果应用进行搜索关键词优化的服务网站。主要是看排行榜,但数据真的不多,如果需要什么数据需要自己搜集整合。
如,搜索WPS office的情况:
4.新榜
这个不用解释了吧,新媒体数据的经典来源之处,除了部分需要收费外,其他都没得挑。
八、交通出行类:
1、高德地图路况
这款免费版的网站,有100个交通发达城市,可以查询区域/商圈拥堵排名、道路状况数据以及季度指数等,有交通报告、交通热力图等等,信息覆盖面较全。
2.北京交通发展研究所
实时路况的数据很全,而且还有历年交通运行报告,里面不仅有机动车数量数据、出行,还有年均/日均车辆量、客运量等等。
不过,如果你想学习爬虫的话,我这也有教程,全的~
怎么查找统计年鉴数据?
国家统计局网站上的都是全国的数据,如果要查省级的年鉴统计数据,得去省级的统计局,比如某某省统计局网站,上面有的。不过因为各地方的电子市政系统上线时间不一定,所以很多都只有近8-10年的数据。
实体书的年鉴可以去国家图书馆查阅。电子版的年鉴可以上数据圈论坛看看,上面年鉴相关的资料还蛮全的,省级的大部分都有统计到1980年左右的。
移动手机上网记录运营商保留多久?
一般是半年。运营商一般半年就会删除一次上网记录。
一般网站可以通过服务器的访问记录、网站安装的访客统计代码、客服代码中,都可以获得访客的访问时间来源浏览页面、时长等信息,但一般是记录了ip,不知道访客是谁,网站会员登录的,可能会被网站后台记录。
大型网站,如淘宝,可以自己设定程序进行大数据分析,通过访问页面、查询产品、消费习惯判断出更多的个人爱好,然后网站可以推荐出最能引起该用户的产品。
环比和同比什么意思?
先解释下环比与同比,环比就是7月相对与6月涨了多少,或者2017年相对2016年涨了多少,就是当期与前一期的比。再说同比,我们讨论价格指数大多说同比,比如CPI,当然房价不在CPI核算内容里面,同比就是2017年的7月相比于2016年的7月增长了多少。
再说楼主这个表格,首先需要楼主确定表格的来源,是新闻网站发布?还是统计局官方数据?抛开数据来源的可靠性,再说说这里统计的新建商品住宅价格,也就是新开盘的商品房,价格指数没有作者以为变化大主要可能有以下几点原因:
1、统计的是新建商品住宅,也就是去年开盘的楼盘,今年已经不再统计范围内了。所以并不是同一个盘的比较。
2、所有新开盘毛坯房相关部门会有最高价的限定的,去年7000开盘买,今年10000,而这个10000价格并不是直接向开发商购房的价格,而是二手房价格,哪怕是新房,也算二手交易市场了。这种不是新建商品房并不在作者所列这个表格的统计范围内。
3、第一条说了是新建房,这就造成一点问题,2014年新盘可能大多在3环附近,等2015年开盘可能就在4环为主了,等到2020年新房可能就是都在郊区了,所以当3环的房价从7000涨到10000时,新开盘的4环房价也涨了不少,但因为是4环,可能就是7000左右,当新开盘的房子大多在这个位置时,统计所得平均房价自然也就7000左右,可能在过5年,3环涨到20000了,新开盘还是7000左右,因为新盘在8环外了。也就是说这个同比指数并不是对同一房源的价格对比,存在地理位置上的差异,所以价格指数变化不大。
4、真的关心房价就建议关注二手房价格,这个是真正反映房价市场变化的。
从互联网行业大裁员现象?
互联网企业裁员,这显然说明这个行业目前进入了衰退期,大环境不支撑其快速的发展。由于监管已经逐步的加强,也不允许资本盲目的投资。在这种情况下,很多的资金已经转出了互联网产业,在发展没有前途的情况下,当然要裁员了。
由于我们现在已经实行了市场经济的体制,所以任何一个政策的都必然要让市场来承受全部的后果。老百姓的生活不确定性增加了。
所以乡村振兴就显得尤为重要了,让没有工作的人回到自己乡村的老家,自己至少在家乡还有一点房子、有一点地,能够有一碗饭吃。
如果农村的老百姓全部把自己的家业都扔掉了,就是倾其所有的在城里面买一套房子的话,那真的是要活活饿死的。因为没有什么活可以干了。