大家都是在哪些网站找数据?
搬运地址: https://www.zhihu.com/question/27692329/answer/1323609882
链接:https://www.zhihu.com/question/27692329/answer/1323609882
来源:知乎
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。
一、公开数据库
1、常用数据公开网站
UCI:该网站目前维护了436个经典的机器学习、数据挖掘数据集,包含分类、聚类、回归等问题下的多个数据集。
国家数据:数据来源中华人民共和国国家统计局,包含了我国经济民生等多个方面的数据,并且在月度、季度、年度都有覆盖,较为全面。
CEIC:涵盖超过195个国家400多万个时间序列的数据源,最完整的一套超过128个国家的经济数据,能够精确查找GDP、CPI、进口、出口、外资直接投资、零售、销售以及国际利率等深度数据。
万得:被誉为中国的Bloomberg,在金融业有着全面的数据覆盖,金融数据的类目更新非常快,据说很受国内的商业分析者和投资人的亲睐。
搜数网:已加载到搜数网站的统计资料达到7,874本,涵盖1,761,009张统计表格和364,580,479个统计数据,汇集了中国资讯行自92年以来收集的44个行业所有统计和调查数据。
中国统计信息网:国家统计局的官方网站,汇集了全国各级政府各年度的国民经济和社会发展统计信息,建立了以统计公报为主,统计年鉴、阶段发展数据、统计分析、经济新闻、主要统计指标排行等。
亚马逊:来自亚马逊的跨科学云数据平台,拥有免费且开源的数据库,包含化学、生物、经济等多个领域的数据集。
figshare:研究成果共享平台,这里向全世界开放免费的研究成果及科学数据。
github:一个非常全面的数据获取渠道,包含各个细分领域的数据库资源,自然科学和社会科学的覆盖都很全面,适合做研究和数据分析的人员。
2、政府开放数据
北京市政务数据资源网:包含竞技、交通、医疗、天气等数据。
深圳市政府数据开放平台:交通、文娱、就业、基础设施等数据。
上海市政务数据服务网:覆盖经济建设、文化科技、信用服务、交通出行等12个重点领域数据。
贵州省政府数据开放平台:贵州省在政务数据开放方面做的确实不错。
http://Data.gov:美国政府开放数据,包含气候、教育、能源金融等各领域数据。
3、数据竞赛网站
竞赛的数据集通常干净且科研性非常高。
DataCastle:专业的数据科学竞赛平台。
Kaggle:全球最大的数据竞赛平台。
天池:阿里旗下数据科学竞赛平台。
Datafountain:CCF制定大数据竞赛平台。
二、可以获得有价值数据
这里给出了一些网站平台,我们可p a网站上的数据,某些网站上也给出获取数据的API接口,但需要付费。
1.财经数据
(1)新浪财经:免费提供接口,可在新浪财经上获取获取历史和实时股票数据。
(2)东方财富网:可以查看财务指标或者根据财务指标选股。
(3)中财网:提供各类财经数据。
(4)黄金头条:各种财经资讯。
(5)StockQ:国际股市指数行情。
(6)Quandl:金融数据界的维基百科。
(7)Investing:投资数据。
(8)整合的96个股票API合集。
(9)Market Data Feed and API:提供大量数据,付费,有试用期。
2.网贷数据
(1)网贷之家:包含各大网贷平台不同时间段的放贷数据。
(2)零壹数据:各大平台的放贷数据。
(4)网贷天眼:网贷平台、行业数据。
(5)76676互联网金融门户:网贷、P2P、理财等互金数据。
3.公司年报
(1)巨潮资讯:各种股市咨询,公司股票、财务信息。
(2)http://SEC.gov:美国证券交易数据
(3)HKEx news披露易:年度业绩报告和年报。
4.创投数据
(1)36氪:最新的投资资讯。
(2)投资潮:投资资讯、上市公司信息。
(3)IT桔子:各种创投数据。
5.社交平台
(1)新浪微博:评论、舆情数据,社交关系数据。
(2)Twitter:舆情数据,社交关系数据。
(3)知乎:优质问答、用户数据。
(4)微信公众号:公众号运营数据。
(5)百度贴吧:舆情数据
(6)Tumblr:各种福利图片、视频。
6.就业招聘
(1)拉勾:人才需求数据。
(2)中华英才网:招聘信息数据。
(3)智联招聘:招聘信息数据。
(4)猎聘网:高端职位招聘数据。
7.餐饮食品
(1)美团外卖:区域商家、销量、评论数据。
(2)百度外卖:区域商家、销量、评论数据。
(3)饿了么:区域商家、销量、评论数据。
(4)大众点评:点评、舆情数据。
8.交通旅游
(1)12306:铁路运行数据。
(2)携程:景点、路线、机票、酒店等数据。
(3)去哪儿:景点、路线、机票、酒店等数据。
(4)途牛:景点、路线、机票、酒店等数据。
(5)猫途鹰:世界各地旅游景点数据,来自全球旅行者的真实点评。
类似的还有同程、驴妈妈、途家等
9.电商平台
(1)亚马逊:商品、销量、折扣、点评等数据
(2)淘宝:商品、销量、折扣、点评等数据
(3)天猫:商品、销量、折扣、点评等数据
(4)京东:3C产品为主的商品信息、销量、折扣、点评等数据
(5)当当:图书信息、销量、点评数据。
类似的唯品会、聚美优品、1号店等。
10.影音数据
(1)豆瓣电影:国内最受欢迎的电影信息、评分、评论数据。
(2)时光网:最全的影视资料库,评分、影评数据。
(3)猫眼电影专业版:实时票房数据,电影票房排行。
(4)网易云音乐:音乐歌单、歌手信息、音乐评论数据。
11.房屋信息
(1)58同城房产:二手房数据。
(2)安居客:新房和二手房数据。
(3)Q房网:新房信息、销售数据。
(4)房天下:新房、二手房、租房数据。
(5)小猪短租:短租房源数据。
12.购车租车
(1)网易汽车:汽车资讯、汽车数据。
(2)人人车:二手车信息、交易数据。
(3)中国汽车工业协会:汽车制造商产量、销量数据。
13.新媒体数据
新榜:新媒体平台运营数据。
清博大数据:微信公众号运营榜单及舆情数据。
微问数据:一个针对微信的数据网站。
知微传播分析:微博传播数据。
14.分类信息
(1)58同城:丰富的同城分类信息。
(2)赶集网:丰富的同城分类信息。
三、数据交易平台
由于现在数据的需求很大,也催生了很多做数据交易的平台,当然,除去付费购买的数据,在这些平台,也有很多免费的数据可以获取。
优易数据:拥有国家级信息资源的数据平台。包含政务、社会、社交、教育、消费、交通、能源、金融、健康等多个领域的数据资源。
数据堂:提供数据交易、处理和数据API服务,包含语音识别、医疗健康、交通地理、电子商务、社交网络、图像识别等方面的数据。
四、网络指数
百度指数:指数查询平台,可以根据指数的变化查看某个主题在各个时间段受关注的情况,进行趋势分析、舆情预测有很好的指导作用。除了关注趋势之外,还有需求分析、人群画像等精准分析的工具,对于市场调研来说具有很好的参考意义。同样的另外两个搜索引擎搜狗、360也有类似的产品,都可以作为参考。
阿里指数:国内权威的商品交易分析工具,可以按地域、按行业查看商品搜索和交易数据,基于淘宝、天猫和1688平台的交易数据基本能够看出国内商品交易的概况。
友盟+全域罗盘:友盟在移动互联网应用数据统计和分析具有较为全面的统计和分析,对于研究移动端产品、做市场调研、用户行为分析很有帮助。除了友盟指数,友盟的互联网报告同样是了解互联网趋势的优秀读物。
爱奇艺指数:爱奇艺指数是专门针对视频的播放行为、趋势的分析平台,对于互联网视频的播放有着全面的统计和分析,涉及到播放趋势、播放设备、用户画像、地域分布等多个方面。由于爱奇艺庞大的用户基数,该指数基本可以说明实际情况。
微指数:微指数是新浪微博的数据分析工具,微指数通过关键词的热议度,以及行业/类别的平均影响力,来反映微博舆情或账号的发展走势。分为热词指数和影响力指数两大模块,此外,还可以查看热议人群及各类账号的地域分布情况。
除了以上指数外,还有谷歌趋势、搜狗指数、360趋势、艾漫指数等等。
如果对您有帮助,顺手点个赞,鼓励一下,比心~
更多回答
金融财经数据
- 同花顺数据中心:提供股票债券等金融数据
- 和讯数据:提供各种股票、基金、外汇、债券等实时数据,有付费,有免费
- 零壹财经:大大小小的网贷数据、排行榜等
- 金融数据网:提供每日的黄金、汇率、农产品、汽油价格的相关数据
- 萝卜投研:提供股市、证券等数据,多以数据研究报告形式展示
- 金融界:提供股市、融资等各种资金流向数据,以及丰富的财报和研报
- 东方财富网:提供多国的股票、财税、行业、消费等大量丰富的经济数据
- 吉林金融网:提供吉林的融资、市场数据
- 搜狐证券:提供货币、外汇、行业、市场等宏观数据
- CCER经济金融数据库:提供企业财务年度数据、股票收益数据等数据库下载
- 香港金融管理局:提供香港的各种经济及金融数据,以宏观数据为主
- 世纪未来:数据服务平台,提供银行业务研究、金融大数据等各种付费数据
- 新浪财经:提供国内国民经济、行业信息、对外经贸、居民收入等各种宏观的经济数据
- 司尔亚司数据信息有限公司:覆盖超过195+个国家的经济数据库,数据全面但收费
- INSEE数据:法国统计与经济研究院公开数据
- 投中研究院:提供投资领域的分析报告,网站更新频率较高
互联网数据
营销查询:
- 5118 / chinaz:支持查询网站排名及发展趋势、百度收录情况等信息
- 百度指数:百度旗下/以百度网民行为数据为基础的数据分享平台,支持查询需求图谱
- 微信指数:微信旗下/基于微信大数据分析的移动端指数,打开微信→搜索“微信指数”可用
- 移动观象台:基于移动设备用户的操作行为,提供应用、公众号排行等,以及大量数据报告
- 新榜/微小宝/易赞:几款工具比较类似,支持查看公众号排行、看公众号人群画像等功能
- 阿里指数:阿里旗下/反映淘宝平台市场动向的数据分析平台
报告分析:
- 易观智库:199IT导航的母网站,权威的互联网数据平台,涵盖战略新兴产业、电商互联网、共享经济、社交营销、移动互联网以及其他互联网服务的数据及分析报告
- 艾瑞网:高频率更新互联网前沿的新闻资讯、分析报告,旗下包括艾瑞指数、艾瑞咨询等
- 艾媒网:艾媒与艾瑞无关,艾媒网发布的研究报告多偏向移动互联网方向
- CBNDdata:以阿里巴巴的商业数据库为基础,输出产业经济分析报告
- QuestMobile:周期性地发布一些关于APP的研究报告
- 阿里研究院:阿里旗下/发布研究电商等方向趋势的数据报告,内容多与阿里相关
- 360研究报告:360旗下/移动、PC、网站、企业、诈骗等安全领域的研究,以及大数据等非安全领域的研究
- 中国互联网信息研究中心:经国家主管部门批准组建的管理和服务机构,经常发布一些有价值的互联网信息报告
- 中国信通院:针对互联网多个行业的发展趋势,发布白皮书,角度较为宏观
- 中国互联网数据平台:提供全国各地区互联网发展报告、基础数据及研究分析报告,数据及报告偏向学术性研究
- 清博大数据:提供微信、微博、头条榜单数据,各种研究报告、数据报告、舆情报告及行业热点
- 数据观:丰富的前沿行业资讯,及部分研究报告下载
- 腾讯大数据:数据服务平台,提供调查研究、移动互联网及特色数据报告,质量较高
- 大数据世界:提供大数据相关资讯、应用案例、技术方案及资料下载
地理数据
水土气候数据:
- 水土保持生态建设网http://www.swcc.org.cn/
- 黄河风情http://www.yellowriver.org/
- 黄河流域数据中心http://henu.geodata.cn/index.jsp
- 黄土高原水土保护数据库http://www.loess.csdb.cn/
- 数字黑河http://heihe.westgis.ac.cn/Default.aspx?tabid=106
- 大气科学数据库http://data.iap.ac.cn/
- 中国气象科学数据http://cdc.cma.gov.cn/
- 中国气象科学数据共享服务网http://cdc.cma.gov.cn/
- 全球森林土地覆盖动态http://www.fao.org/gtos/gofc-gold/
- FRA 2000http://edcsns17.cr.usgs.gov/glcc/fao/index.html全球森林资源
- NOAAhttp://www.noaa.gov/美国国家海洋和大气管理局
- NCDC http://lwf.ncdc.noaa.gov/oa/ncdc.html美国国家气候数据中心
- 国际水管理研究所http://www.iwmidsp.org/iwmi/info/main.asp
- 气候研究所http://www.cru.uea.ac.uk/
- 植被覆盖数据http://www.vgt.vito.be/
环境数据:
- 黄土区农业与生态环境数据分中心http://loess.geodata.cn/
- 东北黑土农业生态数据库http://www.blackland.csdb.cn/default.asp
- 中国西部环境与生态科学数据中心http://westdc.westgis.ac.cn/
- 西部数据中心http://westdc.westgis.ac.cn/data
- 黄土高原区域数据共享运行服务中心http://loess.geodata.cn/Portal/?isCookieChecked=true
遥感数据:
- 地面站RS地图查询http://cs.rsgs.ac.cn/cs_cn/query/query_map.asp
- 甘肃省基础地理信息中心http://www.cehuiju.gansu.gov.cn/5chcg/giscenter.asp
- 遥感数据网络资源http://ecology.bnu.edu.cn/gejp/student/zhj/webresource.htm
- 中国遥感数据网http://ids.ceode.ac.cn/
- GLCF http://glcf.geodata.cn/etm/Welcome.do
- GIS FORUM http://www.gisforum.net/全球最大的GIS中文门户网站
- 遥感数据共享http://ids.ceode.ac.cn/
其他自然人文数据:
- 地理国情监测云平台 http://www.dsac.cn/
- 中国资源卫星应用中心 http://www.cresda.com/cn/profile.htm
- 中国自然资源数据库 http://www.data.ac.cn/index.asp
- 中国科学院资源环境科学数据中心 http://www.resdc.cn/resdc/first.asp
- 中国地球系统科学数据共享网 http://www.geodata.cn:8086/Metadata/index.jsp
- 国家地球系统科学数据共享服务平台 http://www.geodata.cn/
- PM25.in | PM2.5(细颗粒物)及空气质量指数(AQI)实时查询!:中国空气质量监测实时数据http://pm25.in/
- 国际科学数据服务平台 http://datamirror.csdb.cn/index.jsp
- 原始数据搜索 https://wist.echo.nasa.gov/api
- 中国科学院资源环境科学数据中心 http://www.resdc.cn/resdc/first.asp
- 世界聚集人口数据 http://beta.sedac.ciesin.columbia.edu/gpw/index.jsp
- 光谱数据分析网站 http://modis.gsfc.nasa.gov/
- 美国航空航天局NASA http://daac.gsfc.nasa.gov/
- 城市轨道交通http://www.ntsg.umt.edu/
- 人地系统主题数据库http://webpanda.iis.u-tokyo.ac.jp/
影像数据:
- USGS Earth Explorer:提供Landsat、MODIS等数据
- ESA’s Sentinel Mission:提供Sentinel系列卫星数据,可以下载欧洲航天局所属的影像数据
- NOAA CLASS:提供高品质大气数据集,包括美国国防部(DoD)、极地作战环境卫星(POES)、NOAA的地球静止环境卫星(GOES)以及其他派生数据
- NASA Reverb:提供多种类数据,包括:Aqua, Terra, Aura, TRMM, Calipso, NASA DC, JASON, ENVISAT等
- EOLi:欧洲航天局的地球观测目录和订购服务的客户,通过Java 程序下载数据,支持的数据包括:Envisat, ERS, IKONOS, DMC, ALOS, SPOT, Kompsat, Proba, IRS, SCISAT.
- INPE:提供中巴资源卫星数据
- Bhuvan Indian Geo-Platform of ISRO:提供印度境内的MS-1, Cartosat,,OceanSat and ResourceSat数据以及全球的NVDI数据、南亚国家的CartoDem Version -3R1数据和北印度洋的气候数据
政府数据
- 新加坡政府公开数据:提供新加坡各类数据
- 美国政府公开数据:提供美国全国各类数据
- 法国政府公开数据:法国政府开放数据平台
- 英国政府公开数据:提供英国各类数据
- 国家数据:中国国家统计局权威数据
- 中国统计年鉴:1999年至今中国统计年鉴,国家统计局官网,提供单页Excel文件下载
- 中国统计信息网:全国及各级政府各年度统计公报、年鉴等,为收费数据
- 年鉴汪:全国城市统计数据搜索引擎,浏览免费,下载收费
- 伦敦市公开数据:提供伦敦人口、就业、环境等各类数据
- 国土资源部:国土资源部对外公开的信息报告
其他细分行业数据
- 中研网数据:提供医疗、房产、制造业、服务业、零售消费、车辆等全行业数据
- 中国报告大厅:提供各行各业的基础数据、调查报告、分析报告、预测报告,种类丰富
- CADMAPPER:世界各大城市的DXF文件,原始数据源为OSM,NASA,USGS
- 亚马逊网络服务公共数据集:跨科学云数据平台,包含化学、生物、经济等多个领域的数据集
- Awesome Public Datasets:Github公共数据搜集项目,自然科学、社会科学覆盖较面,包含各个细分领域的数据库资源。
- figshare:数据分析与研究成果共享平台。
- 英国公开数据浏览工具:James Trimble制作的英国数据可视化浏览工具集;
- 数据法国:法国各类数据的可视化呈现;
- DataEye:基于国内游戏、汽车行业数据,进行多角度的行业调查报告撰写发布
- CBO中国票房:基于国内票房数据,统计票房排行、上座率等信息。
- 易车指数:反映国内汽车销售市场,为购车者或汽车从业者提供参考的数据指数
- 高德地图:支持实时查看国内交通情况,此外高德周期性提供一系列数据报告
- 房天下:提供中国指数研究院和CREIS中指数据,展示国内房地产数据情况
- 艺恩:CBO中国票房数据的提供方,提供一些行业数据报告,如动漫IP价值研究报告