Cloudera Distribution including Apache Hadoop是由Cloudera公司开发的Hadoop发行版,它提供了丰富的功能,例如Hive,Pig,Impala等。CDH还提供了Cloudera Manager管理工具,可以方便地部署、管理和监控Hadoop集群。Cloudera 也是最早开展商业大数据服务的公司。也是 Apache Hadoop 的主要代码贡献者
官网地址: https://wwwera/
HDPHortonworks Data Platform是Hortonworks公司开发的Hadoop发行版。2018年Cloudera 和 HortonWorks 宣布合并,这样全球范围内大数据商业服务的格局基本已定。
官网地址: https://wwwera/products/hdp.html
TDH星环科技推出的用于数据仓库和交互式分析的大数据平台
官网地址: /d/file/gt/2023-10/0cbhdgnxstz Ambari
开源的Web应用程序,用于部署、管理和监控Hadoop集群。它提供了一个易于使用的界面,可以轻松地监视和调试集群中的各个组件
官网地址: https://ambari.apache/index.html
FunsionInsight HD华为大数据平台,目前已经没有开源独立,已经集成到华为云MRS中
各种云平台百度云: BMR,
AWS: EMR,
阿里云: MaxCompute
目前CDH和HDP已经合并,并且闭源需要订阅了。想找到一个开源免费的平台并不容易,目前也有一些小众的平台,但是仍有很长的路要走。如果有更好的平台,请留言探讨,谢谢。
行业研究需要的数据来源大致分为四种(后附数据大全链接):
一,数据搜索引擎集合了全行业或垂直领域的大量数据,可以通过精准或模糊搜索查找到十分精确的数据,下载结构化的数据表。
举个例子,镝数聚:
镝数聚首页有全面又详细的数据分类板块,12大领域,100+行业数据,还有打包好的热门行业数据包。
比如题主做k12的研究,可以在首页搜索“k12”:
能够查找到一批k12相关的数据。
在数据详情页可以预览可视化效果以及下载源数据格式。
二,宏观数据平台汇集了全国/全球的宏观统计数据,来源通常是各国统计部门或大型组织,权威性高。
举个例子,国家统计局:
在年度数据页面里可以很清晰地按照分类树查找需要的行业数据,还是拿教育来举例:
可以在教育大类下的各小类中检索需要的数据。如果连这里都没有的数据,那就不要指望别的网站还有了。
三,综合型数据平台数据的领域相对中观,多由专业的咨询公司等提供,许多是抽样调查数据,但关心的领域既广又深。
举个例子,阿里云天池:
是一个全球性的大数据科研平台,有全球的数据组织机构等提供可供学术用途的数据。
在数据详情页可以选择下载需要的数据。
四,行业细分数据平台集中于某一特定行业,挖掘更加专业的数据。
再举个例子,房天下:
从房市的宏观数据到各地成交价的中观数据都能查询到。
最后,附上小镝为大家准备的150+各类数据网站大全!
一、数据搜索引擎Statista:全球范围内的数据检索,宏观微观都有,部分收费
镝数聚:6000+数据机构,12大领域,100+行业数据,绝大部分免费既可下载原始数据,也可查看可视化效果
CEIC:主要是宏观数据,部分收费
Our World in Data:民间组织办的网站,免费,多是一些人口统计数据
中国报告大厅:主要是文本+图表形式的宏观数据,结构化稍差
京东万象:只要给钱,什么都能查
年鉴汪 :专门查询我国年鉴数据
二、宏观数据平台1.政府国家统计局/d/file/gt/2023-10/n22hopedntu.htm 不愧是国字号,谁用谁知道
中国统计年鉴 http://www.stats.gov/tjsj./ndsj/
各省统计年鉴 http://wwwstats/tjnj/
各地统计公报 http://wwwstats/tjgb/
各地经济普查公报 http://wwwstats/jjpc/
人口普查公报 http://wwwstats/rkpc/
农业普查公报 http://wwwstats/nypc/
生态环境部 /d/file/gt/2023-10/lk1r01wjhe5.shtml http://data.cma/
财政部 http://www.mof.gov/gkml/
证券监督管理委员会 /d/file/gt/2023-10/3qepmm2argr http://www.nhsa.gov/col/col7/index.html
卫生健康委员会 http://www.nhc.gov/wjw/yueb/list.shtml
人力资源和社会保障部 http://www.mohrss.gov/SYrlzyhshbzb/zwgk/szrs/
中国人民银行 /d/file/gt/2023-10/zix1lzk2ol5 http://www.mofcom.gov/article/tongjiziliao/?1265212605=3357678634
海关总署 http://www.customs.gov/customs/302249/302274/302277/index.html
民用航空局 /d/file/gt/2023-10/yiknn524whn.html http://wwwnic/hlwfzyj/hlwxzbg/hlwtjbg/
国家各部门数据合集 https://data.stats.gov/staticreq.htm
美国
美国政府公开数据 https://www.data.gov/
国家卫生统计中心 /d/file/gt/2023-10/h5dajfoay4b https://www.nassda.gov/Data_and_Statistics/index.php
国家教育统计中心 https://nces.ed.gov/
国家司法统计局 /d/file/gt/2023-10/qovdhehk44r.cfm https://wwwmerce.gov/data-and-reports
能源部 https://www.energy.gov/
食品药物管理局 https://www.fda.gov/industry/fda-basics-industry/search-databases
交通运输部 https://www.bts.gov/
财政部 https://home.treasury.gov/
美联储 https://fred.stlouisfed/
英国 英国政府公开数据 https://data.gov.uk/
法国 法国政府公开数据 https://www.data.gouv.fr/en/
俄罗斯 俄罗斯统计局 https://rosstat.gov.ru/
澳大利亚 澳大利亚统计局 https://www.abs.gov.au/
日本 总务省统计局 http://www.stat.go.jp/
韩国 韩国统计局 /d/file/gt/2023-10/de4m4ba3jfa 联邦统计局 https://www.destatis.de/EN/Home/_node.html
各国统计网站合集
http://www.stats.gov/tjgz/wzlj/gwtjw/201311/t20131104_452221.html 如果需要本答案未列举的国家的数据可以戳进来找
2.国际组织联合国
各国/各地区概况 http://data.un/
在线统计月报 https://unstats.un/unsd/mbs/app/DataSearchTable.aspx
世界银行公开数据 /d/file/gt/2023-10/xx2jdkicbaj 这个数据库非常大,差点以为是独立组织
世界贸易组织 https://www.wto/english/res_e/statis_e/statis_e.htm
商品贸易数据 /d/file/gt/2023-10/ecedibwk53w.htm https://www.imf/en/Data#data
人口司 https://www.un/development/desa/pd/
人口与社会统计 https://unstats.un/unsd/demographic-social/products/
国际劳工组织 /d/file/gt/2023-10/yyrxqipnxiv https://www.unfpa/data
儿童基金会 https://www.unicef/research-and-reports
教科文组织 https://zh.unesco/
环境统计 https://unstats.un/unsd/envstats/index.cshtml
粮农组织 http://www.fao/statistics/zh/
农业发展基金会 https://www.ifad/en/
世界卫生组织 https://www.whot/data
工业发展组织 https://stat.unido/?_ga=2.236415622.602436858.1613809728-1125194789.1613809728
国际原子能机构 https://www.iaea/
国际民航组织 /d/file/gt/2023-10/sl5aidvb34z https://www.undp/content/undp/en/home/
可持续发展目标 https://unstats.un/sdgs/indicators/database/
千年发展目标 /d/file/gt/2023-10/nsta05nibhf “千年发展目标”和“可持续发展目标”是联合国提出的消除贫困、实现平等等目标的中长期计划,收录的数据也与之相关。如果需要早年的数据可以进入千年发展目标网站,需要近十年数据的可以进入可持续发展目标网站。顺便,我国消除绝对贫困的壮举也提前实现了可持续发展目标的要求。
联合国数据库目录 https://www.un/zh/databases/ 更像是个搜索引擎
联合国内部各组织链接合集 https://www.unicef/chinese/27618.html 联合国有非常庞大的组织架构,如果以上列到的平台没有你需要的,可以戳进来看看其余组织是否有可能发布你需要的数据。
亚太经合组织 http://www.oecdchina/statistics/index.html
石油输出国组织 https://www.opec/opec_web/en/data_graphs/40.htm
国际结算银行 https://www.bis/
欧洲数据门户 https://www.europeandataportal.eu/en
欧盟统计局 https://ec.europa.eu/eurostat/web/main/data/database
亚洲发展银行 https://www.adb/what-we-do/data/main
欧洲中央银行 https://www.ecb.europa.eu/stats/html/index.en.html
非洲发展银行 /d/file/gt/2023-10/lvqlqrgzbx2 https://www2.deloitte/cn/zh.html
普华永道 https://wwwccn/zh.html
埃森哲 https://www.accenture/cn-zh
麦肯锡 https://www.mckinsey/insights/
毕马威 https://home.kpmg/cn/zh/home/insights.html
贝恩 https://www.bain/new_list.php
尼尔森 https://www.nielsen/us/en/insights/
益普索 https://www.ipsos/zh-cn
2.数据服务商是专门做数据调查、发布数据报告的平台,关注领域各有侧重,不过数据大多以图表的形式呈现,源数据不太好找。
中研网 https://www.chinairn/data/
头豹 https://www.leadleo/
艾瑞 https://report.iresearch/
Mob研究院 https://www.mob/mobdata/report
前瞻产业研究院 https://bg.qianzhan/
艾媒 https://www.iimedia/c400
36氪 https://36kr/academe
企鹅智酷 /d/file/gt/2023-10/gmeo0leicsh /d/file/gt/2023-10/rcn0zgumtj4 /d/file/gt/2023-10/lndds3vx4h3.html https://www.iyiou/
阿里数据 /d/file/gt/2023-10/wbq0cpy24gr.htm Mobile /d/file/gt/2023-10/vq4zkp1rc1t /d/file/gt/2023-10/fg25nbzzlvy https://qianfan.analysys/refine/view/analyseList/analyseList.html
参照系 /d/file/gt/2023-10/bywt5uisspe https://getui/college
3.大数据平台阿里云天池 /d/file/gt/2023-10/i5zt3k21eum http://wwwdata/
AWS https://registry.opendata.aws/
农业大数据情报服务平台 http://wwwdata/
各行业数据平台合集 http://hao.199it/
4.指数网站Google Trends https://trends.google/trends/?geo=US
百度指数 /d/file/gt/2023-10/cgecd2cm4km.html 微信中搜索“微信指数”小程序
微博指数 /d/file/gt/2023-10/sdzvl3awmqo /d/file/gt/2023-10/ojx35nammjl.html http://istock.jrj/
慧博投研资讯 /d/file/gt/2023-10/1v03ixoix54.htm /d/file/gt/2023-10/3oxyo1mk2gh http://www.cbnri/publication/qijianbaogao/
东方财富网 http://data.eastmoney/center/
同花顺 http://data.10jqka/
网易财经 /d/file/gt/2023-10/45fagopyakr https://finviz/
动脉橙 /d/file/gt/2023-10/tpz15rldiob https://www.chinaventure/report/list.html
企查查 /d/file/gt/2023-10/0zeml4pa4qz https://www.tianyancha/
披露易 https://wwwexnews/index_c.htm
苏宁金融研究院 http://sif.suning/article/list/201/1
2.汽车中国汽车工业协会 http://auto-stats/
易车 https://www.yiche/zhuanti/zhishu/zshz/
达示数据 http://www.daas-auto/supermarket_data_De.html
3.互联网中国互联网协会 /d/file/gt/2023-10/d1ilflilxip /d/file/gt/2023-10/mxpmtcunxki /d/file/gt/2023-10/qi5pnfsyrh1 /d/file/gt/2023-10/mib1dgb1zan http://www.cbdio/node_2782.htm
199IT http://www.199it/
IT桔子 https://www.itjuzi/
4.交通出行高德地图 /d/file/gt/2023-10/rroc4srol0n.do http://gslk.gaosubao/ditu//
百度地图 /d/file/gt/2023-10/dr2i2wxycx0.html /d/file/gt/2023-10/skjfb3ocblo http://wwwgchan/data/
世联行 https://wwwunion/slyj/list_9.aspx
贝壳研究院 https://research.ke/analysis/
6.消费中国食品工业协会 http://wwwfia/archives/category/hangyetongji
美团研究院 https://aboutituan/research/home
消费站 /d/file/gt/2023-10/vqgcesklroi /d/file/gt/2023-10/2aexyd1w1cs.html http://www.films/boxoffice
猫眼专业版 /d/file/gt/2023-10/13byyo3tgzx http://www.gz-data/html/new.html
央视市场研究 http://www.ctrchina/index.asp
8.其他中国产业信息网 https://www.chyxx/data/
黑板洞察 https://www.heibandongcha/
Figshare https://figshare/
Health Data https://healthdata.gov/
UNAIDS http://aidsinfo.unaids/
公共卫生科学数据中心 http://www.phsciencedata/Share/
中国棉纺织行业协会 http://ccta/tjjq/
中国半导体行业协会 http://www.csia/Index.asp
有了数据之后,千万不能浪费,还是得需要通过数据分析工具去研究,让数据产生价值,给大家推荐1款好用的工具。
镝数图表——0门槛在线可视化工具
这个网站只需要简单粘贴数据就可以生成好看图表,包含的图表模板非常丰富,是市面上支持图表种类最全面的工具:不管是常见的条形图、雷达图,还是专业的甘特图、桑基图,以及今年爆火的玫瑰图,都可以在镝数图表上零代码完成。数据图表支持导出为GIF动态图、视频等多种样式。
除此之外,还有非常多带有设计元素的可视化模版,贴合媒体传播、企业办公、商务营销多类场景,目前是完全免费使用,基本上10分钟可以搞定一张长图。
点击小编主页免费使用,可以快速做同款哦~
原文《集团企业数字化转型大数据湖及应用平台平台项目建设方案》PPT格式。
来源网络,旨在交流学习,如有侵权,联系速删,更多参考公众号:优享智库
集团企业数据湖及应用平台项目建设背景“十四五“规划愿景
•响应国家“十四五”规划提出的““加快数字发展,建设数字中国”,推进“三医”联动持续深化改革,以“守护生命与健康”为使命,筹划建设“集团城市健康中心”,打造以传统中医药理论为基础,依托现代科技赋能,基于用户关系经营,通过大数据、实体医疗、网络诊疗平台、药事服务平台和 新零售平台等提供防、养、调全渠道多场景的健康产品、健康内容、健康定制和健康管理服务,打造一站式解决目标用户健康问题的创新型健康服务中台。
集团战略要求
•集团战略管控数字化;
•业务运营数字化;
•产业协同数字化;
•管理支撑数字化。
数据管理和业务应用要求
•数据分散:基础数据分布在各个应用平台中,应用开发商整合能力差;
•数据管理能力较弱:缺乏统一的数据标准管理、数据质量管理、数据开发管理、数据服务管理、数据安全管理和监控运维管理等;
•数据利用能力不强:现有数据无法适应新业务需求,同时历史数据无法并入新的系统再利用。
建设背景
总体建设目标以“守护生命与健康”为使命,推动企业数字化转型,
建立集团数据湖及应用平台,全面提升集团智慧化经营决策管理能力。
借助5G、云计算、大数据、物联网和人工智能等技术,重点解决战略闭环、业务运营、管理支撑等业务系统间数据不通和数据孤岛等问题,破解数据“汇”、“存”、“管”、“用”、“营”等难题。通过建立集团统一的数据湖及应用平台,提供数据汇聚、存储、治理、分析、服务、共享、应用和运营能力,夯实企业大数据智能化、经营管理智能化、业务作业智能化、医疗健康行业运营智能化的“4智”应用基础支撑能力,构建跨业务、跨部门和跨层级的融合应用场景,形成企业“数智化”运行的智能中枢,实现经营状态的实时监测,经营数据的辅助决策、指标的智能预警预测,关键问题的智慧决策,打造集团运行管理闭环与智慧化决策能力 。
总体建设目标
规划数据湖及应用平台框架体系、搭建技术基础平台,实现C端用户数据采集、入湖、治理和共享服务,以及支撑企业务+(私域流量业务)综合分析和智能化应用,总结经验教训,为集团数据湖及应用平台的整体建设奠定基础。
建设目标
建设总体思路建设思路
数据湖及应用平台总体架构(构建六个平台、四个中心、三个保障体系,一个统一门户)更多参考公众号:优享智库
被执行人信息查询防类。
朋友们大家好,欢迎来到专查。今天给大家介绍一下专查里面的被执行人综合查询。就是可以输入查询人的基本信息,查询全国失信姓名身份证号以通过企业查询出他是不是被00人。数据内容包含案号姓名执行法院、裁决法院省份被00人的情况。发布时间身份证号。
专查有一个重要的功能就是样品数据,我们来看一下样品数据,如果样品数据是你满意的,反过来在这里输人基本的信息即可。专查还有很多的功能。企业的被执行查询,企业对公账户验限制高消费查询你法人信用代码。企业对公账户私信老000单查询去人信用代码。企业实名认证里边的手机号实名制查询码。身份身份证实名制和身份证人脸对比对比。身份i专查是一个综合的信息查询平台对比,身份证实包括很多的实用的查询功能片对比。身份证实名使用专查请关注我的主页照片对比。身份证实置顶视频或不会的私信我照片对比。谢谢大家份证号人脸照片对比。