开放数据，大数据时代的必经之路
开放数据将会是社会的一个巨大生产力，对于政府、社会、企业、个人都是有利的。开放数据对社会的影响将会是巨大的，是数字时代人类社会自身进化所必须经历的一个阶段，也是人类社会在大数据时代的必经之路。
美国总统奥巴马在2013年5月签署了开放数据政策，并在讲演中指出美国政府的开放数据将会推进商业发展，并帮助企业推出以前无法想象的产品和服务。2013年11月麦肯锡公司发布了开放数据全球最新报告，报告指出全球每年大概有3万亿美元的经济潜力是由教育、能源、以及医疗行业数据开放带来的。
美国FCC消费者和政府事务局局长，乔尔.古林在《开放数据》一书中对开放数据进行了描述；开放数据是指公众、公司和机构可以接触到的，能用于确立新投资、寻找新的合作伙伴、发现新趋势，作出基于数据处理的决策，并能解决复杂问题的数据。它不同于大数据，虽然他们之间的确有重叠。开放数据的宗旨是将提供免费、公开、透明的数据信息。并能适用于我们所需要的任何领域，比如商业经营，政府运作，以及处理各项事务。开放数据的目的是推进民主，让政府公开数据，让人们了解税金的花费，但是开放数据可以创造巨大商业机会，带来良好的社会效益。
简单的讲，开放数据就是政府向社会公布自己所拥有的，并经过脱敏的数据。包括天气数据、GPS数据、金融数据、教育数据、交通数据、能源数据、医疗数据、政府投资数据、农业数据等。这些原始数据本身并没有明显的商业价值，但经过一些公司加工之后，可以产生巨大的商业价值。
开放数据在美国有几千亿美金的市场，包括300亿美金的气象数据，900亿美金的GPS数据，上千亿美金的医疗数据。但政府开放的数据是原始数据，数据自身的商业价值并不大，需要专业的公司对数据进收集，清洗，挖掘，展现，从而形成具有商业价值的数据。在美国有很多公司是依靠加工政府开放数据而实现其商业价值的，例如处理天气数据的Zillow公司，theweatherchannel公司，以及处理GPS数据的Garmin公司，它们的总市值已经超过了一百亿美金。
一开放数据带来的商业机会
1天气数据帮助农业增产
农业生产面临的危险因素很多，但这些危险因素很大程度上可以通过除草剂、杀菌剂、杀虫剂等技术产品进行消除。天气成了影响农业非常大的决定因素。过去的天气预报仅仅能提供当地的降雨量，但农民更关心有多少水分可以留在他们的土地上，这些是受降雨量和土质来决定对。
Climate公司利用政府开放的气象站的数据和土地数据建立了模型，他们可以告诉农民可以在哪些土地上耕种，哪些土地今天需要喷雾并完成耕种，哪些正处于生长期的土地需要施肥，哪些土地需要5天后才可以耕种。其目标是可以帮助农民增加20％-30%的收入，对于每年可以带来5000亿美金税收的美国农业，开放数据创造了巨大的商业价值。
2健康数据的疯狂派对
美国的Archimedes公司利用美国医疗保险和医疗补助中心，以及临床试验数据库和美国国家健康与营养调查开放数据，开发了健康状况模型，并研究了针对不同人群进行医学干预的效果，为病人提供适合他们的治疗方法。
iTriage是由一名急诊室医生创建的公司，是奥巴马最喜欢的案例，它允许病人通过网络或手机输入他们的病症，快速得到他们所需治疗的建议，并获得临近可求助机构的清单。
3 洞察金融危机
2008年的美国金融危机带来了几万亿美金的损失，几大美国投资银行设计出来的复杂金融产品，各个金融公司之间的复杂的股权关系，以及复杂的交易环节和对手最终导致了这次金融灾难。
金融危机的根本原因就是缺乏透明的商业环境，缺乏对数据分析。雷曼兄弟公司由分布在50国家内的2985个合法实体共同运行，这些实体由错综复杂的正规和不正规体混合而成，互相展开贸易，即便监管者怀疑雷曼出了问题，也不可能在公司倒闭前找遍雷曼兄弟近3000家公司及时采取措施。
2010年通过的多德－弗兰克法案，要求金融机构提供更多的数据，特别是在信用违约互换和信用衍生产品上。并要求成立监督金融产品透明度和公开度度消费者金融保护局。借助于金融行业公开的数据，监管机构、投资机构和企业、个人可以进行分析，及时识别出金融行业的系统风险，降低金融危机发生的概率。
4 资源的合理配置
很多企业都在抱怨其找不到合适的技术人才，很多学生也在抱怨工作很难找。利用政府公开的数据，教育机构可以了解人才市场的需求和供给情况，预先帮助学生或培训者选择技能培训，帮助企业做好人才规划。
政府的公开数据还可以帮助企业了解产业投资情况，避免重复投资，商品过剩。利用政府公开的数据，企业可以发现潜在商业机会，合理配置资源，避免投资浪费，得到最优的投资回报率。政府也可以通过开放数据，让市场自己实现资源自主配置，减少行政干预，降低政府的规划风险。
5 开放数据助力创业公司
创业公司NextBus利用公开的交通运输领域数据，在波士顿、洛杉矶、旧金山告诉通勤者，其希望搭乘的Bus何时到达，并让他们知道是否需要在车站等候还是有足够时间来买杯咖啡。要知道在特别寒冷季节和特别酷热的季节，以及在偏远的地区，准时乘坐Bus，避免错过Bus，避免在严寒酷暑中等待Bus，对于乘客是多么重要。
Google一直在使用开放的GPS数据来研制无人驾驶汽车，如果这项技术被推广，以美国为例，将会减少大量的交通事故，为司机节省更多的时间，减少燃油消耗，据估计每年节省的经济花费将会超过2000亿美元。
二政府开放数据的主要范围
1政府收集和制造的科学数据。例如天气数据，政府资助的医疗研究数据。这些数据都可以作为公共资源进行使用。
2政府运行的数据，例如政府支出或大型项目运行数据。开放数据一方面可以增加民众对政府的信任，另一个方面可以给一些公司带来商业机遇。
3监管行业的数据。这些数据由企业提供给政府，并且经过政府二次加工。这些宏观数据对于产业规划，企业的投资战略都有很大影响。
三开放数据应坚持的7项关键指标
1公开性。
除了涉及到隐私、机密、安全和其他限制的特定数据之外，其他数据应该公开
2可得性。
开放数据可以方便地被检索、下载、索引和搜寻
3可叙性。
开放数据可以用多种描述方式帮助使用者应用数据
4可重复使用性。
在获得准许公开的前提下无限制使用开放数据。
5完整性。
尽可能收集好主要信息之后再公开，信息应该是完整的。
6及时性。
开放数据的实用性和可用性要同样快速
7管理公开。
数据公开后，应存在一种联系方式能帮助人们使用每一种数据集。
四中国开放数据之路的挑战
中国政府在2015年5月印发了《2015年政府信息公开工作要点》，推进重点领域信息公开。明确指出2015年重点推进9大信息公开领域，国企信息的公开也是一个亮点。《工作要点》标志着作为中国80%数据拥有者的政府，已经看到了开放数据的力量。鼓励和推动企业、第三方机构、个人对政府公共数据进行加工和应用。利用开放数据作为新的生产力，推动大众创新和万众创新。
但中国大数据商业应用才刚刚开始，大数据商业应用的技术、产品、人才、市场都还在成长过程中，开放数据在中国面临着如下的挑战。
1国家对数据治理还没有完成。很多数据没有集中管理，还是处于信息孤岛状态，这些都是开放数据需要解决的问题。数据治理投资巨大，时间周期较长，都是巨大的挑战。
2一些开放数据还不是电子形式。例如医疗数据和教育数据，在一些地区还处于纸质记录状态，没有形成电子档案。这些数据的电子化也是一个较大的挑战。
3开放数据的脱敏和整合将是一项重大的挑战。特别是国有企业的数据，哪些数据可以公开，哪些数据需要脱敏，如何整合各个地方的数据，这些都是一个挑战
4大数据服务公司和大数据人才匮乏。由于大数据市场刚刚开始，市场上缺少大数据人才和大数据服务公司，公开的数据短时间可能很难产生商业价值，这会影响政府和企业开放数据的积极性，不利于形成良性的大数据商业市场，会影响开放数据项目的持续发展。
五有关开放数据一些建议
人类社会即将进入数字时代，开放数据将会是巨大的生产力。政府已经认识到了开放数据的价值，会持续推动政府和国企的数据开放。即使短时间内开放数据的投资看不到商业价值，但其未来经济价值会促使政府坚持开放数据的政策，持续进行投资。就像中国的高速公路，开放数据是另外一条信息高速公路，将数据转化为资产，转化为巨大的社会生产力，帮助企业实现更大的商业价值。
对于数据拥有者的政府，需要在保障公共安全和个人隐私的前提下，完成数据治理和数据整合，逐步向社会开放数据，并提高数据质量，公开面向所有个人和企业，有效利用政府科技资金，让利益相关企业和个人参与到开放数据项目中，鼓励创新，接受外部挑战，利用集体智慧，实现数据最优选择。
对于国有企业，需要在保护自身商业利益的前提下开放数据，帮助各自产业链企业的发展。同时开放数据也可以帮助其自身进行产业规划，进行有效投资，发现市场机会和风险，稳健经营，科学决策。企业可以利用开放数据提高生产效率，减少资源浪费，降低决策失误风险。产业链企业的良性发展，也会推动国企自身发展和进化，提高竞争力，优化企业经营，实现产业共赢。
对于企业家，开放数据将会作为新的资源，帮助企业进行发展，聚焦新的商业机遇，特别是在开放数据影响较大的保健行业，金融行业，能源行业，教育行业。
数据服务公司可以利用开放数据，帮助消费者挖掘数据的潜在价值，为企业和政府提供具有价值的商业数据。
对于经营中的公司，可以利用开放数据评价商业伙伴和潜在投资，通过提供数据来树立消费者的忠诚度，学会在透明的商业社会中进行经营，寻找公共或私人合作的机会，专注自身产品和客户，为消费者提供更好的产品和服务。
总之，开放数据将会是社会的一个巨大生产力，对于政府、社会、企业、个人都是有利的。开放数据对社会的影响将会是巨大的，是数字时代人类社会自身进化所必须经历的一个阶段，也是人类社会在大数据时代的必经之路。
CDA数据分析师考试相关入口一览（建议收藏）：
▷ 想报名CDA认证考试，点击>>>
“CDA报名”
了解CDA考试详情；
▷ 想加入CDA考试题库，点击>>> “CDA题库” 了解CDA考试详情；
▷ 想学习CDA考试教材，点击>>> “CDA教材” 了解CDA考试详情；
▷ 想查询CDA考试成绩，点击>>> “CDA成绩” 了解CDA考试详情；
▷ 想了解CDA考试含金量，点击>>> “CDA含金量” 了解CDA考试详情；
▷ 想获取CDA考试时间/费用/条件/大纲/通过率，点击 >>>“CDA考试官网” 了解CDA考试详情；
