大数据是污染者还是环保者,这个问题,就如《纽约时报》在其之前发表的一篇文章中指出的那样:所有的硬件都在加大马力全力运作,甚至包括工业冷却设备和备用柴油发电机排放到大气中废气和其他污染物。同时,即使数据中心运营商持续奖励那些节能措施,连续正常运行时间超过其能源效率的运作经常在满功率运行,但仍然有许多服务器明显处于闲置状态或明显未充分利用。
随着数据量的不断增长,也将由此产生相当数量的数据中心带来的污染。这一点,正如《纽约时报》所一针见血的报道的那样,明显与信息产业的时尚、高效率和环保的形象不符。
我并不完全同意这一评估。是的,云计算时代的数据中心确实明显比之前的一个普通的家庭甚至是大的城市公寓大楼制造了更严重的污染。但总体而言(即使《纽约时报》也认可)所有的数据中心所消耗的国家的能源资源仅为2%。而且,我们还有很长的路要走,数据中心行业在提高数据中心的效率方面已然有了显著的进步。
到更具体的大数据,通过采用部署Hadoop等一系列的措施,硬件效率正在改善。根据上月的一份研究报告显示。其中一个是 VMware公司的最新开源Serengeti项目,使管理员能够部署在现有的硬件上部署Hadoop虚拟化。这既提高效率,同时又避免了购买新的硬件的需要。
另一个项目是Pervasive Software的DataRush产品:
DataRush和RushAnalyzer抽象出来的复杂并行Hadoop作业,能够让用户实时监控I/O和CPU使用情况,并减轻内存的限制。最终能让服务器的利用率高达80%,并且能够更迅速和反复进行大数据分析。
《纽约时报》忽略的另一点是,大部分数据分析专家结合气候变化和环境进一步进行的可持续发展研究都是由这些数据中心所支持的。例如,美国航天局所建立的气候模拟中心,建立一个自定义的大数据平台收集了多达数PB的气象资料,以更好地预测和理解全球气候变化。NCCS数据中心消耗了大量的电力,但研究人员通过大数据分析发现的却是可能导致限制或甚至扭转全球变暖的方法。我想说,这只是一个公平的交易。
当然,并不是每一个大数据项目的目标都是促进更大的利益。但有一些这样的项目,在气候科学以及医疗和教育行业。
我很赞赏《纽约时报》针对这一问题进行重点讨论。但是让我们保持现实的观点。大数据的确排放了大量的污染物在大气中,但大数据行业也正在发展更有效的计算方法,并解决一些最棘手的环境所面临的挑战,人类将有可能弥补以上任何数据中心操作,更高效的计算,将直接影响大气环境。
数据分析咨询请扫描二维码
数据分析涉及多个方面的学习,包括理论知识和实践技能。以下是数据分析需要学习的主要方面: 基础知识: 数据分析的基本概念 ...
2024-11-22数据分析适合在多个单位工作,包括但不限于以下领域: 金融行业:金融行业对数据分析人才的需求非常大,数据分析师可以从事经 ...
2024-11-22数据分析是一种涉及从大量数据中提取有用信息和洞察力的过程。其工作内容主要包括以下几个方面: 数据收集与整理:数据分析师 ...
2024-11-22数据分析师需要掌握多种技能,以确保能够有效地处理和分析数据,并为业务决策提供支持。以下是数据分析师需要掌握的主要技能: ...
2024-11-22数据开发和数据分析是两个密切相关但又有所区别的领域。以下是它们的主要区别: 定义和目标: 数据开发:数据开发涉及数据的 ...
2024-11-22数据架构师是负责设计和管理企业数据架构的关键角色,其职责涵盖了多个方面,包括数据治理、数据模型设计、数据仓库构建、数据安 ...
2024-11-22数据分析师需要具备一系列技能,以确保能够有效地处理、分析和解释数据,从而支持决策制定。以下是数据分析师所需的关键技能: ...
2024-11-22数据分析师需要具备一系列技能,以确保能够有效地处理、分析和解释数据,从而支持决策制定。以下是数据分析师所需的关键技能: ...
2024-11-22数据分析师需要具备一系列的技能和能力,以确保能够有效地处理、分析和解释数据,从而支持业务决策。以下是数据分析师所需的主要 ...
2024-11-22需求持续增长 - 未来数据分析师需求将持续上升,企业对数据驱动决策的依赖加深。 - 预测到2025年,中国将需要高达220万的数据人 ...
2024-11-22《Python数据分析极简入门》 第2节 4 Pandas条件查询 在pandas中,可以使用条件筛选来选择满足特定条件的数据 importpanda ...
2024-11-22数据分析师的工作内容涉及多个方面,主要包括数据的收集、整理、分析和可视化,以支持商业决策和问题解决。以下是数据分析师的一 ...
2024-11-21数据分析师必须掌握的技能可以从多个方面进行归纳和总结。以下是数据分析师需要具备的主要技能: 统计学基础:数据分析师需要 ...
2024-11-21数据分析入门的难易程度因人而异,总体来看,入门并不算特别困难,但需要一定的学习和实践积累。 入门难度:数据分析入门相对 ...
2024-11-21数据分析是一项通过收集、整理和解释数据来发现有用信息的过程,它在现代社会中具有广泛的应用和重要性。数据分析能够帮助人们更 ...
2024-11-21数据分析行业正在迅速发展,随着技术的不断进步和数据量的爆炸式增长,企业对数据分析人才的需求也与日俱增。本文将探讨数据分析 ...
2024-11-21数据分析的常用方法包括多种技术,每种方法都有其特定的应用场景和优势。以下是几种常见的数据分析方法: 对比分析法:通过比 ...
2024-11-21企业数字化转型是指企业利用数字技术对其业务进行改造和升级,以实现提高效率、降低成本、创新业务模式等目标的过程。这一过程不 ...
2024-11-21数据分析作为一个备受追捧的职业领域,吸引着越来越多的女性加入其中。对于女生而言,在选择成为一名数据分析师时,行业选择至关 ...
2024-11-21大数据技术专业主要学习计算机科学、数学、统计学和信息技术等领域的基础理论和技能,旨在培养具备大数据处理、分析和应用能力的 ...
2024-11-21