2016年,商业智能和数据分析领域的新趋势

2016-01-01

2016年,商业智能和数据分析领域的新趋势 1946年2月14日，地球上第一台电子计算机诞生。在这70年的岁月里，信息科技深刻地改变了人类社会。尤其是在新世纪里，互联网和大数据引领变革的潮流，人类历史掀开了最 ...

电信恒联借力深信服超融合,大数据分析平台

2015-12-23

电信恒联借力深信服超融合,大数据分析平台 近年来，随着云业务和大数据的不断发展，电信恒联在积极地调整业务模式和业务类型。目前，电信恒联已经在行业内领先推出商用大数据分析业务，该项服务可以为企 ...

应该怎样理解docker？它的优势在哪里？

2020-07-17

近年来，docker成了最火热、最具颠覆性的科学技术之一，受到了国内、国外许多泛云计算公司、互联网公司、IT大厂的青睐。docker到底是什么?为什么这么火?下面就跟小编一起来看吧! 一、docker概念 让我们先来 ...

聊聊Python的一个彩蛋：Python之禅

2020-07-15

相信大家在学习python肯定都听说过python之禅。python之禅到底是个什么东西，设计者为什么要这样设计？又有什么意义呢？看完下面的文章你就会明白了。 文章转载自：微信公众号 Python的乐趣 作者：一粒米饭 ...

Hadoop：伪分布模式环境变量的配置

2020-06-05

单节点集群模式（a Single Node Cluster）又称伪分布模式，只需一个节点即可运行。这种模式一般只是用来学习或者开发、测试使用。实际使用中还是使用多节点的分布式。 1、环境变量配置 为了方便的执行Hadoop ...

Hadoop：伪分布模式参数配置指南

2020-06-04

Hadoop通过改变其配置文件来更改运行模式，我们通过修改如下四个配置文件core-site.xml、hdfs-site.xml、mapred-site.xml和yarn-site.xml即可让Hadoop以伪分布模式运行。 Hadoop的配置文件是 xml 格式，每个配 ...

Hadoop：集群网络介绍，及相关文件配置指南

2020-06-05

上篇文章中我们已经将之前配置好的伪分布集群虚拟机复制出来做为master节点的虚拟机，接下来我们还需对该虚拟机做进一步的配置来达到我们的要求。对master虚拟机的配置将从网络、hostname、更改Hadoop相关配置等几 ...

Hadoop：分布式集群HDFS 、YARN等初次启动！

2020-06-03

上篇文章中我们通过克隆已有虚拟机并修改相应的参数配置将hadoop分布式集群搭建完成，接下来我们启动Hadoop分布式集群。 1、ssh免密登录 首先打开虚拟机软件VMware然后开启master、slave1、slave2三个虚拟机 ...

分布式集群参数master节点：DataNode、NameNode等相关配置

2020-06-03

之前的文章中我们已经将master节点的网络IP、hostname文件、hosts文件配置完成，接下来还有hadoop相关配置文件需要修改。今天我们来讲master节点hadoop的配置。 1、hdfs-site.xml 在hadoop的配置文件中与HDF ...

Hbase：安装及模式配置指南

2020-06-03

所谓知己知彼，百战不殆！在安装HBASE前，我们需要了解它的版本，从而好进行选择与下载。 通过之前介绍的Hbase的集群架构，我们可以知道Hbase数据需要存储在HDFS上，因此在选择Hbase版本时要兼顾之前安装的Hado ...

大数据：Hadoop多节点集群搭建指南

2020-06-04

1、多节点集群架构设计 后续介绍的Hadoop多节点集群由三台计算机构成:一台主节点为master，两台从节点为slave1、slave2。 master节点上主要运行namenode、Resourcemanager 进程；slave节点上运行datanode、 ...

spark集群：环境搭建之Scala安装指南

2020-06-02

今天，我们一起安装、配置spark集群环境，方便后期继续学习研究。spark项目是由scala语言编写的，因此需提前配置Scala环境才能运行Spark程序。 1、Scala版本选择与下载 我们安装spark2.1.2版本与之对应的环 ...

Hadoop相关：学习工具JDK，在线安装指南

2020-06-01

hadoop是使用Java语言开发的并且Hadoop运行需要有Java环境的支持，因此在安装hadoop之前需要安装Java开发环境即JDK(Java Development Kit)。安装前首先向大家介绍以一下本文会用到的几个词： JAVA_HOME: 一 ...

大数据分析：学习工具Hadoop，基本安装指导

2020-06-01

Hadoop版本主要分为原生Apache Hadoop版和Hadoop商业发行版两种，而其中商业发行版Hadoop多为原生Apache Hadoop的集群模式下的优化版，除少数社区版外，商业发行版大多需要付费使用，且对于初学者而言使用难度较大 ...

docker的简介及安装指南！

2020-05-13

docker源自PaaS提供商dotCloud，是一个基于LXC的开源的高级应用容器引擎，源代码托管在 Github 上, 基于go语言并遵从Apache2.0协议开源。 容器是完全使用沙箱机制，使用者可以将其应用打包后放入docker ...

破解数据分析难题，微软、SAP、百度们是这么干的

2019-09-18

作者 | 大数据 来源 | hzdashuju 微软在联机事务处理（OLTP）云基准测试中实现每节点虚拟机数量提升36%，硬件成本下降30%；SAP HANA让系统重启从20分钟缩短至90秒，性能提升13倍之多，实现每 ...

细数Python三十年技术演变史——生于小众，崛起于AI

2019-07-26

导语：一切都始于1989年的那个圣诞节，Python的诞生并不算恰逢其时，它崛起充满了机遇巧合，也有其必然性。三十年间，Python技术不断更迭，生态逐渐完善，加上互联网、大数据、以及人工智能这一波波浪潮的推波助澜 ...

区块链架构、跨链和演进

2018-08-29

区块链架构、跨链和演进 本文是基于作者近几年来对各种区块链平台理念和技术的研究，结合作者过去十多年的 IT 经验，审慎思考的结果 ，文章仅代表作者个人观点。作者会假设读者对各种区块链平台有一定的认知 ...

热度碾压 Java、C#、C++的 Python，为什么速度那么慢

2018-07-31

热度碾压 Java、C#、C++的 Python，为什么速度那么慢 眼下 Python 异常火爆，不论是 DevOps、数据科学、Web 开发还是安全领域，都在用 Python——但是它在速度上却没有任何优势。 与 C、C++、C# 或 Pyth ...

浅析数据中心发展的四个阶段

2018-07-23

浅析数据中心发展的四个阶段 数据中心是信息系统的核心，主要功能是通过网络向用户提供信息服务。数据中心的演变经历了四个阶段： a）数据存储中心阶段。数据中心最早出现在20世纪60年代，采用的是以主 ...