Storm常见问题及解决方案总结

2016-03-19

Storm常见问题及解决方案总结 Storm 是一个开源的、大数据处理系统，与其他大数据解决方案的不同之处在于它的处理方式。Hadoop 在本质上是一个批处理系统。数据被引入 Hadoop 文件系统 (HDFS) 并分发到各个节点 ...

Hadoop数据操作系统YARN全解析其它

2016-03-08

Hadoop数据操作系统YARN全解析其它 为了能够对集群中的资源进行统一管理和调度，Hadoop 2.0引入了数据操作系统YARN。YARN的引入，大大提高了集群的资源利用率，并降低了集群管理成本。首先，YARN允许多个应用程 ...

通过SAS fastload mysql table 到 Teradata

2016-02-28

通过SAS fastload Mysql table 到 Teradata 我们在用SAS经常会会遇到一些问题，比如如何通过SAS fastload Mysql table 到 Teradata？下面就详细的说一下。 [c-sharp] view plain  ...

美国大数据工程师面试攻略有哪些

2016-02-26

美国大数据工程师面试攻略有哪些 在多年工作中，除了对技术的不懈追求，也积累了大量的面试经验，从国内的一线互联网公司百度、阿里巴巴、奇虎、人人，到美国一线公司Facebook、Google、Linkedin、Twitter、Ama ...

马如悦：大规模数据分析系统的搭建

2016-02-23

马如悦：大规模数据分析系统的搭建 大数据全球技术峰会在北京富力万丽酒店召开。本次峰会将围绕大数据基础架构与上层应用的生态系统，解决大规模数据引发的问题，探索大数据基础的解决方案，激发数据挖掘带来的 ...

【北京网元未来技术有限公司】招聘数据分析师

2016-02-17

【北京网元未来技术有限公司】招聘数据分析师 北京网元未来技术有限公司，成立于2014年10月，注册资本人民币1000万元，是国内领先的互联网流量优化和应用优化服务商，同时也是为运营商提供解决方案的高科技企业。我 ...

【魔秀科技(北京)有限公司】招聘数据分析师

2016-01-14

【魔秀科技(北京)有限公司】招聘数据分析师 魔秀诞生于2008年8月8日，立志于建立手机增值产品 UGC＋PGC生态圈；成功的研发了全国第一个手机主题在线制作平台，深受广大手机用户的喜爱和好评；据国内专业互联 ...

【四川商通实业有限公司】招聘数据分析师

2016-01-06

【四川商通实业有限公司】招聘数据分析师 四川商通实业有限公司成立于2007年，注册资金1亿元，各类专业技术性人才200余人。是我国中西部地区规模最大的专业从事预付卡第三方支付的企业，由人民银行进行严格的 ...

大数据时代 命令行技术过时了吗？

2016-01-02

大数据时代 命令行技术过时了吗？ 随着《关于促进大数据发展的行动纲要》(简称“《纲要》”)日前正式下发，《纲要》提出，大数据成为推动经济转型发展的新动力。大数据产业正在成为新的经济增长点，将对未来信 ...

一分钟了解互联网数据挖掘流程

2015-12-31

一分钟了解互联网数据挖掘流程 1、爬虫抓取网络数据  真实的数据挖掘项目，一定是从获取数据开始的，除了通过一些渠道购买或者下载专业数据外，常常需要大家自己动手爬互联网数据，这个时候，爬虫就显 ...

数据分析师 京东到家

2015-12-29

关于京东（JD.com）： 　　京东（JD.com）是中国领先的自营式电商企业和中国收入规模最大的互联网企业。京东为消费者提供愉悦的在线购物体验。通过内容丰富、人性化的网站（www.jd.com）和移动客户端，京东以富有 ...

【凤凰飞扬(北京)新媒体信息技术有限公司】招聘数据分析师

2015-12-23

【凤凰飞扬(北京)新媒体信息技术有限公司】招聘数据分析师 凤凰新媒体（纽交所代码：FENG)是全球领先的跨平台网络新媒体公司，整合旗下综合门户凤凰网（www.ifeng.com）、手机凤凰网（3g.ifeng.com）和凤凰视 ...

pandas模块，我觉得掌握这些就够用了！

2020-07-20

pandas  是为了解决数据分析任务而创建的Python 库，源于NumPy ，经常被用于对数据挖掘前期数据的处理工作。pandas提供了大量的处理数据的函数和方法，并且还纳入了大量库与很多标准的数据模型，能让我们更加 ...

谷歌、脸书、魔兽世界都在用！InnoDB是什么？有哪些关键特性？

2020-07-16

导读：InnoDB是事务安全的MySQL存储引擎，设计上采用了类似于Oracle数据库的架构。通常来说，InnoDB存储引擎是OLTP应用中核心表的首选存储引擎。同时，也正是因为InnoDB的存在，才使MySQL数据库变得更有魅力。 ...

Hadoop是什么意思，有哪些作用？

2020-07-07

Hadoop是一种分析和处理大数据的软件平台，是Appach的一个用Java语言所实现的开源软件的加框，可编写和运行分布式应用处理大规模数据，是专为离线和大规模数据分析而设计的，对那种对几个记录随机读写的在线事务处 ...

大数据之HiveSQL安装配置！

2020-05-14

hive默认将元数据存储到本地内嵌的Derby数据库中，但是Derby不支持多会话链接，因此我们使用mysql数据库来存储hive的元数据。配置完成hiveSQL的元数据库之后再开始安装、配置hive。 1、在线安装mysql ...

一文读懂非关系型数据库（NoSQL）

2020-04-20

NoSQL(NoSQL = Not Only SQL )，意即\"不仅仅是SQL\"。 现代计算系统每天在网络上都会产生庞大的数据量。这些数据有很大一部分是由关系型数据库管理系统（RDBMSs）来处理，其严谨成熟的数学理 ...

Python数据分析基础入门(一)：获取数据源

2020-03-27

作者 | CDA数据分析师 俗话说，巧妇难为无米之炊。不管你厨艺有多好，如果没有食材，也做不出香甜可口的饭菜来，所以想要做出饭菜来，首先要做的就是要买米买菜。而数据分析就好比是做饭， ...

Python数据分析入门教程(一)：获取数据源

2020-01-16

作者 | CDA数据分析师 俗话说，巧妇难为无米之炊。不管你厨艺有多好，如果没有食材，也做不出香甜可口的饭菜来，所以想要做出饭菜来，首先要做的就是要买米买菜。而数据分析就好比是做饭，首先也应该是准 ...

38个常用Python库：数值计算、可视化、机器学习等8大领域都有了

2019-11-29

作者 | 李明江 张良均 周东平 张尚佳 来源 | 大数据DT Python作为一个设计优秀的程序语言，现在已广泛应用于各种领域，依靠其强大的第三方类库，Python在各个领域都能发挥巨大的作用。 ...