面向大数据的分布式调度

2017-12-25

面向大数据的分布式调度 大数据的分布式调度是在进行数据ETL过程中起到了总体的承上启下的角色，整个数据的生产、交付、消费都会贯穿其中，本文从调度、分布式调度的特征展开，再对大数据调度个性化特征的一些 ...

大数据下的成都：意料之外，情理之中

2017-12-25

大数据下的成都：意料之外，情理之中 哲人李泽厚曾说过，哲学就是科学加诗。现代科技给人类带来的生存——生活方式的变革，不仅体现在衣食住行、性寿健娱上面，还体现在它对人们精神领域的全面渗透与改造。而我 ...

数据挖掘进行数据分析常用的方法

2017-12-24

数据挖掘进行数据分析常用的方法 利用数据挖掘进行数据分析常用的方法主要有分类、回归分析、聚类、关联规则、特征、变化和偏差分析、Web页挖掘等， 它们分别从不同的角度对数据进行挖掘。     ...

人工智能、大数据与深度学习之间的关系和差异

2017-12-23

人工智能、大数据与深度学习之间的关系和差异 网络上从不缺乏对数据科学术语进行比较和对比的文章。文笔各异的人写出了各式各样的文章，以此将他们的观点传达给任何愿意倾听的人。这几乎是势不可挡的。 所以 ...

从奇异值分解(SVD)看潜在语义索引(LSI)

2017-12-22

从奇异值分解(SVD)看潜在语义索引(LSI) 1. SVD 简介 SVD中文称为“奇异值分解”，是一种矩阵分解方法。其公式如下： 定理：设A为m*n阶复矩阵，则存在m阶矩阵U和n阶矩阵V，使得： 　　    A ...

大数据如何推动金融业的商业变革

2017-12-22

大数据如何推动金融业的商业变革 商业无论是接受还是拒绝，中国金融业的大数据时代正在呼啸而至。据调查，经过多年的发展与积累，目前很多国内金融机构的数据量级已经达到100TB以上。而且，非结构化数据量正在 ...

文本主题模型之潜在语义索引(LSI)

2017-12-22

文本主题模型之潜在语义索引(LSI) 在文本挖掘中，主题模型是比较特殊的一块，它的思想不同于我们常用的机器学习算法，因此这里我们需要专门来总结文本主题模型的算法。本文关注于潜在语义索引算法(LSI)的原理。 ...

大数据战略的实践与应用

2017-12-22

大数据战略的实践与应用 大数据相关概念 　　1.大数据 　　维克托·迈尔·舍恩伯格、肯尼斯·库克耶编写的《大数据时代》一书给出的定义是：大数据指不用随机分析法(抽样调查)这种捷径，而采用所有数据进行分析 ...

【中科柏诚科技(北京)股份有限公司】招聘数据分析师

2017-12-19

【中科柏诚科技(北京)股份有限公司】招聘数据分析师 中科柏诚科技（北京）股份有限公司——中关村科技园区高新科技企业。创立于2010年，核心团队均由资深金融人士、IT人士、互联网专业人士构成，其骨干团队更具备丰 ...

视频大数据时代的“火眼金睛”

2017-12-19

视频大数据时代的“火眼金睛” 我们身处一个大数据的时代，视频数据的爆炸性增长是这个时代的重要特征之一。“如何让计算机看懂视频的内容，实现对海量视频数据的检索和分析是有效管理和利用视频大数据的关键 ...

大数据助天文学研究风光无限

2017-12-19

大数据助天文学研究风光无限 战国时期，一本记载着800多颗恒星名字和位置的《石氏星经》，是祖辈们探索宇宙的秘笈，被誉为最古老的天文数据库。 2400年后，美国天文学家发现了一颗超高速星。有趣的是，这个 ...

你费那么大劲做的数据分析，有用吗

2017-12-18

你费那么大劲做的数据分析，有用吗 很久之前，你我都曾经做过物理题。记得那时老师经常唠叨，“先认真审题，理解题意，然后再想方法，最后再落笔去做”;“审题啊!审题啊!说过几遍怎么就是不听，寻思鹰呢?” ...

SPSS聚类分析：二阶聚类分析

2017-12-18

SPSS聚类分析：二阶聚类分析 一、概念（分析-分类-两步聚类）。 是一个探索工具，用来揭示数据集中的自然分组（或聚类），如果不揭示，这些分组是不明显的。此过程使用的算法有多个不错的特征使其 ...

工业软件欲借大数据颠覆制造业

2017-12-18

工业软件欲借大数据颠覆制造业 无论是手机中的App，还是汽车上的数字化驾驶界面，抑或是数字化图纸和数控程序，它们都有一个共同的名字——软件。而决定技术进化的核心要素要数工业软件，工业软件不仅作为数字 ...

大数据时代的技术挑战

2017-12-17

大数据时代的技术挑战 Google的独立URL索引数量超过了1万亿，用户获得一次满意搜索的时间却不超过1秒；淘宝商品数高达8亿，每天有6000万用户登录淘宝寻找商品，最终要促成每天800万包裹量的交易；Monst ...

农业监测预警迈入大数据新时代

2017-12-17

农业监测预警迈入大数据新时代 春天应该种什么？秋天卖什么能赚钱？买什么生产资料最实惠？市场价格如何变化？哪些农产品短缺和过剩了？这些都是农业生产者和经营者最关心的问题。 而政府和涉农部门则关注扶 ...

企业大数据：一座值得开垦的金矿

2017-12-15

企业大数据：一座值得开垦的金矿 虽然尚处起步阶段，但是大数据已经成为多个行业的关注热点之一。如何更好地利用大数据推动自身业务的运营发展，这是众多企业不断探索的问题，而运营商也无法忽视这个未来 ...

大数据的价值在于应用

2017-12-15

大数据的价值在于应用 大数据，就是存储在各种存储介质中的海量的各种形态数据，具有5V特点，即：Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值密度)、Veracity（真实性）。大数据之“大”，不仅在 ...

数据挖掘的入门概念

2017-12-13

数据挖掘的入门概念 1 数据挖掘 数据挖掘(Data Mining，简称DM)，是指从大量的数据中，挖掘出未知的且有价值的信息和知识的过程。 2 机器学习 与 数据挖掘 与数据挖掘类似的有一个术语叫做”机器学习 ...

如何成为一名数据分析师：数据的初步认知

2017-12-12

如何成为一名数据分析师：数据的初步认知 对所有从事数据相关工作的人而言，都有一个老生常谈的问题： 数据认知 !毕竟在真正开始分析、BI 报表开发或者建模前，对数据进行一定的审查和认知是必须的。今天，就 ...