2017将至，大数据准备好了么

2016-12-03

2017将至，大数据准备好了么 去年，大数据市场完全围绕Hadoop生态系统周围的技术。从那时起，重心一直是通过已证明增加收入、提高生产力和降低风险而带来投资回报的使用场合，“将大数据切实利用起来”。现在， ...

万字长文全面解析大数据思维的十大原理

2016-10-31

万字长文全面解析大数据思维的十大原理 一、数据核心原理:从“流程”核心转变为“数据”核心 大数据时代，计算模式也发生了转变，从“流程”核心转变为“数据”核心。Hadoop体系的分布式计算框架已经是“数 ...

大数据思维原理是什么

2016-10-22

大数据思维原理是什么 大数据时代，计算模式也发生了转变，从“流程”核心转变为“数据”核心。Hadoop体系的分布式计算框架已经是“数据”为核心的范式。非结构化数据及分析需求，将改变IT系统的升级方式：从简 ...

数据挖掘与数据分析梳理

2016-10-11

数据挖掘与数据分析梳理 一、数据挖掘和数据分析概述 数据挖掘和数据分析都是从数据中提取一些有价值的信息，二者有很多联系，但是二者的侧重点和实现手法有所区分。 数据挖掘和数据分析的不同之处： ...

机器学习—海量数据挖掘解决方案

2016-04-12

机器学习—海量数据挖掘解决方案 大数据时代里，互联网用户每天都会直接或间接使用到大数据技术的成果，直接面向用户的比如搜索引擎的排序结果，间接影响用户的比如网络游戏的流失用户预测、支付平台的欺 ...

机器学习的认知和算法总结

2016-04-10

机器学习的认知和算法总结 相信不少人都没弄明白机器学习和数据挖掘的区别是什么？其实机器学习并不等同于数据挖掘，数据挖掘更多的是从目标角度去理解数据，然后利用算法建模探索有价值的结论；而机器学习 ...

详细解释数据挖掘中的十大算法

2016-03-08

详细解释数据挖掘中的十大算法 在一份调查问卷中，三个独立专家小组投票选出的十大最有影响力的数据挖掘算法，今天我打算用简单的语言来解释一下。 一旦你知道了这些算法是什么、怎么工作、能做什么、在哪 ...

​引力波数据分析中的人工智能技术

2016-03-01

引力波数据分析中的人工智能技术 最近国内各种媒体广泛报道了备受瞩目的引力波被人类直接探测到的事件，引起了人们对基础科学研究的极大兴趣。早在100年前，爱因斯坦的广义相对论发布后，就预言了引力波的存在 ...

大数据之基于模型的复杂数据多维聚类析(三)​

2016-02-21

大数据之基于模型的复杂数据多维聚类析(三) 除了聚类，对于这个数据的分析还告诉我们一些隐藏很深的关系。比如在模型中变量Y2和Y3有连线，这表明一个人的背景信息和他对于贪污的容忍程度应该有一定的关联关系。 ...

大数据时代的数据挖掘：从应用的角度看大数据挖掘（上）

2016-01-10

大数据时代的数据挖掘：从应用的角度看大数据挖掘（上） 1 对大数据的理解和认识 大数据（big data）一词经常被用以描述和指代信息爆炸时代产生的海量信息。研究大数据的意义在于发现和理解信息内容及信息 ...

一个数据分析师的故事，你还要扮演哪些角色？

2016-01-09

一个数据分析师的故事，你还要扮演哪些角色？ 这是一个“忙碌”的数据分析师，做公关、又做销售······果然是个能干的数据分析师。 公关 作为统计系的学生，读书时就常常参加各种数学建模竞 ...

python数据清洗之噪声值的判断和处理

2020-07-31

提到噪声，你会想到什么?刺耳的，高分贝的声音?总之就是不好的，不想接受的声音。小编今天跟大家分享的就是python数据清洗中的噪声数据，对于这些噪声数据我们应该怎样检测和处理呢?下面跟小编一起来看吧。 一 ...

无监督机器学习中，这几种聚类算法，你知道吗？

2020-07-24

机器学习中，我们最常遇到的就是无监督，有监督，半监督了。无监督和有监督的区别，小编之前跟大家分享过，今天跟大家分享的是无监督机器学习中常见的聚类算法，希望对大家无监督学习有所帮助。 一、基本概念 ...

如何简单通俗的理解交叉熵损失函数？

2020-07-24

前面小编给大家简单介绍过损失函数，今天给大家继续分享交叉熵损失函数，直接来看干货吧。 一、交叉熵损失函数概念 交叉熵损失函数CrossEntropy Loss，是分类问题中经常使用的一种损失函数。公式为： ...

机器学习中有监督学习和无监督学习的区别表现在什么方面？

2020-07-23

机器学习主要分为：有监督学习，无监督学习，以及半监督学习等。小编今天给大家分享的主要是有监督学习和无监督学习的比较，希望对于大家机器学习有所帮助。 一、首先来了解一下有监督学习和无监督学习的概念 ...

怎么理解随机森里中feature importance-特征重要性？

2020-07-22

feature importance，根据含义就能理解，也就是特征重要性，在预测建模项目中起着非常重要作用，能够提供对数据、模型的见解，和如何进行降维和选择特征，并以此来提高预测模型的的效率和有效性。今天小编为大家带 ...

终于有人把数据科学、机器学习和人工智能讲明白了

2020-07-10

作者：Alex Castrounis 来源：大数据DT(ID：hzdashuju) 内容摘编自《AI战略：更好的人类体验与企业成功框架》 导读：本文讨论与人工智能相关的概念和技术，包括机器学习、深度学习、数据科学和大数据。还 ...

随机森林（Random Forest）算法的优点和缺点都有哪些？

2022-12-23

随机森林(Random Forests)现在机器学习中比较火的一个算法，是一种基于Bagging的集成学习方法，能够很好地处理分类和回归的问题。下面小编整理了随机森林的优点和缺点，希望对大家有所帮助。 随机森林有许多优 ...

机器学习之有监督学习

2020-07-01

机器学习分为：有监督学习，无监督学习，半监督学习等。今天跟小编一起来看有监督学习的内容吧。 一、有监督学习定义 有监督学习，就是大家常说的分类，通过某种或某些特性的样本作为训练集，建立一个最优模 ...

AI、机器学习、数据科学与深度学习在2020年的主要发展趋势（一）

2020-04-02

作者 | Matthew Mayo 编译 | CDA数据分析师 正如我们告别上一年并期待新的一年一样，KDnuggets再次征求了众多研究和技术专家对2019年最重要的发展及其2020年关键趋势预测的意见 ...