机器学习中特征选择概述

2017-03-11

机器学习中特征选择概述 1. 背景 1.1 问题 在机器学习的实际应用中，特征数量可能较多，其中可能存在不相关的特征，特征之间也可能存在相关性，容易导致如下的后果：  （1） 特征个数越多，分析特征 ...

数据挖掘分类方法小结_数据挖掘中的基于决策树的分类方法

2016-12-14

数据挖掘分类方法小结_数据挖掘中的基于决策树的分类方法 数据仓库，数据库或者其它信息库中隐藏着许多可以为商业、科研等活动的决策提供所需要的知识。分类与预测是两种数据分析形式，它们可以用来抽取能够描 ...

机器学习实战之朴素贝叶斯

2016-12-11

机器学习实战之朴素贝叶斯 一、概述 朴素贝叶斯分类算法是基于概率论中的贝叶斯公式得到的，也是比较常用的一种算法，而朴素代表的是属性之间的独立性，这样联合概率可以转换成各概率分量的乘积。 二、算法思想 ...

机器学习经典算法详解及Python实现

2016-12-02

机器学习经典算法详解及Python实现 聚类是一种无监督的学习（无监督学习不依赖预先定义的类或带类标记的训练实例），它将相似的对象归到同一个簇中，它是观察式学习，而非示例式的学习，有点像全自动分类。 ...

大数据分析与机器学习领域Python兵器谱

2016-11-23

大数据分析与机器学习领域Python兵器谱 曾经因为NLTK的缘故开始学习Python，之后渐渐成为我工作中的第一辅助脚本语言，虽然开发语言是C/C++，但平时的很多文本数据处理任务都交给了Python。离开腾讯创业后，第 ...

短文本主题建模方法

2016-11-22

短文本主题建模方法 1. 引言 许多数据分析应用都会涉及到从短文本中提取出潜在的主题，比如微博、短信、日志文件或者评论数据。一方面，提取出潜在的主题有助于下一步的分析，比如情感评分或者文本分类模型 ...

2017校招数据分析岗笔试/面试知识点

2016-09-26

2017校招正在火热的进行，后面会不断更新涉及到的相关知识点。 尽管听说今年几个大互联网公司招的人超少，但好像哪一年都说是就业困难，能够进去当然最好，不能进去是不是应该也抱着好的期望去找自己满意的呢？ 最 ...

常见机器学习算法比较

2016-07-11

常见机器学习算法比较 机器学习算法太多了，分类、回归、聚类、推荐、图像识别领域等等，要想找到一个合适算法真的不容易，所以在实际应用中，我们一般都是采用启发式学习方式来实验。通常最开始我们都会选择 ...

Spark 文本情感分析

2016-06-08

本文描述了一个基于 Spark 构建的认知系统：文本情感分析系统，分析和理解社交论坛的非结构化文本数据。 基于 Spark 的文本情感分析 文本情感分析是指对具有人为主观情感色彩文本材料进行处理、分 ...

数据挖掘在实际领域中的那些事儿

2016-05-25

数据挖掘在实际领域中的那些事儿 今天非常荣幸能给大家分享在大数据挖掘方面做的一些事情。 企业中的数据挖掘 我们先来看看在企业中数据挖掘都是怎么做的，以及有着哪些问题。 图中的左边是SPSS在 ...

工具 | 用Python做自然语言处理必知的八个工具

2016-05-20

Python以其清晰简洁的语法、易用和可扩展性以及丰富庞大的库深受广大开发者喜爱。其内置的非常强大的机器学习代码库和数学库，使Python理所当然成为自然语言处理的开发利器。 那么使用Python进行自然语言处理，要是 ...

机器学习在电商文本挖掘中的应用浅析

2016-04-27

机器学习在电商文本挖掘中的应用浅析 电商平台中有海量的非结构化文本数据，如商品描述、用户评论、用户搜索词、用户咨询等。这些文本数据不仅反映了产品特性，也蕴含了用户的需求以及使用反馈。通过深度 ...

如何利用机器学习进行海量数据挖掘

2016-04-20

互联网的海量数据不可能靠人工一个个处理，只能依靠计算机批量处理。最初的做法是人为设定好一些规则，由机器来执行。但特征一多规则就很难制定，即使定下了规则也没法根据实际情况灵活变化。机器学习可以很好的解决 ...

专栏 | 如何在一年内成为数据挖掘工程师？

2016-04-12

  先来一波养眼图~ 4月10日，全都是美女的「数你最美」数据分析沙龙在北京苏州街纳什空间圆满举办。现场不仅有美女养眼，还有强大的干货分享。 四位美女嘉宾在现 ...

数据挖掘十大算法总结--核心思想，算法优缺点，应用领域，数据挖掘优缺点

2016-03-19

数据挖掘十大算法总结--核心思想，算法优缺点，应用领域，数据挖掘优缺点 本文所涉算法均只概述核心思想，具体实现细节参看“数据挖掘算法学习”分类下其他文章，不定期更新中。转载请注明出处，谢谢。 参考 ...

数据挖掘和分析工程师

2015-12-12

数据挖掘和分析工程师        数据挖掘和分析工程师，第一眼看过去，应该大家都会觉得很陌生，不用担心，今天我就跟大家讲讲数据挖掘和分析工程师的具体工作岗位和要求分别是什么。 &nb ...

【上海礼维企业管理咨询有限公司】招聘数据分析师

2015-12-09

【上海礼维企业管理咨询有限公司】招聘数据分析师 LEADVILL will keep focus on our adept area of expertise. With our Deep understanding of cultural differences and market characteristics of various ...

【互动通天图信息技术有限公司】招聘数据分析师

2015-12-02

【互动通天图信息技术有限公司】招聘数据分析师 互动通控股集团1999年创立于中国，使命是引领中国数字媒体广告投放技术及服务站在世界的前沿！旗下拥有数字广告平台hdtMEDIA、数字广告交易平台hdtDXP、移动数 ...

从定义到应用 数据挖掘的一次权威定义之旅

2015-12-01

从定义到应用 数据挖掘的一次权威定义之旅 　什么是数据挖掘 　　前两天看到群里有人问，什么是数据挖掘，现在就数据挖掘的概念做一下分析，并且尽量用大白话说一下数据挖掘到底是个啥东西，为啥 ...

大数据分析的流程浅析：大数据整理过程分析

2015-10-10

大数据分析的流程浅析：大数据整理过程分析 数据整理是数据分析过程中最重要的环节，在大数据分析过程中也是如此。在小数据时代，数据整理包括数据的清洗、数据转换、归类编码和数字编码等过程，其中数 ...