大数据舆情情感分析，如何提取情感并使用什么样的工具？

2017-03-28

各类 paper 是有一定的借鉴意义的，不过这主要是学术界在单个问题上的细化，要真正从研究领域落地到大数据的处理还有很多工作要做。 一、工程上的处理流程 工程上的处理流程具体包括 ...

K-means算法原理与R语言实例

2017-03-17

K-means算法原理与R语言实例 聚类是将相似对象归到同一个簇中的方法，这有点像全自动分类。簇内的对象越相似，聚类的效果越好。支持向量机、神经网络所讨论的分类问题都是有监督的学习方式，现在我们所介绍的聚 ...

R语言不平衡数据分类指南

2017-02-27

R语言不平衡数据分类指南 目前我们发展出了不少机器学习算法来对数据建模，基于数据进行一些预测已经不再是难事。不论我们建立的是回归或是分类模型，只要我们选择了合适的算法，总能得到比较精确的结果。然而 ...

R语言初学者必须要知道的事儿

2017-02-16

R语言初学者必须要知道的事儿 2017年1月24日晚8点半，乐逗游戏挖掘团队负责人、资深R语言用户谢佳标带来了主题为“数据分析利器：R语言快速入门”的Chat交流。以下是主持人孙莫默整理的实录，记录了谢佳标与读 ...

Python数据挖掘之线性回归知识及预测糖尿病实例

2017-01-15

Python数据挖掘之线性回归知识及预测糖尿病实例 今天主要讲述的内容是关于一元线性回归的知识，Python实现，包括以下内容：         1.机器学习常用数据集介绍    ...

数据挖掘 | 数据理解和预处理

2016-12-07

数据挖掘 | 数据理解和预处理 小编遇到过很多人(咳咳，请不要对号入座)，拿到数据后不管三七二十一，先丢到模型中去跑，管它具体什么样呢，反正“大数据”嘛，总能整出点东西来。 但就像上次说过的，“大数 ...

数据挖掘与生活:算法分类和应用

2016-11-23

数据挖掘与生活:算法分类和应用 相对于武汉，北京的秋来的真是早，九月初的傍晚，就能够感觉到丝丝丝丝丝丝的凉意。 最近两件事挺有感觉的。 看某发布会，设计师李剑叶的话挺让人感动的。“**的设计是内 ...

数据挖掘工程师的面试问题与答题思路

2016-10-16

数据挖掘工程师的面试问题与答题思路 机器学习、大数据相关岗位根据业务的不同，岗位职责大概分为： 1、平台搭建类 数据计算平台搭建，基础算法实现，当然，要求支持大样本量、高维度数据，所以可能 ...

从央企财会到数据分析师，他都经历了什么

2016-10-10

从央企财会到数据分析师，都经历了什么 我以前其实是做财务会计的，在座可能有的人对财务会计有些了解，它和数据分析师中间差别很大。大家会好奇，我是为什么要从财务会计到一个数据分析师呢？ 跟大家分 ...

大数据时代下，市场研究何去何从

2016-10-01

大数据时代下，市场研究何去何从 大数据这个概念近来一直受到关注。大数据并非一个确切的概念，这个概念一方面指数据体量巨大，超出一般电脑所处理数据量几个级别；另一方面也指处理的数据类型多样化，远远超出 ...

2017校招数据分析岗笔试/面试知识点

2016-09-26

2017校招正在火热的进行，后面会不断更新涉及到的相关知识点。 尽管听说今年几个大互联网公司招的人超少，但好像哪一年都说是就业困难，能够进去当然最好，不能进去是不是应该也抱着好的期望去找自己满意的呢？ 最 ...

用R语言实现对不平衡数据的四种处理方法

2016-09-07

用R语言实现对不平衡数据的四种处理方法 在对不平衡的分类数据集进行建模时，机器学习算法可能并不稳定，其预测结果甚至可能是有偏的，而预测精度此时也变得带有误导性。那么，这种结果是为何发生的呢?到底是什 ...

数据挖掘可挖掘的知识类型

2016-08-25

数据挖掘可挖掘的知识类型 一、概念/类 描述 概念/类描述就是通过对某类对象关联数据的汇总，分析和比较，用汇总的简洁的精确的方式对此类对象的内涵进行描述，并概括这类对象的有关特征。概念描述分为：特 ...

骗子也玩大数据？来自数据分析师的揭秘

2016-08-18

骗子也玩大数据？来自数据分析师的揭秘 近年在很多揭露诈骗的报道中，常常出现老太太接到电话说孙子出事了、老板接到电话说税务局要查税等案例，为什么现在骗子“对号入座”的本事这么强? 其实，这与骗子们 ...

使用sklearn优雅地进行数据挖掘

2016-08-17

使用sklearn优雅地进行数据挖掘 1 使用sklearn进行数据挖掘 1.1 数据挖掘的步骤 数据挖掘通常包括数据采集，数据分析，特征工程，训练模型，模型评估等步骤。使用sklearn工具可以方便地进行特征工程和模 ...

机器学习基础与实践之数据清洗！

2016-07-04

想写这个系列很久了，最近刚好项目结束了闲下来有点时间，于是决定把之前学过的东西做个总结。之前看过一些机器学习方面的书，每本书都各有侧重点，机器学习实战和集体智慧编程更偏向与实战，侧重于对每个算法的实际 ...

CDA II-SAS：掌控数据挖掘于指尖

2016-05-30

当学习数据分析时，我们学到了什么? “数据分析不只是统计方法，更重要的是贴近业务的需求分析、实施过程、与效果评估。真正了解一个行业，就要接触到这个行业的遗产，目前商业数据分析遗产基本上都是以SAS的 ...

案例 | 数据挖掘在精准营销中的应用

2016-05-27

精准营销就是在精准定位的基础上，依托现代信息技术手段建立个性化的顾客沟通服务体系，实现企业可度量的低成本扩张之路，是有态度的网络营销理念中的核心观点之一。 精准营销需要解决的问题是：哪些用户是某个产品 ...

数据挖掘在实际领域中的那些事儿

2016-05-25

数据挖掘在实际领域中的那些事儿 今天非常荣幸能给大家分享在大数据挖掘方面做的一些事情。 企业中的数据挖掘 我们先来看看在企业中数据挖掘都是怎么做的，以及有着哪些问题。 图中的左边是SPSS在 ...

scikit-learn的线性回归模型

2016-05-05

scikit-learn的线性回归模型 特征选择的方法 作为有监督学习，分类问题是预测类别结果，而回归问题是预测一个连续的结果。 1. 使用pandas来读取数据 Panda ...