如何用Python进行大数据挖掘和分析？快速入门路径图

2018-08-30

如何用Python进行大数据挖掘和分析？快速入门路径图 大数据无处不在。在时下这个年代，不管你喜欢与否，在运营一个成功的商业的过程中都有可能会遇到它。 什么是 大数据 ？ 大数据就像它看起来那样——有 ...

如何提高你的数据分析能力

2018-07-31

如何提高你的数据分析能力 第一步：数据准备（80%时间） 获取数据(爬虫，数据仓库) 验证数据 数据清理(缺失值、孤立点、垃圾信息、规范化、重复记录、特殊值、合并数据集) 使用python进行文件读取c ...

人工智能和大数据的开发过程中需要注意这12点

2018-07-21

人工智能和大数据的开发过程中需要注意这12点 人工智能是近年来科技发展的重要方向，在大数据时代，对数据采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据的开发过程中，有哪些特别需要注意的要点? ...

决策树与随机森林的R语言实现

2018-06-14

决策树与随机森林的R语言实现 1.用party包构建决策树 以iris数据集为例。 用ctree()建立决策树，用predict()对新数据进行预测。 训练集与测试集划分： [ruby] view plain copy     > str(iris) ...

大数据时代下数据挖掘技术的应用

2018-06-05

大数据时代下数据挖掘技术的应用 随着社会信息化的迅速发展，无论是数据的变化速率，还是数据的新增种类都在不断更新，数据研究变得越来越复杂，这意味着“大数据时代”到来。2011年，互联网数据中心（internet ...

Python编程实现使用线性回归预测数据

2018-05-17

Python编程实现使用线性回归预测数据 本文中，我们将进行大量的编程——但在这之前，我们先介绍一下我们今天要解决的实例问题。 1) 预测房子价格 房价大概是我们中国每一个普通老百姓比较关心的问题，最 ...

教你如何用R进行数据挖掘

2018-05-16

教你如何用R进行数据挖掘 R是一种广泛用于数据分析和统计计算的强大语言，于上世纪90年代开始发展起来。得益于全世界众多 爱好者的无尽努力，大家继而开发出了一种基于R但优于R基本文本编辑器的R Studio（用 ...

商业智能的发展趋势及关键技术分析

2018-03-23

商业智能的发展趋势及关键技术分析 从应用和技术需求上看，商业智能的发展趋势可以归纳为以下方面。功能上具有可配置性、灵活性、可变化性。BI系统的使用范围从特定部门到企业所有用户，其业务多样化，需求格式 ...

机器学习解决问题的步骤

2018-03-20

机器学习解决问题的步骤 针对任何一个打算由机器学习算法来解决的问题，都有一种『套路』存在，只要按照这个模板『按部就班』就能够得到一个结果。就跟一个产品的生产流水线是一个道理。但是得到结果的好坏跟你 ...

数据预处理的一些方法

2018-03-19

数据预处理的一些方法 现实世界中，数据集存在着不完整、包含噪声和不一致等特点，无法直接用来挖掘知识。收集数据的设备可能出故障，人为输入数据时出错或缺失，数据传输中引起的错误都将造成数据集含有不正确 ...

R语言数据对象与运算

2018-03-18

R语言数据对象与运算 R语言数据对象与运算 笔记整理 2.1 数据对象及类型 R语言创建和控制的实体被称为对象（object） ls()命令来查看当前系统里的数据对象 R对象的名称必须以一个英文字母打头，并 ...

R语言简单操作，数值与向量

2018-03-15

R语言简单操作，数值与向量 1 向量与赋值 R对命名了的数据结构进行操作。最简单的数据结构是数字向量；如， > x <- c(10.4, 5.6, 3.1, 6.4, 21.7)    c()是创建函数，赋值运算符是\'<-\'，与函数a ...

SPSS编程在Ridit分析中的应用

2018-03-04

SPSS编程在Ridit分析中的应用 多样本有序分类资料（或等级资料）我们一般采用非参数检验——H检验（Kruskal-Wallis法），但其结论只得出三组或多组间总的有差别，若要知道两两间是否有差别，则没有Ridit分析只 ...

R语言常用数学函数

2018-03-03

R语言常用数学函数 sum()、max()、min()、mean()、median() prod(x) 对x中的元素都连乘 which.max(x) 返回x中最大元素的下标 which.min(x) 返回x中最小元素的下标 range(x) 值域 rev(x) 对x中的 ...

R中基本统计分析方法整理

2018-02-24

R中基本统计分析方法整理 面对一大堆的数据，往往会让人眼花缭乱。但是只要使用一些简单图形和运算，就可以了解数据更多的特征。R提供了很多关于数据描述的函数，通过这些函数可以对数据进行一个简单地初步分 ...

数据挖掘总结之主成分分析与因子分析

2018-01-12

数据挖掘总结之主成分分析与因子分析 主成分分析与因子分析 1）概念： 主成分分析概念：主成分分析是把原来多个变量划为少数几个综合指标的一种统计分析方法。主成分分析（PCA）是一种数据降维技巧，它能 ...

浅谈数据分析和数据建模

2017-12-15

浅谈数据分析和数据建模 大数据应用有几个方面，一个是效率提升，帮助企业提升数据处理效率，降低数据存储成本。另外一个是对业务作出指导，例如精准营销，反欺诈，风险管理以及业务提升。过去企业都是通过线下 ...

数据分析中非常实用的自编函数和代码模块整理

2017-12-04

数据分析中非常实用的自编函数和代码模块整理 搞了接近四个周的模型开发工作，今天整理代码文件，评分卡模型基本告一段落了。那么在模型开发或者是我们日常的数据分析工作中，根据我们具体的业务需求，经常会重 ...

缺失数据处理-插值法

2017-12-04

缺失数据处理-插值法 在数据挖掘中，原始海量的数据中存在着大量不完整、不一致、有异常、偏离点的数据。这些问题数据轻则影响数据挖掘执行效率，重则影响执行结果。因此数据预处理工作必不可少，而其中常见工 ...

在人工智能和大数据产品的开发中，有哪些需要特别注意

2017-11-24

在人工智能和大数据产品的开发中，有哪些需要特别注意 人工智能是近年来科技发展的重要方向，大数据的采集、挖掘、应用的技术越来越受到瞩目。在人工智能和大数据产品的开发过程中，有哪些特别需要注意的要点? ...