扒一扒真实的大数据行业

2017-04-02

扒一扒真实的大数据行业 大数据是近年来方兴未艾的行业，也是企业服务的一个重要门类，在上一期的文章中做了简单的罗列和介绍。在今天的文章中，水镜先生结合自己的专业知识，为大家扒一扒真实的大数据行业。 ...

从模型选择到超参调整，六步教你如何为机器学习项目选择算法

2017-04-01

从模型选择到超参调整，六步教你如何为机器学习项目选择算法 随着机器学习的进一步火热，越来越多的算法已经可以用在许多任务的执行上，并且表现出色。 但是动手之前到底哪个算法可以解决我们特定的实际问 ...

学习SAS的正确姿势是怎样的？

2022-01-20

SAS作为世界知名大数据分析产品，只要是大机构, 不论是、制药、金融、保险、市场部门、NGO还是政府部门，SAS的覆盖率，都是完全不可被替代的。甚至部分IT公司在统计软件上，也选择的是SAS。同时SAS系统具有使用灵 ...

简单易学的机器学习算法—岭回归(Ridge Regression)

2017-03-24

简单易学的机器学习算法—岭回归(Ridge Regression) 一、一般线性回归遇到的问题     在处理复杂的数据的回归问题时，普通的线性回归会遇到一些问题，主要表现在： 预测精度：这里要处理好这样 ...

简单易学的机器学习算法—分类回归树CART

2017-03-22

简单易学的机器学习算法—分类回归树CART 分类回归树（Classification and Regression Tree，CART）是一种典型的决策树算法，CART算法不仅可以应用于分类问题，而且可以用于回归问题。 一、树回归的概念   ...

机器学习-回归模型-欠拟合和过拟合

2017-03-20

机器学习-回归模型-欠拟合和过拟合 1. 什么是欠拟合和过拟合 先看三张图片，这三张图片是线性回归模型 拟合的函数和训练集的关系 第一张图片拟合的函数和训练集误差较大，我们称这种情况为 欠拟合 ...

从曲线拟合问题窥视机器学习中的相关概念

2017-03-20

从曲线拟合问题窥视机器学习中的相关概念 一直徘徊在机器学习的边缘未敢轻易造次并畏惧其基本原理思想，从每一本厚厚的参考资料中都可以看出机器学习是一门跨越概率论、决策论、信息论以及最优化的学科的综合学 ...

机器学习中的隐马尔科夫模型（HMM）详解

2017-03-18

机器学习中的隐马尔科夫模型（HMM）详解 在之前介绍贝叶斯网络的博文中，我们已经讨论过概率图模型（PGM）的概念了。Russell等在文献【1】中指出：“在统计学中，图模型这个术语指包含贝叶斯网络在内的比较宽泛 ...

机器学习实现与分析之四（广义线性模型）

2017-03-15

机器学习实现与分析之四（广义线性模型） 指数分布族 首先需要提及下指数分布族，它是指一系列的分布，只要其概率密度函数可以写成下面这样的形式： 一般的很多分布（如高斯分布，泊松分布，二项 ...

干货 | 基础机器学习算法

2017-03-10

本篇内容主要是面向机器学习初学者,介绍常见的机器学习算法，当然,欢迎同行交流。 哲学要回答的基本问题是从哪里来、我是谁、到哪里去，寻找答案的过程或许可以借鉴机器学习的套路：组织数据->挖掘知识->预测未来。 ...

数据统计分析方法

2017-03-07

数据统计分析方法 数据分析是把隐没在一大批看来杂乱无章的数据中的信息，集中、萃取和提炼出来，以找出所研究对象的内在规律，并提供决策支持的一系列分析过程。数据统计分析方法已经应用到各行各业，在互联网 ...

大机会？大风险？大忽悠? ——它们有一个共同的名字叫“大数据”

2017-03-01

大机会？大风险？大忽悠? ——它们有一个共同的名字叫“大数据” 一、大数据带来大机会 各行各业突飞猛进地运用大数据 先说大数据，大数据到来之后，包括电子商务、零售企业、交通运输、信息产业、公共卫 ...

教你如何用R进行数据挖掘

2017-02-26

教你如何用R进行数据挖掘 R是一种广泛用于数据分析和统计计算的强大语言，于上世纪90年代开始发展起来。得益于全世界众多 爱好者的无尽努力，大家继而开发出了一种基于R但优于R基本文本编辑器的R Studio（用户 ...

当电影遭遇“大数据” 用大数据支撑营销

2017-02-25

当电影遭遇“大数据” 用大数据支撑营销 所谓大数据管理是指，通过收集整理生活中方方面面的数据，对其进行分析和挖掘，进而从中获得有价值的信息，并指导公司经营，降低风险的一种新的商业模式。 而对于电 ...

R语言中的离群值检测和处理

2017-02-19

R语言中的离群值检测和处理 数据中的离群值往往会扭曲预测结果并影响模型精度，回归模型中离群值的影响尤其大，因此我们需要对其进行检测和处理。 离群值检测的重要性 处理离群值或者极端值并不是数据建 ...

用R语言进行数据探索

2017-02-18

用R语言进行数据探索 这一次我们来说一下数据的探索性分析,R语言图标100X76 1） 主要分析工具 主要的图形表示方法有 1条图（barplot）：用于分类数据。 2．直方图（hist）、点图（dotchart）、茎叶图（stem） ...

R语言初学者必须要知道的事儿

2017-02-16

R语言初学者必须要知道的事儿 2017年1月24日晚8点半，乐逗游戏挖掘团队负责人、资深R语言用户谢佳标带来了主题为“数据分析利器：R语言快速入门”的Chat交流。以下是主持人孙莫默整理的实录，记录了谢佳标与读 ...

快速成为R语言全栈数据分析师

2022-01-20

R源自90年代S编程语言的一个开源版本，主要用于统计分析、绘图、数据挖掘，在高校及商业统计分析领域非常受欢迎。最新的O’Reilly数据科学薪资调查也将R列为最高薪的数据科学家使用技能之一。当然，R最吸引人的地方 ...

SPSS统计分析案例:最优尺度回归

2017-01-31

SPSS统计分析案例:最优尺度回归 1、什么是最优尺度回归？ 英文简称CATREG，也称分类回归。 普通线性回归对数据的要求十分严格，当遇到分类变量时，线性回归无法准确地反映分类变量不同取值的距离，比如性 ...

数据分析中常见的七种回归分析以及R语言实现（四）---多项式回归

2017-01-23

数据分析中常见的七种回归分析以及R语言实现（四）---多项式回归 在我们平时做回归的时候，大部分都是假定自变量和因变量是线性，但有时候自变量和因变量可能是非线性的，这时候我们就可能需要多项式回归了，多 ...