如何针对企业产品进行有效分析，看大佬用SQL分析淘宝用户行为

2021-09-08

淘宝网，是全球最受欢迎的网购零售平台之一，拥有近5亿的注册用户数，每天有超过6千万的固定访客，同时每天的在线商品数已经超过了8亿件，平均每分钟售出4.8万件商品。 分析目标与思路 何判断高价值用户， ...

集成算法，随机森林回归模型

2021-07-20

来源：数据STUDIO 作者：云朵君 所有的参数，属性与接口，全部和随机森林分类器一致。仅有的不同就是回归树与分类树的不同，不纯度的指标， 参数Criterion不一致。 RandomForestRegressor(n_estimators='wa ...

运用Python爬取并分析全国5w+新楼盘近况

2021-07-14

作者：云朵君 通过爬取全国城市在售预售新盘，下面以获取单个城市为例，介绍爬取数据部门主要代码。完整代码见文末获取方式。 1、定义函数 2、获取数据的主函数 def get_data(c_city, c ...

CDA LEVEL 1 考试，知识点《机器学习基本概念》

2024-10-04

机器学习研究如何让计算机不需要明确的程序也能具备学习能力。(—— Arthur Samuel,1959) 二、模型构建流程 既然我们机器学习是借助数学模型理解数学，那么最重要的原材料就是数据了。获取数据 ...

用Python制作处理小工具，多种操作，一键完成，非常实用

2021-02-07

作者：GUI工作组 本文将结合GUI工具PySimpleGUI，来讲解如何制作一款属于自己的数据预处理小工具，让这个过程也能够自动化！最终效果如下 本文将分为三部分讲解： 主要涉及将涉及以下模块： 一、G ...

如何将杂乱的数据整理好（一）数据完整性判断

2021-02-05

来源：丁点帮你 作者：丁点helper 在前面的文章中，我们跟大家一起学习了R中的数据导入、基本的操作方法、描述性统计等内容。 这其中的很多操作都是针对格式和内容都完好的数据而言的。但在实际工作 ...

如何用Python进行大数据挖掘和分析？快速入门路径图

2018-08-30

如何用Python进行大数据挖掘和分析？快速入门路径图 大数据无处不在。在时下这个年代，不管你喜欢与否，在运营一个成功的商业的过程中都有可能会遇到它。 什么是 大数据 ？ 大数据就像它看起来那样——有 ...

教你如何用R进行数据挖掘

2018-05-16

教你如何用R进行数据挖掘 R是一种广泛用于数据分析和统计计算的强大语言，于上世纪90年代开始发展起来。得益于全世界众多 爱好者的无尽努力，大家继而开发出了一种基于R但优于R基本文本编辑器的R Studio（用 ...

商业智能的发展趋势及关键技术分析

2018-03-23

商业智能的发展趋势及关键技术分析 从应用和技术需求上看，商业智能的发展趋势可以归纳为以下方面。功能上具有可配置性、灵活性、可变化性。BI系统的使用范围从特定部门到企业所有用户，其业务多样化，需求格式 ...

浅谈数据分析和数据建模

2017-12-15

浅谈数据分析和数据建模 大数据应用有几个方面，一个是效率提升，帮助企业提升数据处理效率，降低数据存储成本。另外一个是对业务作出指导，例如精准营销，反欺诈，风险管理以及业务提升。过去企业都是通过线下 ...

缺失数据处理-插值法

2017-12-04

缺失数据处理-插值法 在数据挖掘中，原始海量的数据中存在着大量不完整、不一致、有异常、偏离点的数据。这些问题数据轻则影响数据挖掘执行效率，重则影响执行结果。因此数据预处理工作必不可少，而其中常见工 ...

Python中的缺失值及其处理

2017-12-01

Python中的缺失值及其处理 缺失值处理用到的主要工具为 Numpy 库和 Pandas库中的有关函数，要导入 Numpy 和 Pandas： >>>import numpy as np >>>import pandas as pd 在 Python 中，特殊的常量 None 通常被 ...

SPSS回归分析：自动线性模型

2017-11-19

SPSS回归分析：自动线性模型 一、自动线性模型（分析-回归-自动线性建模） 1、 目标（分析-回归-自动线性建模-构建选项） 2、基本（分析-回归-自动线性建模-构建选项） 自动准备 ...

【北京新光在线教育咨询有限公司】招聘数据分析师

2017-08-26

【北京新光在线教育咨询有限公司】招聘数据分析师 北京新光在线教育咨询有限公司（Bright Education Online）是一家专业测评服务公司。公司拥有独具优势的核心技术和巨大的发展潜力，深受资本市场特别是国内顶尖大学 ...

R语言：异常值检验、离群点分析、异常值处理

2017-07-17

R语言：异常值检验、离群点分析、异常值处理 笔者寄语：异常值处理一般分为以下几个步骤：异常值检测、异常值筛选、异常值处理。其中异常值检测的方法主要有：箱型图、简单统计量（比如观察极值） 异常值处理方 ...

说说什么是数据挖掘

2017-05-13

说说什么是数据挖掘 数据挖掘就是指从数据中获取知识。 好吧，这样的定义方式比较抽象，但这也是业界认可度最高的一种解释了。对于如何开发一个大数据环境下完整的数据挖掘项目，业界至今仍没有统一的规范 ...

证券数据挖掘探索及实践

2016-11-23

证券数据挖掘探索及实践 在券商企业多年来的运营中，积累了大量投资者真实的第一手买卖金融产品数据，近年互联网金融的发展，加速了各类运营数据的产生，也让数据真正成为了价值的核心，数据成为了数据资产。 ...

数据分析也讲究艺术

2016-10-28

数据分析也讲究艺术 数据分析也讲究艺术，如何理解？ 我们先来分析一下数据分析的流程：确定目标>收集数据>分析数据>可视化展示>评价。再思考其间参与的人员，谁来操作这些数据：数据分析师、业务员、IT人员 ...

几种常见的缺失数据插补方法

2016-09-10

几种常见的缺失数据插补方法 （一）个案剔除法(Listwise Deletion) 　　最常见、最简单的处理缺失数据的方法是用个案剔除法(listwise deletion)，也是很多统计软件（如SPSS和SAS）默认的缺失值处理方法。在这 ...

解析spss常用程序

2016-08-10

解析spss常用程序 1、读入数据的程序： DATA LIST LIST   /id (F3) Interview_date (ADATE10) Age (F3) Gender (A1)     Income_category (F1) Religion (F1) opinion1 to opinion4 ( ...