python数据挖掘的基本流程有哪些？

2020-07-14

使用python对数据进行处理时，数据挖掘是极为重要的方式和阶段，目的是搜集大量数据，并从中通过算法搜索出隐藏在数据中的那些隐含的、先前未知的，并有具有潜在使用价值的信息。那么python数据挖掘的具体流程是怎 ...

特征工程是什么？常用的方法有哪些？

2020-07-07

“数据决定了机器学习的上限，而算法只是尽可能逼近这个上限”，这里的数据指的就是经过特征工程得到的数据。特征工程指的是把原始数据转变为模型的训练数据的过程，它的目的就是获取更好的训练数据特征，使得机器 ...

机器学习python应用，简单机器学习项目实践！

2020-05-25

上一篇文章中介绍了机器学习的简单知识，还有python中进行机器学习实践需要的生态环境，接下来将会通过鸢尾花分类这个例子对机器学习做一个简要的介绍。通过一步一步地实现这个项目来介绍以下内容。 导入和 ...

学术研究中的“加速器”--Python爬虫

2019-08-28

而网络爬虫是收集相关数据的利器,它可以抓取某个网站或者某个应用的内容，提取有用的价值以及各种数据。也可以模拟用户在浏览器或者App应用上的操作，实现自动化的程序。 “工欲善其事，必先利其器”，当您 ...

从数据产品经理视角，聊聊数据处理

2018-09-10

本篇文章将以数据产品的角度来看数据采集后数据流的处理过程；并讲解一丢丢偏技术、但与数据产品产出息息相关的数据仓库。 一. 数据处理过程 数据产品经理的工作中一大部分都是将不可估测的数据转化为可 ...

备好数据后，数据科学家还要做什么

2018-08-25

备好数据后，数据科学家还要做什么 在这个数据科学越来越火的时代，数据科学家的工作到底是怎样的呢? 数据科学越来越火，很多人都想转行入坑数据科学家，这当然是好事。可是很多人都以 ...

案例详解SPSS聚类分析全过程

2018-08-01

案例详解SPSS聚类分析全过程 案例数据源： 有20种12盎司啤酒成分和价格的数据，变量包括啤酒名称、热量、钠含量、酒精含量、价格。 【一】问题一：选择那些变量进行聚类?——采用“R型聚类” ...

机器学习之神经网络入门

2018-07-28

机器学习之神经网络入门 神经网络是由具有适应性的简单单元组成的广泛并行互连的网络，它的组织能够模拟生物神经系统对真实世界物体所作出的交互反应。神经网络用途极其广泛，本文采用神经网络算法用于金融领域 ...

准确真实数据决定信息化价值

2018-07-08

准确真实数据决定信息化价值 企业信息化可以实现数据的全局共享，前提是必须在规范化的数据基础上运行。对此有些企业提出了建设数据中心的思路，高度集中管理企业数据资源。从而使企业在实施信息化建设时，需要 ...

在大数据行业工作两年是怎样一种体验

2018-07-04

在大数据行业工作两年是怎样一种体验 写在前面 今年广州的初夏在经历了大雨的洗礼之后，一切都变得更加明朗起来，新的工作，新的人和事。懒惰让我变得更焦虑，焦虑促使我进步，程序员的焦虑大家应该都有共同 ...

R语言使用层次聚类处理数据

2018-06-09

R语言使用层次聚类处理数据 凝聚层次聚类说明 层次聚类可以分成凝聚（agglomerative,自底向上）和分裂（divisive，自顶向下）两种方法来构建聚类层次，但不管采用那种算法，算法都需要距离的相似性度量来判 ...

SPSS聚类分析—一个案例演示聚类分析全过程

2018-06-03

SPSS聚类分析—一个案例演示聚类分析全过程 案例数据源： 有20种12盎司啤酒成分和价格的数据，变量包括啤酒名称、热量、钠含量、酒精含量、价格。数据来自《SPSS for Windows 统计分析》data11-03。点击下载 ...

商业智能（BI）系统规划前的准备工作

2018-04-18

商业智能（BI）系统规划前的准备工作 通常在进行商业智能信息系统项目之前，可以先从明确经营分析的愿景和目的入手，确定分析方法和工具、设计经营分析框架、设计指标和报表、IT实现和持续改进机制建立等几个步 ...

数据挖掘实战：带你做客户价值分析(附代码)

2018-03-27

数据挖掘实战：带你做客户价值分析(附代码) 背景与挖掘目标 1. 背景     航空公司业务竞争激烈，从产品中心转化为客户中心     针对不同类型客户，进行精准营销，实现利润最大 ...

本人用到了spss重要功能总结

2018-03-19

本人用到了spss重要功能总结 一、SPSS篇 （1）用spss剔除异常值 异常值：一组观测值中与平均值的偏差超过两倍标准差的测定值。 一、analyze >> descriptive statistics >>des ...

关于数据中心建设目标和任务的探讨

2018-02-28

关于数据中心建设目标和任务的探讨 目前国内电子政务和大型企业的数据中心建设需要探讨的问题，首先是目标和任务的定位。以地市级城市电子政务的数据中心建设为例，我们认为电子政务的数据中心是政府信息化的集 ...

R描述性统计分析

2018-02-27

R描述性统计分析 概念 数据摘要，有损地提取数据特征的过程，包含基本统计，分布／累计统计，数据特征（相关性，周期性等），数据挖掘 数据有很多变量和观测值，可以用一些简单表格，图形和少数汇总数字 ...

数据预处理的一些知识

2018-02-24

数据预处理的一些知识 做研究时只要与数据分析相关就避免不了数据预处理。我们常见的预处理包括：标准化（规范化），归一化，零均值（化），白化，正则化……这些预处理的目的是什么呢？网上查的总是零零散 ...

大数据时代信息安全隐患

2018-02-22

大数据时代信息安全隐患 近年来，随着信息数据的爆炸式增长，数据的财富转换率也出现了大幅度的增长。这就造成了一个大数据时代的背景。很多人都把数据的增长看做了未来最重要的财富。但是数据的大幅增长，给越 ...

保险产业拥抱“大数据时代”

2018-02-08

保险产业拥抱“大数据时代” 当今，数据已经渗透到每一个行业和业务领域，成为重要的生产因素。人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。中国的保险（和讯放心保）销售模 ...