教你如何用R进行数据挖掘

2018-05-16

教你如何用R进行数据挖掘 R是一种广泛用于数据分析和统计计算的强大语言，于上世纪90年代开始发展起来。得益于全世界众多 爱好者的无尽努力，大家继而开发出了一种基于R但优于R基本文本编辑器的R Studio（用 ...

数据挖掘的客户知识管理模型研

2018-04-04

数据挖掘的客户知识管理模型研 随着经济全球化和科技信息技术的快速发展。世界进入了一个崭新的知识经济时代。企业所处的竞争环境发生了深刻的变化，原有的市场开始衰落、竞争对手成倍增长、新技术突飞猛进、产 ...

大数据有什么技术，大数据技术内容介绍

2018-04-02

大数据有什么技术，大数据技术内容介绍 目前大数据发展一片火热，很多人都听说过大数据，但是对于大数据技术了解并不多，作为一个大数据工程师，经常会被行外人问到，大数据有什么技术。今天就专门写了一篇文章 ...

机器学习解决问题的步骤

2018-03-20

机器学习解决问题的步骤 针对任何一个打算由机器学习算法来解决的问题，都有一种『套路』存在，只要按照这个模板『按部就班』就能够得到一个结果。就跟一个产品的生产流水线是一个道理。但是得到结果的好坏跟你 ...

机器学习入门报告之 解决问题一般工作流程

2018-03-20

机器学习入门报告之 解决问题一般工作流程 对于给定的数据集和问题，用机器学习的方法解决问题的工作一般分为4个步骤： 一．     数据预处理 首先，必须确保数据的格式符合要求 ...

数据挖掘的数据处理

2018-03-06

数据挖掘的数据处理 从数据本身来考虑，数据挖掘通常需要有信息收集、数据集成、数据规约、数据清理、数据变换、数据挖掘实施过程、模式评估和知识表示8个步骤。 步骤（1）信息收集：根 ...

大数据分析整体技术流程及架构

2018-03-02

大数据分析整体技术流程及架构 本文对项目中所用到的大数据分析整体流程技术及其架构进行简要的总结，以供大家在大数据分析平台对数据处理流程更加明确 1.1数据处理流程 该项目是一个纯粹的数据分析项目 ...

大数据处理之道(预处理方法）

2018-02-28

大数据处理之道(预处理方法） 一：为什么要预处理数据？ （1）现实世界的数据是肮脏的（不完整，含噪声，不一致） （2）没有高质量的数据，就没有高质量的挖掘结果（高质量的决策必须依赖于高 ...

【上海数道信息科技有限公司】招聘数据分析师

2018-01-23

【上海数道信息科技有限公司】招聘数据分析师 上海数道信息科技有限公司成立于2014年，公司位于浦东张江高科技园区。我们是一群来自于中科院、IBM、SPSS、SKF、TalkingData组成的工业大数据专业团队，专注于工业互联 ...

数据挖掘总结之主成分分析与因子分析

2018-01-12

数据挖掘总结之主成分分析与因子分析 主成分分析与因子分析 1）概念： 主成分分析概念：主成分分析是把原来多个变量划为少数几个综合指标的一种统计分析方法。主成分分析（PCA）是一种数据降维技巧，它能 ...

数据分析工作的思考与总结

2017-12-24

数据分析工作的思考与总结 1.什么是数据分析? 基于现有的业务知识和统计学基础知识及基本思想的理解与掌握，通过数据库及统计分析工具对数据的调取与处理、分析，达到对现有问题or主题的探索与剖析，最终 ...

【川北真空科技(北京)有限公司】招聘数据分析师

2017-12-23

【川北真空科技(北京)有限公司】招聘数据分析师 CBVAC品牌创立于2002年。产业隶属于真空行业，是专业从事真空产品研发、设计、生产、销售和服务的综合性高新技术企业。成功研制中国第一台涡旋干式真空泵、中国第一台 ...

数据挖掘笔记-聚类-Canopy-原理与简单实现

2017-12-10

数据挖掘笔记-聚类-Canopy-原理与简单实现 Canopy聚类算法是一个将对象分组到类的简单、快速、精确地方法。每个对象用多维特征空间里的一个点来表示。这个算法使用一个快速近似距离度量和两个距离阈值 T1>T2来 ...

数据分析中非常实用的自编函数和代码模块整理

2017-12-04

数据分析中非常实用的自编函数和代码模块整理 搞了接近四个周的模型开发工作，今天整理代码文件，评分卡模型基本告一段落了。那么在模型开发或者是我们日常的数据分析工作中，根据我们具体的业务需求，经常会重 ...

缺失数据处理-插值法

2017-12-04

缺失数据处理-插值法 在数据挖掘中，原始海量的数据中存在着大量不完整、不一致、有异常、偏离点的数据。这些问题数据轻则影响数据挖掘执行效率，重则影响执行结果。因此数据预处理工作必不可少，而其中常见工 ...

数据分析中的缺失值处理

2017-12-01

数据分析中的缺失值处理 没有高质量的数据，就没有高质量的数据挖掘结果，数据值缺失是数据分析中经常遇到的问题之一。当缺失比例很小时，可直接对缺失记录进行舍弃或进行手工处理。但在实际数据中，往往 ...

数据探索之缺失值处理及代码实现

2017-11-30

数据探索之缺失值处理及代码实现 在数据挖掘中，前期数据预处理，会涉及到很多缺失值的处理问题。 现以python代码实现为例，看如何具体处理的。 所需python包 from pandas import Series, DataFrame import pan ...

【长沙合珏信息科技有限公司】招聘数据分析师

2017-11-24

【长沙合珏信息科技有限公司】招聘数据分析师 长沙合珏信息科技有限公司成立于2014年3月,注册资金2000万元。公司主要业务涵盖软件开发、软件技术服务、信息系统集成服务、信息技术咨询服务；网络集成系统建设、维护 ...

经典大数据问题分析

2017-11-11

经典大数据问题分析 第一部分、十道海量数据处理面试题 1、海量日志数据，提取出某日访问百度次数最多的那个IP。 此题，在我之前的一篇文章算法里头有所提到，当时给出的方案是：IP的数目还是有限的，最 ...

大数据:电信行业的战略方向

2017-10-19

大数据:电信行业的战略方向 随着IT和通信技术全面融入社会生活，每天产生的海量数据中蕴藏了巨大价值，数据正在成为企业的战略资产。从海量数据中获得新的认知、方法，从而创造新的价值，是各行业，尤其是 ...