SPSS非参数检验：单样本

2018-01-05

SPSS非参数检验：单样本 一、概念： 单样本非参数检验使用一个或多个非参数检验识别单个字段中的差别。非参数检验不假定您的数据呈正态分布。非参数检验(Nonparametric tests)是统计分析方法的重要 ...

制造业利用大数据的要领

2018-01-05

制造业利用大数据的要领 在近几年里， “大数据”已经完全占据了主流分析师和商业媒体的想象力。以大数据为基础的新一代信息驱动企业的决策正在成为主流，而且，越来越多的企业正在选择通过利用无数相互连接的 ...

SPSS非参数检验：独立样本

2018-01-05

SPSS非参数检验：独立样本 一、概念： 独立样本的非参数检验是在对总体分布不甚了解的情况下，通过对两组或多组独立样本的分析来推断样本来自的总体的分布等是否存在显著差异的方法。独立样本是指 ...

通过SQL语句直接实现Excel与数据库的导入导出

2018-01-01

通过SQL语句直接实现Excel与数据库的导入导出 导入/导出Excel 1.--从Excel文件中,导入数据到SQL数据库中,很简单,直接用下面的语句: /*=============================================================== ...

影响数据检索效率的几个因素

2018-01-01

影响数据检索效率的几个因素 数据检索有两种主要形态。第一种是纯数据库型的。典型的结构是一个关系型数据，比如 mysql。用户通过 SQL 表达出所需要的数据，mysql 把 SQL 翻译成物理的数据检索动作返回结果。 ...

Excel工作表之SQL查询方法

2018-01-01

Excel工作表之SQL查询方法 近期在单位上做业务数据分析，发现还是Excel用的直接，筛选、求和、分类等等也是不亦乐乎，但是发现一些函数的效率与SQL还是有着较大差距，甚至是天壤之别，故作文一篇，提供Excel中 ...

将excel里面的数据直接生成sql语句

2017-12-31

将excel里面的数据直接生成sql语句 excel表格中有A、B、C三列数据，希望导入到数据库users表中，对应的字段分别是name,sex,age 。 在你的excel表格中增加一列，利用excel的公式自动生成sql语句，方法如下： ...

大并发大数据量请求的处理方法

2017-12-28

大并发大数据量请求的处理方法 大并发大数据量请求一般会分为几种情况： 1.大量的用户同时对系统的不同功能页面进行查找，更新操作 2.大量的用户同时对系统的同一个页面，同一个表的大数据量进行查询操作 3.大 ...

大数据量高并发访问数据库结构的设计

2017-12-28

大数据量高并发访问数据库结构的设计 如果不能设计一个合理的数据库模型，不仅会增加客户端和服务器段程序的编程和维护的难度，而且将会影响系统实际运行的性能。所以，在一个系统开始实施之前，完备的数 ...

面试题-关于大数据量的分布式处理

2017-12-27

面试题-关于大数据量的分布式处理 题目：生产系统每天会产生一个日志文件F，数据量在5000W行的级别。文件F保存了两列数据，一列是来源渠道，一列是来源渠道上的用户标识。文件F用来记录当日各渠道上的所有访问 ...

浅谈使用ArcPy执行大数据量处理任务

2017-12-27

浅谈使用ArcPy执行大数据量处理任务 Python功能强大而易于学习。对于ArcGIS for Desktop用户来讲，Python是提高工作效率的不二选择。 Arcpy是esri提供的用于高效数据处理分析、制图等的Python站点包。 利用A ...

大数据量的数据库表设计技巧

2017-12-26

大数据量的数据库表设计技巧 即使是一个非常简单的数据库应用系统，它的数据量增加到一定程度也会引起发一系列问题。如果在设计数据库的时候，就提前考虑这些问题，可以避免由于系统反映迟缓而引起的用户抱怨。 ...

面向大数据的分布式调度

2017-12-25

面向大数据的分布式调度 大数据的分布式调度是在进行数据ETL过程中起到了总体的承上启下的角色，整个数据的生产、交付、消费都会贯穿其中，本文从调度、分布式调度的特征展开，再对大数据调度个性化特征的一些 ...

Python协程的用法和例子详解

2017-12-17

Python协程的用法和例子详解 从句法上看，协程与生成器类似，都是定义体中包含 yield 关键字的函数。可是，在协程中， yield 通常出现在表达式的右边（例如， datum = yield），可以产出值，也可以不产出 —— ...

如何成为一名数据分析师：数据的初步认知

2017-12-12

如何成为一名数据分析师：数据的初步认知 对所有从事数据相关工作的人而言，都有一个老生常谈的问题： 数据认知 !毕竟在真正开始分析、BI 报表开发或者建模前，对数据进行一定的审查和认知是必须的。今天，就 ...

文本分类和聚类有什么区别

2017-12-10

文本分类和聚类有什么区别 简单点说：分类是将一篇文章或文本自动识别出来，按照已经定义好的类别进行匹配，确定。聚类就是将一组的文章或文本信息进行相似性的比较，将比较相似的文章或文本信息归为同一组的技 ...

为何企业无法从数据科学中真正获得价值

2017-12-09

为何企业无法从数据科学中真正获得价值 当今企业拥有越来越多的数据，但这些数据并没有完全被转化成可操作的信息。在过去的几年里，我和我的MIT调查小组一直在寻找一个基本问题的答案：如何让企业通过机器学习 ...

SPSS之两独立样本非参数检验（U检验）

2017-11-22

SPSS之两独立样本非参数检验（U检验） 一、概述 Mann-Whitney U 检验是用得最广泛的两独立样本秩和检验方法。简单的说，该检验是与独立样本 t 检验相对应的方法，当正态分布、方差齐性等不能达到 t 检验的要 ...

数据处理流程和数据分析方法

2017-11-21

数据处理流程和数据分析方法 大数据分析这件事用一种非技术的角度来看的话，就可以分成金字塔，自底向上的是三个部分，第一个部分是数据采集，第二个部分是数据建模，第三个部分是数据分析，我们来分别看一下。 ...

SPSS回归分析：自动线性模型

2017-11-19

SPSS回归分析：自动线性模型 一、自动线性模型（分析-回归-自动线性建模） 1、 目标（分析-回归-自动线性建模-构建选项） 2、基本（分析-回归-自动线性建模-构建选项） 自动准备 ...