大数据助力 精准脱贫更透明

2017-07-10

大数据助力 精准脱贫更透明 “核查工作开展以来，叙永全县在一线上传采集信息的人数，单日最高峰大约是3600多人，目前已录入核查记录23645户，采集图片信息70余万条，如此海量信息，只要通过标注关键词，就可以 ...

R语言时间序列数据应用xts

2017-07-07

R语言时间序列数据应用xts zoo是时间序列的基础库，是面向通用的设计。 xts 是对时间序列库(zoo) 的一种扩展实现。xts 类型继承了zoo 类型，丰富了时间序列数据处理的函数。 一、xts对象的结构和定义 1、 ...

大数据不是空中楼阁，红象云腾一站式技术让大数据平台落地

2017-07-04

大数据不是空中楼阁，红象云腾一站式技术让大数据平台落地 中国大数据领域的产、学、研、用大格局正在形成，大数据产业蓝图已经绘成就。在国家层面，实施大数据战略，塑造国家竞争力的战略制高点;企业推 ...

python绘图：matplotlib和pandas的应用

2017-07-01

python绘图：matplotlib和pandas的应用  在进行数据分析时，绘图是必不可少的模式探索方式。用Python进行数据分析时，matplotlib和pandas是最常用到的两个库。 1、matplotlib库的应用 准备工作如下：打开i ...

大数据时代下的房地产营销 深化房地产大数据挖掘

2017-06-29

大数据时代下的房地产营销 深化房地产大数据挖掘 在此次数据时代互联网营销峰会暨MDSS产品发布会上，天津房天下举办了一场高峰论坛：新定义、新思维——大数据时代互联网营销思想风暴同学会。一起分享在大数据 ...

SQL注入之access注入

2017-06-26

SQL注入之access注入 在编写高效 SQL 时，你可能遇到的最有影响的事情就是索引[1]。但是，一个很重要的事实就是很多 SQL 客户端要求数据库做很多“不必要的强制性工作”。 跟我再重复一遍： 不必要的强制 ...

大数据概念丨史上最全大数据解析

2017-06-25

大数据概念丨史上最全大数据解析 现如今，我们身边很多人对一些热门的新技术、新趋势往往趋之若鹜却又很难说得透彻，比如大数据，如果被问大数据和你有什么关系，估计很少能说出一二三来。究其原因，一是因为大 ...

MySQL SQL语句优化技巧

2017-06-23

MySQL SQL语句优化技巧 1、应尽量避免在 where 子句中使用!=或<>操作符，否则将引擎放弃使用索引而进行全表扫描。 2、对查询进行优化，应尽量避免全表扫描，首先应考虑在 where 及 order by 涉及的列上建立 ...

大数据平台架构技术选型与场景运用

2017-06-23

大数据平台架构技术选型与场景运用 讲师从数据来源、数据源结构、数据变化程度和数据规模等4个维度对数据源进行分类，数据源分类维度的不同决定最后的技术选型。讲师还对数据源分类的定义及选型方式进行详细讲 ...

SQL调优-表统计信息未及时更新导致查询超级慢

2017-06-19

SQL调优-表统计信息未及时更新导致查询超级慢 某日同事丢给我一个看上去复杂的查询（实际就涉及两张表，套来套去）说只是换了日期条件，但一个查询5秒出数据，一个根本查不出来。现在整理下解决过程，及涉及的 ...

美媒称大数据让中国互联网巨头影响力巨大 引发隐私泄露担忧

2017-06-18

美媒称大数据让中国互联网巨头影响力巨大 引发隐私泄露担忧 参考消息网6月18日报道美媒称，中国三大互联网公司阿里巴巴、腾讯和百度将能影响中国的大片商业市场，因为这些公司掌握了千百万消费者以及他们 ...

R语言矩阵

2017-06-17

R语言矩阵 矩阵是元素布置成二维矩形布局的R对象。 它们包含相同原子类型的元素。尽管我们可以创建只包含字符或只逻辑值的矩阵，但是它们没有多大用处。我们使用的是在数学计算中含有数字元素矩阵。 使用 ma ...

支付风控的数据仓库建设

2017-06-10

支付风控的数据仓库建设 支付系统的风控分析需要大量的数据支撑。本文从名单、画像和图谱三个层面，分析在支付系统建设的不同阶段如何建立支持风控计算的数据仓库，详细介绍从什么地方采集数据、如何采集 ...

R语言做数据探索

2017-06-09

R语言做数据探索 1 数据导入 数据常用格式.csv/.txt/.xls/.json/.xml。 R语言提供相应的函数和库实现对这些数据格式的导入。 现已导入.csv格式和以tab分隔的.txt格式为例 # 读.csv格式 data1<-read.c ...

SQL注入攻防入门详解

2017-06-08

SQL注入攻防入门详解 这几天把sql注入的相关知识整理了下，希望大家多多提意见。（对于sql注入的攻防，我只用过简单拼接字符串的注入及参数化查询，可以说没什么好经验，为避免后知后觉的犯下大错，专门查看大 ...

大数据助推新型智库建设

2017-06-01

大数据助推新型智库建设 大数据与智库都是我国的未来重点发展领域，二者联动将起到事半功倍的效果。数据科学的进步和数据产业的发展能为智库建设和研究提供技术支撑；智库可以成为大数据发展的实体依托，促进大 ...

R语言解读多元线性回归模型

2017-05-31

R语言解读多元线性回归模型 在许多生活和工作的实际问题中，影响因变量的因素可能不止一个，比如对于知识水平越高的人，收入水平也越高，这样的一个结论。这其中可能包括了因为更好的家庭条件，所以有了更好的 ...

Hadoop Hive sql语法详解

2017-05-28

Hadoop Hive sql语法详解 Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构 化的数据文件映射为一张数据库表， ...

sql语句优化的13中方法

2017-05-27

sql语句优化的13中方法 1，什么是“执行计划”？ 执行计划是数据库根据SQL语句和相关表的统计信息作出的一个查询方案，这个方案是由查询优化器自动分析产生的，比如一条SQL语句如果用来从一个 10万条记录的 ...

盘点大数据商业智能的十大戒律

2017-05-26

盘点大数据商业智能的十大戒律 如今，各路企业和组织都不再使用上一代架构来存储大数据。既然如此，为什么还要使用上一代商业智能（BI）工具来进行大数据分析呢？在为企业选择BI工具时，应该遵守以下“十 ...