使用Python连接MySQL数据库

2018-01-10

使用Python连接MySQL数据库 本篇文章使用python中的pymysql库连接MySQL数据库，并完成建表，数据写入和查询的过程。为了保证内容的完整性，我们将内容分为两个 阶段，第一阶段简单介绍数据的爬取过程。看过之 ...

用Python的pandas框架操作Excel文件中的数据教程

2018-01-04

用Python的pandas框架操作Excel文件中的数据教程 本文的目的，是向您展示如何使用pandas 来执行一些常见的Excel任务。有些例子比较琐碎，但我觉得展示这些简单的东西与那些你可以在其他地方找到的复杂功能同等 ...

缺失数据处理-插值法

2017-12-04

缺失数据处理-插值法 在数据挖掘中，原始海量的数据中存在着大量不完整、不一致、有异常、偏离点的数据。这些问题数据轻则影响数据挖掘执行效率，重则影响执行结果。因此数据预处理工作必不可少，而其中常见工 ...

数据探索之缺失值处理及代码实现

2017-11-30

数据探索之缺失值处理及代码实现 在数据挖掘中，前期数据预处理，会涉及到很多缺失值的处理问题。 现以python代码实现为例，看如何具体处理的。 所需python包 from pandas import Series, DataFrame import pan ...

箱形图以及python实践

2017-10-25

箱形图以及python实践 最近在接触kaggle的竞赛示例，练习了一下，感觉受益匪浅。同时，心中也有个问题。拿到数据之后第一件事是什么？分析数据的情况？怎么分析？分析之后如何去处理数据呢？等等一些数据分析 ...

Python数据分析之真实IP请求Pandas详解

2017-08-04

Python数据分析之真实IP请求Pandas详解 这篇文章主要给大家介绍了Python数据分析之真实IP请求Pandas，文中通过示例嗲吗给大家介绍的很详细，相信对大家的学习或者理解具有一定的参考借鉴价值.pandas 是基于 Num ...

python绘图：matplotlib和pandas的应用

2017-07-01

python绘图：matplotlib和pandas的应用  在进行数据分析时，绘图是必不可少的模式探索方式。用Python进行数据分析时，matplotlib和pandas是最常用到的两个库。 1、matplotlib库的应用 准备工作如下：打开i ...

R语言天气可视化应用

2017-05-07

R语言天气可视化应用 在很多人看来，R语言还只是个玩具，完全不具备企业级应用的能力。说这些话的人，根本就不了解R语言，更不清楚如何做企业级应用开发。从我最早接触R语言时，就把R做为可视化引擎嵌入到了晒 ...

使用Python分析纽约出租车搭乘数据

2017-03-27

使用Python分析纽约出租车搭乘数据 在纽约，出租车分为两类：黄色和绿色。黄色出租(Yellow TAXI)车可以在纽约五大区（布朗克斯区、布鲁克林区、曼哈顿、皇后区、斯塔滕岛）内任何地点搭载乘客。绿色出租车(Gree ...

程序员之数据分析Python技术栈

2017-03-07

程序员之数据分析Python技术栈 Python是一种非常流行的脚本语言，其还提供了一个科学技术栈，可以进行快捷方便的数据分析，本系列文章将聚焦在如何使用基于Python的技术栈来构建数据分析的工具集合。工欲善其事 ...

一个大数据首席科学家眼中的大数据产业2016年终总结

2017-02-19

一个大数据首席科学家眼中的大数据产业2016年终总结 大数据产业发展了两年后，从探索阶段进入了应用阶段。数据被定义成重要的资源，正在得到企业的重视，在经营过程中发挥着重要的作用。企业看到了数据价 ...

大数据技能知多少

2016-10-20

大数据技能知多少 说起“大数据”一词，也是真正被吵够了。做个简单的统计也叫大数据，做个表格、画个图形出来，就叫大数据了。言谈间凡是不和“大数据”沾边，就感觉已经落伍了。其实，很多人除了知道简单的统 ...

如何用Python高效地学习数据结构

2016-10-10

如何用Python高效地学习数据结构 今天的每日一答，我们来看看如何高效地学习一门语言的数据结构，今天我们先看Python篇。 所谓数据结构，是指相互之间存在一种或多种特定关系的数据类型的集合。 Pyt ...

11个方法教你如何提升R语言代码运算效率

2016-10-09

11个方法教你如何提升R语言代码运算效率 众所周知，当我们利用R语言处理大型数据集时，for循环语句的运算效率非常低。有许多种方法可以提升你的代码运算效率，但或许你更想了解运算效率能得到多大的提升。本文 ...

建立数据场的七大技能

2016-03-29

建立数据场的七大技能 成为数据极客，建立自己的数据场需要哪些技能呢?遇到普通的数据，通过SQL做分析。如果数据量比较大，可以使用Hadoop等大数据框架处理。在深入挖掘上，可用Python或者R语言进行编程。 0 ...

大数据技术人员工具包最全集合

2016-03-15

大数据技术人员工具包最全集合 数据科学融合了多门学科并且建立在这些学科的理论和技术之上，包括数学、概率模型、统计学、机器学习、数据仓库、可视化等。在实际应用中，数据科学包括数据的收集、清洗、分析、 ...

数据科学家和大数据技术人员工具包汇总

2016-03-14

本文简介：数据科学家的常用工具与基本思路，数据分析师和数据科学家使用的工具综合概述，包括开源的技术平台相关工具、挖掘分析处理工具、其它常见工具等几百种，几十个大类，部分网址。为数据科学教育和知识分享 ...

4位专家解读2015大数据技术进展

2016-01-13

2015年，整个IT技术领域发生了许多深刻而又复杂的变化。本文是大数据解读篇，在这篇文章里我们将回顾2015展望2016，看看过去的一年里广受关注的技术有哪些进展，了解下数据科学家这个职业的火热。 在关键技术进 ...

如何用R绘制地图

2016-01-10

如何用R绘制地图 本文主要包含三种绘制地图的方法：绘制基础地图、基于空间数据格式(shapefile)绘制地图以及如何调用百度地图和谷歌地图的数据来绘制地图。 基础地图 方法 从map()包里获取地图数据， ...

numpy学得还不错？来试试这20题！（上）

2020-08-27

作者：刘早起 来源：早起Python 大家好，又到了numpy进阶修炼专题。numpy大家应该不陌生了，看了太多的原理讲解之后，用刷题来学习是最有效的方法，本文将带来20个NumPy经典问题，附赠20段实用代码 ...