如何避免无效的数据分析结果，这六种错误不可忽视

2021-12-08

导读：在数据清洗过程中，主要处理的是缺失值、异常值和重复值。所谓清洗，是对数据集通过丢弃、填充、替换、去重等操作，达到去除异常、纠正错误、补足缺失的目的。 作者：宋天龙 本文转自：大数据DT（ ...

我，一名国企数据人，决定在35岁开启自己的转型之路

2021-12-13

大家好，2017年我有幸成为CDA持证人，就此开启了自己数据人转型之路,一路学思维、学技术，并成为了我们公司数字化转型的推行负责人，以下是这几年工作中的一些思考。供同行参考，指正！ 思考一：企业为什么要 ...

在R中用箱形图做组间比较

2021-09-07

来源：丁点帮你 作者：丁点helper 之前的文章讲了如何用R绘制箱形图，以此来帮助我们了解数据的整体分布情况、是否存在异常值。除此之外，箱形图还可以进行数据的组间比较。 分组变量的数据清理 多重 ...

CDA Level Ⅲ 数据分析认证考试模拟题库（第十一期）

2021-08-11

不过，在出题前，要公布上一期Level Ⅲ 中51-55题的答案，大家一起来看！ 52、C 54、B A、数据正规化 C、数据一般化 57、数据准备方法是在评估模型性能之前对整个数据集进行处理，这会导致数据泄 ...

告别加班：一个让你不再重复工作的技能

2021-05-17

996 一直是互联网老生常谈的话题了，但抛开其他只谈工作本身，你有没有想过，下班晚、加班，有时候可能是因为自己工作比较低效？ 前阵子领导层打算引进一个大项目，要林晓做份详细报告作决策依据。 ...

一个Python爬虫工程师的修养

2021-02-26

来源：麦叔编程 作者：麦叔 练武不练功，到老一场空 练武的人都知道：练武不练功，到老一场空！ 说的是只练花架子，不练习内功，最终也都是一个菜鸟级武师。 学习编程何尝不是！我时常见到已经 ...

用Python制作处理小工具，多种操作，一键完成，非常实用

2021-02-07

作者：GUI工作组 本文将结合GUI工具PySimpleGUI，来讲解如何制作一款属于自己的数据预处理小工具，让这个过程也能够自动化！最终效果如下 本文将分为三部分讲解： 主要涉及将涉及以下模块： 一、G ...

关于均数和标准差相关计算的梳理

2021-01-28

作者：麦叔 说的是只练花架子，不练习内功，最终也都是一个菜鸟级武师。 学习编程何尝不是！我时常见到已经学习相当一段时间的程序员，连稍微深点的基本知识都没有掌握。可叹，可悲啊！根子不牢，注定走 ...

警钟敲响！全自动口罩机亮相，又一生产线将消失……

2020-12-28

近日，全自动口罩机亮相某博览会上，吸引了众多客商的目光，该机器占地不到10平方米，现场演示每分钟可生产160片口罩。 这对于普通老百姓而言是一件喜事，但是对于口罩流水线的工人，却犹如晴天霹雳，这种机器 ...

TED演讲-从苹果派到无人驾驶，为什么说大数据是更好的数据？

2020-12-22

 CDA数据分析师 出品 【导读】 从苹果派销量下降说起 毋庸置疑是苹果派。 当你看到超市的销售数据，会发现超市销售的30厘米冷冻馅饼中，苹果派胜出，这是毫无悬念的。绝大多数的销售份 ...

干货 | 你想知道的数据仓库知识，这里都有！

2020-11-19

数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented）、集成的（Integrate）、稳定的（Non-Volatile）、反映历史变化的（Time Variant）数据集合，用于支持管理决 ...

聊聊 python 数据处理全家桶（Redis篇）

2020-09-24

作者：星安果  来源：AirPython 前面两篇文章聊到了 python 处理 Mysql、Sqlite 数据库常用方式，本篇文章继续说另外一种比较常用的数据存储方式：Redis Redis：Remote Dictionary Server，即 ...

大数据时代的淘金价值

2018-08-31

大数据时代的淘金价值 当大数据时代大步向我们走来的时候，企业有足够的准备来迎接这场革命吗？面对汹涌而来的大数据时代，从目前的态势来看，由于大数据的技术门槛较高，在大数据领域展开竞争的IT公司，大都仍 ...

如何用Python进行大数据挖掘和分析？快速入门路径图

2018-08-30

如何用Python进行大数据挖掘和分析？快速入门路径图 大数据无处不在。在时下这个年代，不管你喜欢与否，在运营一个成功的商业的过程中都有可能会遇到它。 什么是 大数据 ？ 大数据就像它看起来那样——有 ...

改变数据中心面貌的5大数据挑战

2018-08-28

改变数据中心面貌的5大数据挑战 新的数据中心架构提出了新的数据挑战：数据采集将如何驱动从边缘到核心的数据中心架构的发展。 数据显然不再是以往的样子。作为数字化转型的一部分，各种组织正在寻找数据的 ...

大数据与云计算相辅相成

2018-08-23

大数据与云计算相辅相成 大数据的价值开始日益受到重视，人们对数据处理的实时性和有效性的要求也在不断提高。现在对大数据的应用己经不局限于BI（商业智能）领域，在公共服务、科学研究等各方面，大数据也都在 ...

剖析大数据市场：继续发展并逐渐迁移云端

2018-08-23

剖析大数据市场：继续发展并逐渐迁移云端 大数据市场呈一片欣欣向荣的景象，近年来，随着技术的不断发展创新，大数据顺着时代发展的潮流，发展迅猛。“大数据”一词最早出现在1990年的一本科技词典中，当时这个 ...

大数据的核心是云技术和BI

2018-08-23

大数据的核心是云技术和BI 关于大数据和云计算的关系人们通常会有误解。而且也会把它们混起来说，分别做一句话直白解释就是：云计算就是硬件资源的虚拟化；大数据就是海量数据的高效处理。如果做一个更形象的解 ...

大数据基础架构发展需考虑的重要因素

2018-08-22

大数据基础架构发展需考虑的重要因素 随着IT行业持续地灌输廉价存储的优势，企业较以往拥有者更多的数据，那么在评估大数据基础架构的过程中需要深入地调查哪些因素。本篇涉及到了在容量、延迟、访问性、安全性 ...

AI、大数据、云计算深度融合，星环大数据3.0给用户带来啥体验

2018-08-21

AI、大数据、云计算深度融合，星环大数据3.0给用户带来啥体验 “伴随着人工智能、云计算、大数据的深度融合，大数据技术已经进入3.0时代。”星环科技创始人兼CEO孙元浩8月14日在2018星环科技大数据3.0研讨会北 ...