数据仓库中的数据如何清洗和转换？

2023-09-08

数据仓库是企业存储和管理大量数据的重要组成部分，它提供了对数据的高效访问和分析，以支持决策和业务需求。然而，原始数据往往存在各种问题，如重复、缺失、格式不一致等。为了确保数据仓库中的数据质量和准确性 ...

数据仓库设计中需要注意哪些问题？

2023-09-08

数据仓库是一个用于存储、管理和分析企业数据的关键组件。它为企业提供了一个集成的视图，将来自各个业务系统的数据整合在一起，以支持业务决策和数据驱动的分析。然而，在进行数据仓库设计时，需要考虑一系列关键问 ...

如何存储、管理和处理海量数据？

2023-07-21

存储、管理和处理海量数据是当今数字时代中的重要挑战之一。随着技术的不断发展，出现了许多解决方案和工具，可以帮助组织有效地处理和利用海量数据。本文将介绍一些常见的方法和策略，以应对海量数据的存储、管理和 ...

数据仓库中如何处理历史数据？

2023-07-11

在数据仓库中，历史数据是指过去某个时间段内生成的数据。这些数据对于企业和组织来说具有重要的分析和决策价值。然而，随着时间的推移，历史数据的规模不断增长，如何有效地处理和管理这些数据成为一个关键问题。本 ...

常用的大数据存储技术有哪些？

2023-06-30

随着互联网和信息技术的快速发展，数据量呈现指数级增长，传统的存储方式已经无法满足对大数据处理的要求。为了更好地管理、分析和利用海量数据，大数据存储技术应运而生。本文将简单介绍常见的大数据存储技术。 Ha ...

Hadoop招聘面试常见的问题和答案详解

2022-10-18

Q1.什么是 Hadoop? Hadoop 是一个开源软件框架，用于存储大量数据，并发处理/查询在具有多个商用硬件(即低成本硬件)节点的集群上的那些数据。总之，Hadoop 包括以下内容： HDFS(Hadoop Distributed File Sys ...

我，一名国企数据人，决定在35岁开启自己的转型之路

2021-12-13

大家好，2017年我有幸成为CDA持证人，就此开启了自己数据人转型之路,一路学思维、学技术，并成为了我们公司数字化转型的推行负责人，以下是这几年工作中的一些思考。供同行参考，指正！ 思考一：企业为什么要 ...

数据分析最基础的元素：数据指标

2021-01-07

公众号：数据海洋 作者：数据海洋 “一个公司数据指标体系好坏，直接决定数据应用的好坏！” 先请各位看官一起思考下面这些问题： · 什么是数据指标？ · 数据指标价值是什么？ ·&n ...

数据仓库架构设计的一点概念

2018-08-16

数据仓库架构设计的一点概念 1、数据仓库所处环节 在一个成体系、结构化的数据应用场景下，数据和处理有四个层次： 操作层、数据仓库层、部门/数据集市层、个体层。 操作层 操作层是指为具体业务 ...

谈谈银行业的数据治理

2018-07-28

谈谈银行业的数据治理 数据价值链螺旋受阻 在我们对数据利用提出迫切需求的过程中，许多深层次的数据问题其实已经开始逐步暴露，例如，数据认责不明导致数据源头录入质量不高，数据标准缺失导致统计口径混乱 ...

大数据：存储技术必须跟上

2018-07-08

大数据：存储技术必须跟上 “大数据” 通常指的是那些数量巨大、难于收集、处理、分析的数据集，亦指那些在传统基础设施中长期保存的数据。这里的“大”有几层含义，它可以形容组织的大小，而更重要的是，它界 ...

商务智能在零售业中发展的推动因素

2018-06-23

商务智能在零售业中发展的推动因素 商务智能的概念和商务智能系统的发展都不是一蹴而就的过程，商务智能系统的雏形可以看成是事务处理系统。后来在事务处理系统的基础上出现了高级管理人员信息系统，它是商务智 ...

大数据需突破存储、性能瓶颈

2018-06-17

大数据需突破存储、性能瓶颈 大数据的核心是大量数据的分析能力     在亟待优先解决的IT问题千头万绪的情况下，在大数据价值日益凸显的背景下，企业需要首先提高数据中心的成本效益，以满足不断 ...

DT时代商业革命，大数据金融行业应用发展分析

2018-06-06

DT时代商业革命，大数据金融行业应用发展分析 从IT时代到DT时代，本文将从金融行业大数据发展现状、市场规模及前景、数据类型分析、应用场景、实际案例等方面简要分析大数据在金融行业应用发展。 　　IT时代是 ...

为什么数据分析计划总是失败

2018-06-05

为什么数据分析计划总是失败 强大的数据分析是一项数字业务命令式——这一切都始于智能数据治理实践，以及对质量和环境的重视。 　　高管们谈论的大多是普通数据的价值，但Navient Solutions公司的企业数据情报 ...

大数据离不开效益型数据中心的构建

2018-05-26

大数据离不开效益型数据中心的构建 在大数据价值日益凸显的背景下，企业需要首先提高数据中心的成本效益，以满足不断变化的业务需求，加大大数据的应用和相关基础设施的构建，满足对于大数据环境下数据中心高性 ...

数据治理定义流程正确记录业务政策、规则和标准

2018-05-22

数据治理定义流程正确记录业务政策、规则和标准 定义流程记录数据定义、与业务术语相关的业务背景、分类、关系以及实施数据治理工作必须定义的政策、规则、标准、流程和衡量策略。此流程以“发现驱动定义”的形 ...

业务驱动的政府大数据平台数据治理

2018-04-23

业务驱动的政府大数据平台数据治理 一、问题提出 为推动经济转型, 提升政府治理能力及国家竞争力, 国务院印发《国务院关于积极推进“互联网+”行动的指导意见》及《促进大数据发展行动纲要》, 文件提出通 ...

大数据时代如何探寻其安防商业价值

2018-03-28

大数据时代如何探寻其安防商业价值 今日视点 “大数据”是近来一个热点话题，从华尔街到国内资本市场，大数据概念股持续走强。马云在5月10日的卸任演讲中也提道：“很多人还没搞清楚什么是PC互联网，移动互联网 ...

五大步骤让你创建持续成功的大数据项目

2018-03-07

五大步骤让你创建持续成功的大数据项目 一些企业正在利用新兴技术来应对新的数据源，但大多数企业仍然面临着需要努力管理好他们已经掌握或者应当掌握的数据信息的困境，而当他们试图部署大数据功能时，发现自己 ...