R语言处理大规模数据集的编程要点 1.提高程序效率，保证执行速度 (1)尽量使用向量化运算 (2)尽量使用矩阵，必要时才使用数据框 (3)使用read.table时，尽量显式设定colClasses和nrows，设定comment.cha ...
2017-04-21
一、正态分布参数检验 例1.某种原件的寿命X（以小时计）服从正态分布N（μ, σ)其中μ, σ2均未知。现测得16只元件的寿命如下： 159 280 101 212 224 379 179 264 222 362 168 250 149 260 485 ...
2017-04-21
如何使用R语言解决可恶的脏数据 在数据分析过程中最头疼的应该是如何应付脏数据，脏数据的存在将会对后期的建模、挖掘等工作造成严重的错误，所以必须谨慎的处理那些脏数据。 脏数据的存在形式主要有如下几种 ...
2017-04-21
一个使用R语言做数据处理的实例 最近一个同学找到我，希望我帮忙处理一份数据。那份数据是这样的：包含了3661行，第一行为各列的名称；包含8列，第一列为专利ID，其余7列为企业ID。 这份数据截图如下所示： ...
2017-04-21
用R语言做Venn（韦恩）图 首先介绍一下韦恩图（英语：Venn diagram） ，也叫做文氏图、温氏图、范氏图，这都一个意思。它是数学学科中分支集合论（或者类的理论）的一支，在不太严格的意义下用来表示集合（或 ...
2017-04-21
R语言与格式、日期格式、格式转化 R语言的基础包中提供了两种类型的时间数据，一类是Date日期数据，它不包括时间和时区信息，另一类是POSIXct/POSIXlt类型数据，其中包括了日期、时间和时区信息。基本总结如下 ...
2017-04-20
R语言中plyr包 apply族函数是R语言中很有特色的一类函数，包括了apply、sapply、lapply、tapply、aggregate等等。这一类函数本质上是将数据进行分割、计算和整合。它们在数据分析的各个阶段都有很好的用处。例 ...
2017-04-20
R语言数据集合并、数据增减、不等长合并 数据选取与简单操作： 一、数据合并 1、merge()函数 最常用merge()函数，但是这个函数使用时候这两种情况需要注意： 1、merge(a,b)，纯粹地把两个数据集 ...
2017-04-20
R语言文本挖掘之中文分词包—Rwordseg包(原理、功能、详解) 与前面的RsowballC分词不同的地方在于这是一个中文的分词包，简单易懂，分词是一个非常重要的步骤，可以通过一些字典，进行特定分词。大致分析步骤如 ...
2017-04-20
R语言实现关系图谱 数据是这样存储的 社交关系分析和可视化用的是igraph包 脚本是这样的 ------------------------------------------------------------------------------------------- #ins ...
2017-04-20
R语言之文本挖掘--分词 当前对文本挖掘的需求越来越多，而基于文本挖掘又可以实现舆情监控、文本分类、关联分析和趋势预测等。 本文主要使用李舰发布的中文分词包Rwordseg。该包引用了@ansj开发的ansj中文 ...
2017-04-20
SAS宏中两个常用的options选项 一、关于SAS中options选项msglevel msglevel：默认值是N（默认是关闭的），仅打印notes，warnings和error信息，如果设为I，则除了打印N选项的信息，同时打印附属信息，包括索 ...
2017-04-19
SAS、R如何手动输入数据 一道简单的题目，将下面的数据分别手动输入到SAS和R中，如何实现？ 一、SAS 解决方案： data cust_base_info; inputcust_no$ name$sex$ is_marri ...
2017-04-19
sas字符变量基于bad_rate分组 最近因为模型拟合的不理想的原因，sas信用评分的内容可能要停更一两周了，因为我还没能进行到模型评分卡这一步就被跨期验证给拍下来了，我做的模型，训练的数据以及测试的数据指标 ...
2017-04-19
sas批量删除重复超过90%的变量 22年前的今天我的妈咪把我带来这个世界，费尽心思把我养到这么大，我就是4月份出生的大白羊，我的生日愿望呢，就是想有个大神在留言板块教我一个怎么识别组合变量更好解释因变量 ...
2017-04-19
对于数据的统计分析来说，有很多人觉得做出p值那一步比较高深。其实不然，数据整理和数据清洗才是吃力不讨好的事情，也能体现出数据处理人员的能力。数据整理与清洗既花费时间，又不出成果，因为大家往往觉得 ...
2017-04-19
SPSS冷门秘籍,提高效率有捷径 在软件使用中，高手和新手的差别可能只在于一些小技巧或者快捷键的使用上。平时看多了诸如“Excel技巧大全”、“PS快捷键大全”。今天我们就来说说SPSS中那些能够提高效率，少(nen ...
2017-04-19
Python上下文管理器 上下文管理器(context manager)是Python2.5开始支持的一种语法，用于规定某个对象的使用范围。一旦进入或者离开该使用范围，会有特殊操作被调用 (比如为对象分配或者释放内存)。它的语法形 ...
2017-04-18
Python标准库—走马观花 Python有一套很有用的标准库(standard library)。标准库会随着Python解释器，一起安装在你的电脑中的。它是Python的一个组成部分。这些标准库是Python为你准备好的利器，可以让编程事半 ...
2017-04-18
Python缩进和选择 缩进 Python最具特色的是用缩进来标明成块的代码。我下面以if选择结构来举例。if后面跟随条件，如果条件成立，则执行归属于if的一个代码块。 先看C语言的表达方式（注意，这是C，不是Python! ...
2017-04-18完全靠数据决策，真的靠谱吗？ 最近几年，“数据驱动”成了商界最火的关键词之一，但靠数据就能走天下？其实不然！那些真正成功 ...
2025-01-09SparkSQL 结构化数据处理流程及原理是什么？Spark SQL 可以使用现有的Hive元存储、SerDes 和 UDF。它可以使用 JDBC/ODB ...
2025-01-09在如今这个信息爆炸的时代，数据已然成为企业的生命线。无论是科技公司还是传统行业，数据分析正在深刻地影响着商业决策以及未来 ...
2025-01-08“数据为王”相信大家都听说过。当前，数据信息不再仅仅是传递的媒介，它成为了驱动经济发展的新燃料。对于企业而言，数据指标体 ...
2025-01-07在职场中，当你遇到问题的时候，如果感到无从下手，或者抓不到重点，可能是因为你掌握的思维模型不够多。 一个好用的思维模型， ...
2025-01-06在现代企业中，数据分析师扮演着至关重要的角色。每天都有大量数据涌入，从社交媒体到交易平台，数据以空前的速度和规模生成。面 ...
2025-01-06在职场中，许多言辞并非表面意思那么简单，有时需要听懂背后的“潜台词”。尤其在数据分析的领域里，掌握常用术语就像掌握一门新 ...
2025-01-04在当今信息化社会，数据分析已成为各行各业的核心驱动力。它不仅仅是对数字进行整理与计算，而是在数据的海洋中探寻规律，从而指 ...
2025-01-03又到一年年终时，各位打工人也迎来了展示成果的关键时刻 —— 年终述职。一份出色的年终述职报告，不仅能全面呈现你的工作价值， ...
2025-01-03在竞争激烈的商业世界中，竞品分析对于企业的发展至关重要。今天，我们就来详细聊聊数据分析师写竞品分析的那些事儿。 一、明确 ...
2025-01-03在数据分析的江湖里，有两个阵营总是争论不休。一派信奉“大即是美”，认为数据越多越好；另一派坚守“小而精”，力挺质量胜于规 ...
2025-01-02数据分析是一个复杂且多维度的过程，从数据收集到分析结果应用，每一步都是对信息的提炼与升华。可视化分析结果，以图表的形式展 ...
2025-01-02在当今的数字化时代，数据分析师扮演着一个至关重要的角色。他们如同现代企业的“解密专家”，通过解析数据为企业提供决策支持。 ...
2025-01-02数据分析报告至关重要 一份高质量的数据分析报告不仅能够揭示数据背后的真相，还能为企业决策者提供有价值的洞察和建议。 年薪 ...
2024-12-31数据分析，听起来好像是技术大咖的专属技能，但其实是一项人人都能学会的职场硬核能力！今天，我们来聊聊数据分析的核心流程，拆 ...
2024-12-31提到数据分析，你脑海里可能会浮现出一群“数字控”抱着电脑，在海量数据里疯狂敲代码的画面。但事实是，数据分析并没有你想象的 ...
2024-12-31关于数据分析师是否会成为失业高危职业，近年来的讨论层出不穷。在这个快速变化的时代，技术进步让人既兴奋又不安。今天，我们从 ...
2024-12-30数据分析师在现代企业中扮演着关键角色，他们的工作内容不仅丰富多样，还对企业的决策和发展起着重要的作用。正如一个经验丰富的 ...
2024-12-29数据分析师的能力要求 在当今的数据主导时代，数据分析师的角色变得尤为重要。他们不仅需要具备深厚的技术背景，还需要拥有业务 ...
2024-12-29随着技术的飞速发展与行业的持续变革，不少人心中都存有疑问：到了 2025 年，数据分析师还有前途吗？给你分享一篇阿里P8大佬最近 ...
2024-12-29
