TensorFlow和spark的ml以及python的scikit-learn 三者的区别是什么？

2023-04-07

TensorFlow, Spark的ML和Python的Scikit-learn是三种不同的机器学习工具，它们各自有其独特的特点和优势。以下是它们之间的主要区别。 TensorFlow TensorFlow是由Google开发的一个基于图形计算的深度学习框架。它 ...

tensorflow.js有哪些局限？

2023-03-28

TensorFlow.js是一个基于JavaScript的深度学习库，它可以在Web浏览器和Node.js环境中运行。虽然TensorFlow.js提供了一些独特的功能和优势，但也存在一些局限性。 性能方面的局限性 与传统的深度学习框架相比，Tens ...

数据分析师是什么内容

2023-03-28

数据分析师是指使用数据分析技术和工具，对数据进行收集、清洗、处理、分析和挖掘，为企业提供决策支持和业务优化的专业人员。在现代商业中，数据分析师已经成为了不可或缺的一部分，他们的工作涉及到市场调研、产 ...

kafka和mqtt的区别是什么？

2023-03-23

Kafka和MQTT是两种不同的消息传递协议，它们都被广泛地应用于分布式系统中，为开发人员提供了高效、可靠和实时的消息传递机制。本文将会比较与总结这两种协议的特点和区别，并探讨如何选择适合自己的协议。 一、Kafk ...

使用pytorch时，训练集数据太多达到上千万张，Dataloader加载很慢怎么办?

2023-03-14

随着深度学习模型的日益复杂，训练集数据规模也越来越大。对于使用PyTorch进行训练的用户来说，一个常见的问题是当训练集数据量过大时，Dataloader加载速度变得很慢，这会显著影响模型的训练效率和性能。 那么当我 ...

数据分析文本挖掘教程

2022-10-25

一、文本挖掘定义 文本挖掘指的是从文本数据中获取有价值的信息和知识，它是数据挖掘中的一种方法。文本挖掘中最重要最基本的应用是实现文本的分类和聚类，前者是有监督的挖掘算法，后者是无监督的挖掘算 ...

大数据时代：数据科学家供不应求

2022-10-18

数据科学家是一种很宽泛的职称。虽然对于数据科学家和数据工程师有更具体的职业发展路径，但其技能需求并不存在泡沫。“ 打开诸如“猎聘”等一些招聘网站，主页如下，不限公司和薪酬搜索 ...

使用NLP改进简历

2022-03-14

金融技术实施专家大卫·摩尔 招聘人员正在使用越来越复杂的软件和工具来扫描简历，并将其与张贴的工作职位和工作规格进行匹配。如果你的简历是通用的，或者工作说明模糊和/或通用，这些工具将对你不利。AI ...

基于同步行为的反欺诈算法SynchroTrap实现细节

2022-02-28

作者：小伍哥 来源：小伍哥聊风控 上次分享了非常牛逼的不需要介质就能进行团伙挖掘的算法，大家都说是个好算法，但是实现细节还是有些问题。 由此可见，风控的实践大于算法，就像绘画，给我同样的材 ...

干货 | 如何利用Python处理JSON格式的数据，建议收藏

2022-02-11

来源： 关于数据分析与可视化 什么是JSON JSON模块的使用方法 JSON(JavaScript Object Notation, JS对象简谱)是一种轻量级的数据交换格式，通常是以键值对的方式呈现，其简洁和清晰的层次结构 ...

遇到100万行的 Excel，还没打开，电脑和我都崩溃了，该怎么办？

2022-02-10

CDA数据分析师 出品 作者：曹鑫 编辑：JYD 我真遇到了上百万行的 Excel 年底到了，我想把公司历年的销售明细和指标等业务数据放在一起透视做分析，觉得这样很方 ...

2000字详解，当Pandas遇上超大规模的数据集该如何处理呢？（CDA内容分享）

2021-12-14

2000字详解，当Pandas遇上超大规模的数据集该如何处理呢？（cda干货分享）

2021-12-13

作者：俊欣 来源：关于数据分析与可视化 大家好，又是新的一周。大家一般会用Pandas模块来对数据集进行进一步的分析与挖掘关键信息，但是当我们遇到数据集特别特别大的时候，内存就会爆掉，今天小编就来分享 ...

实战 | 如何制作数据报表并实现自动化？

2021-11-03

本章给大家演示一下在实际工作中如何结合 Pandas 库和 openpyxl 库来自动化生成报表。假设我们现在有如图 1 所示的数据集。 （图1） 现在需要根据这份数据集来制作每天的日报情况， ...

一个 Python 报表自动化实战案例

2021-10-25

给大家分享新书《对比Excel，轻松学习Python报表自动化》中关于报表自动化实战的一篇内容。 本篇文章将带你了解报表自动化的流程，并教你用Python实现工作中的一个报表自动化实战，篇幅较长，建议先收藏，文章 ...

大学读的文科/商科专业，如何转型数据分析师？

2021-12-08

互联网和移动互联网时代，程序员成了公认的高薪工作，是众多企业的抢手人才。但凡大学专业沾边计算机的理科生，都有机会去竞逐一下互联网大厂的高薪岗位。 其实文科生已经意识到自己的竞争对手 ...

手把手教你用 pandas 分析可视化东京奥运会数据

2021-09-26

作者：刘早起 数据读取 注意到上面的 df1 列名并没有完整，所以可以使用 rename 函数修改指定列的名称 df1.rename(columns={'Unnamed: 2':'金牌数', 'Unnamed: 3':' ...

就是这么简单！Pyecharts绘制可视化地图专辑

2021-07-16

作者：云朵君 Pyecharts绘制地图如此轻松，几行代码搞定多种形式的数据地图。 首先需要安装python第三方包 -- pyecharts， 目前最新版本为1.8.1。 pip install pyecharts 全球国家地 ...

解读 | 拥有一份数据分析师的工作是一种怎样的体验？

2021-06-21

CDA数据分析师 出品 编译：Mika 【导读】 数据分析师实际上做什么？在本文中数据分析师Alex Freberg就给我们分享了，数据分析师的日常工作，成为数据分析师要什么要求，要什么技能以及薪资情况。 ...

CDA LEVEL 1 考试，知识点汇总《数据分析概述》

2024-08-13

1.数据分析和数据挖掘的概念 数据挖掘（Data Mining) : 是一个跨学科的计算机科学分支，它是用人工智能、机器学习、统计学和数据库的交叉方法在相对较大型的数据集中发 现模式的计算过程。 数据分析的目 ...