FPGA为什么适合做神经网络的计算加速？

2023-03-23

FPGA（Field Programmable Gate Array）是一种灵活的硬件加速器，与传统的CPU和GPU相比，它可以提供更高效的计算加速。神经网络是一种广泛应用于人工智能领域的技术，其基于大量的矩阵运算和向量乘法来进行计算，这 ...

LSTM里Embedding Layer的作用是什么？

2023-03-22

LSTM是一种经典的循环神经网络，已经广泛应用于自然语言处理、语音识别、图像生成等领域。在LSTM中，Embedding Layer（嵌入层）是非常重要的一部分，它可以将输入序列中的每个离散变量映射成一个连续向量，从而便于 ...

Transformer是否适合用于做非NLP领域的时间序列预测问题？

2023-03-22

Transformer是一种广泛应用于自然语言处理（NLP）领域的深度学习模型，其在机器翻译、情感分析等任务中取得了显著的成果。然而，随着深度学习技术的不断发展，越来越多的研究表明Transformer也可以应用于非NLP领域中 ...

pytorch如何设置batch-size和num_workers，避免超显存, 并提高实验速度？

2023-03-22

PyTorch 是一个广泛使用的深度学习框架，在使用过程中，设置 Batch Size 和 Num Workers 是非常重要的。Batch Size 与 Num Workers 的设置关系到 GPU 内存的使用和训练速度。 在 PyTorch 中，通过 DataLoader 对数据 ...

时间序列预测很火的一维CNN LSTM结构，CNN和LSTM之间该如何连接？

2023-03-22

时间序列预测是一项重要的任务，许多研究人员和数据科学家都致力于提高其准确性。近年来，一维CNN-LSTM结构已成为时间序列预测中最受欢迎的模型之一，因为它可以同时利用CNN和LSTM的优点。在本文中，我们将探讨如何 ...

基于深度卷积神经网络进行人脸识别的原理是什么？

2023-03-22

人脸识别是一种常见的生物特征识别技术，它通过计算机视觉技术来识别人脸并将其与已知的人脸进行比对，从而实现身份验证或识别。在过去几年中，深度卷积神经网络（CNN）已经成为人脸识别领域取得重要进展的核心技术 ...

如何形象的解释为什么神经网络层数越多效果越好？

2023-03-22

神经网络是模仿人类神经系统的一种机器学习模型。随着计算机技术和算法的不断进步，神经网络的结构也越来越复杂。其中一个重要的因素就是层数的增加。在这篇文章中，我们将探讨为什么神经网络层数越多效果越好。 首 ...

哪位高手能解释一下卷积神经网络的卷积核？

2023-03-22

卷积神经网络是一种深度学习模型，其核心组成部分之一就是卷积层。在卷积层中，卷积核扮演着至关重要的角色，它是用于特征提取的基本操作单元。 卷积核是一个小矩阵，通常为正方形，其大小由用户定义。卷积核通过移 ...

Pytorch如何自定义损失函数（Loss Function）？

2023-03-22

PyTorch是一个开源的Python深度学习框架，提供了许多预定义的损失函数。但有时候，我们需要根据自己的任务和数据集来自定义损失函数。这篇文章将介绍如何在PyTorch中自定义损失函数。 一、什么是Loss Function？ 损 ...

梯度下降法的神经网络容易收敛到局部最优，为什么应用广泛？

2023-03-22

梯度下降法是神经网络中最为常用的优化算法，它的主要思想是通过不断迭代来调整神经网络中的参数，从而使得损失函数逐渐逼近全局最小值。然而，由于神经网络中存在大量的非凸性和高维度特征，因此梯度下降法容易收 ...

PyTorch中在反向传播前为什么要手动将梯度清零？

2023-03-22

在使用PyTorch进行深度学习模型训练时，我们通常需要手动将梯度清零。这是因为PyTorch中的自动求导机制（Autograd）会自动计算每个张量的梯度，并将其累加到张量的.grad属性中。如果不手动将梯度清零，那么每次反 ...

Pytorch有什么节省显存的小技巧？

2023-03-22

PyTorch是一个非常流行的深度学习框架，它提供了丰富的函数库和工具包来简化神经网络的实现过程。然而，在训练大型模型或处理大规模数据集时，显存消耗可能会成为问题。本文将分享一些PyTorch中节省显存的小技巧。 ...

tensorflow里面name_scope, variable_scope等如何理解？

2023-03-20

TensorFlow是一个广泛使用的开源机器学习框架，它提供了许多工具和API，使得深度学习变得更加容易。其中包含名为name_scope和variable_scope的两种上下文管理器，用于帮助开发人员组织TensorFlow图中的操作并确保 ...

LSTM神经网络输入输出究竟是怎样的？

2023-03-15

LSTM神经网络是一种常用于序列数据建模的深度学习模型，其全称为长短期记忆网络（Long Short-Term Memory Network）。与传统的循环神经网络相比，LSTM网络具有更好的长期依赖性和记忆能力，因此能够有效地处理时间序 ...

使用pytorch时，训练集数据太多达到上千万张，Dataloader加载很慢怎么办?

2023-03-14

随着深度学习模型的日益复杂，训练集数据规模也越来越大。对于使用PyTorch进行训练的用户来说，一个常见的问题是当训练集数据量过大时，Dataloader加载速度变得很慢，这会显著影响模型的训练效率和性能。 那么当我 ...

大数据工程师的必备技能有哪些

2022-11-07

1、大数据平台 目前很火，数据源头，各种炫酷新技术，搭建Hadoop、Hive、Spark、Kylin、Druid、Beam~，前提是你要懂Java，很多平台都是用Java开发的。 目前很多企业都把数据采集下来了，对于传统的业务数据 ...

数据分析之数据挖掘入门指南

2022-10-25

数据分析 探索性数据分析（Exploratory Data Analysis，EDA）是指对已有数据在尽量少的先验假设下通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。 常用的第三方库 ...

数据分析师之数据挖掘入门

2022-10-19

数据分析 探索性数据分析（Exploratory Data Analysis，EDA）是指对已有数据在尽量少的先验假设下通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。 常用的第三方库 ...

数据分析师证书报考资格_CDA数据分析师报考条件

2024-08-13

PART 8 数据管理（5%） CDA LEVEL II CDA Level II 包含以下科目：《数据采集与数据处理》、《统计分析》、《商业策略分析》、《数据治理》 PART 1 数据采集与处理（占比9%） PART 2 指标体系（占比3%） PART 3 数 ...

盘点 | 每个数据分析师都应该了解的6个预测模型

2022-08-09

CDA数据分析师 出品 作者：Ivo Bernardo 编译：Mika 数据分析模型有不同的特点和技术，值得注意的是，大多数高级的模型都基于几个基本原理。 当你想开启数 ...