为什么lstm在时序预测上表现不及传统算法？

2023-03-27

LSTM是一种递归神经网络，通常被用于时序预测任务。它可以捕获长期依赖性，因为它具有内存单元来记住过去的信息。然而，在实践中，我们发现在某些情况下，LSTM要比传统的基于统计学方法的算法表现差。 在本文中，我 ...

pytorch中的钩子（Hook）有何作用？

2023-03-27

PyTorch中的钩子（Hook）是一种可以在网络中插入自定义代码的机制，用于跟踪和修改计算图中的中间变量。钩子允许用户在模型训练期间获取有关模型状态的信息，这对于调试和可视化非常有用。本文将介绍钩子的作用、类 ...

在 Caffe 中如何计算卷积？

2023-03-27

Caffe是一个深度学习框架，它支持多种神经网络模型的训练和推断。其中最基本的操作之一就是卷积（Convolution）。在本文中，我将介绍如何在Caffe中进行卷积操作。 首先，我们需要了解卷积的定义。卷积是一种数学运算 ...

keras比tensorflow差在哪里？

2023-03-23

Keras是一个高级神经网络API，它为深度学习提供了一种简单而有效的方式。TensorFlow是一个流行的深度学习框架，它提供了底层API和许多工具和库。虽然两者都是用于深度学习的强大工具，但它们之间有一些区别。 灵活 ...

LSTM里Embedding Layer的作用是什么？

2023-03-22

LSTM是一种经典的循环神经网络，已经广泛应用于自然语言处理、语音识别、图像生成等领域。在LSTM中，Embedding Layer（嵌入层）是非常重要的一部分，它可以将输入序列中的每个离散变量映射成一个连续向量，从而便于 ...

Transformer是否适合用于做非NLP领域的时间序列预测问题？

2023-03-22

Transformer是一种广泛应用于自然语言处理（NLP）领域的深度学习模型，其在机器翻译、情感分析等任务中取得了显著的成果。然而，随着深度学习技术的不断发展，越来越多的研究表明Transformer也可以应用于非NLP领域中 ...

时间序列预测很火的一维CNN LSTM结构，CNN和LSTM之间该如何连接？

2023-03-22

时间序列预测是一项重要的任务，许多研究人员和数据科学家都致力于提高其准确性。近年来，一维CNN-LSTM结构已成为时间序列预测中最受欢迎的模型之一，因为它可以同时利用CNN和LSTM的优点。在本文中，我们将探讨如何 ...

苹果 M1 芯片的神经单元可否用于训练 Pytorch 深度学习网络模型？

2023-03-22

苹果于2020年发布了自家研发的M1芯片，它是一款基于ARM架构的芯片，能够为Mac电脑带来更高的性能和效率。其中一个引人注目的特点就是M1芯片搭载了神经单元（Neural Engine），这是一种专门用于机器学习任务的硬件 ...

LSTM如何来避免梯度弥散和梯度爆炸？

2023-03-22

LSTM（Long Short-Term Memory）是一种常用的循环神经网络架构，主要应用于序列数据的处理。在训练LSTM模型时，由于网络层数和时间步长的增加，会出现梯度弥散和梯度爆炸的问题。本文将介绍LSTM是如何通过一系列的改 ...

Pytorch有什么节省显存的小技巧？

2023-03-22

PyTorch是一个非常流行的深度学习框架，它提供了丰富的函数库和工具包来简化神经网络的实现过程。然而，在训练大型模型或处理大规模数据集时，显存消耗可能会成为问题。本文将分享一些PyTorch中节省显存的小技巧。 ...

数据挖掘方法大全

2022-10-25

1、数据挖掘的分析方法——决策树法 决策树在解决归类与预测上有着极强的能力，它以法则的方式表达，而这些法则则以一连串的问题表示出来，经由不断询问问题最终能导出所需的结果。典型的决策树顶端是一个树根 ...

资深数据分析师来聊一聊数据挖掘

2022-10-19

一、数据挖掘的层次 一直想整理下对数据挖掘不同层次的理解，这也是这两年多的时间里面，和很多金融领域、互联网做数据相关工作的小伙伴，聊天交流的一些整理和归纳。大概可以分为四类。 (一)纯粹的数据 ...

从小白到进阶 | 10 个适合数据人练手的 Kaggle 数据集

2022-08-24

CDA数据分析师 出品 作者：Andrew Lombarti 编译：Mika Kaggle 是一个很流行的数据科学竞赛平台。在上面，你不仅可以参加各种数据分析题竞赛，还可以通过各行业的真实数据集来实践自己的技能。 在 ...

盘点 | 每个数据分析师都应该了解的6个预测模型

2022-08-09

CDA数据分析师 出品 作者：Ivo Bernardo 编译：Mika 数据分析模型有不同的特点和技术，值得注意的是，大多数高级的模型都基于几个基本原理。 当你想开启数 ...

2022年你应该知道的十大Python库

2022-06-20

CDA数据分析师 出品 作者：Terence Shin 编译：Mika 学习数据分析绝非易事，有无数种工具和资源可供使用。因此，有时会让我们很难弄清楚该学习什么技能，该使用哪种工具。 在本文中，我们就来给大 ...

从审核专员成功转型数据分析师

2022-04-22

我从17年毕业后,一直在字节跳动西安做审核。做了两年多的审核工作,我对这个工作失去了热情。字节的视频审核和文字审核并非完全使用机器,采取的是双重审核,先机器审核筛选后再做人工审核的方法。工作的时候，我们需 ...

当机器学习遇到数据量不够时，这几个Python技巧为你化解难题

2022-06-01

作者：俊欣 有时候我们在进行模型的训练与优化的时候，是需要基于现有的数据集来操作的，要是数据量比较充足的情况下倒是还好说，但是要是遇到数据量不够的情况，该怎么办呢？今天小编就给大家来介绍几个方法 ...

当机器学习遇到数据量不够时，这几个Python技巧为你化解难题

2022-06-01

作者：俊欣 有时候我们在进行模型的训练与优化的时候，是需要基于现有的数据集来操作的，要是数据量比较充足的情况下倒是还好说，但是要是遇到数据量不够的情况，该怎么办呢？今天小编就给大家来介绍几个方法 ...

我是一个数据科学家，不仅仅是处理数据的小手

2022-03-30

艾哈迈德·贝斯贝斯，AI工程师//博客作者//跑步者。 这是个人的观察，但我相信你们中的许多人在阅读这篇文章时会有同样的感受。 我是一名数据科学家，我喜欢我的工作，因为我认为它涵盖了各种相互依赖的 ...

我迄今为止的数据科学学习之旅

2022-03-14

自由数据科学家Arnuld谈数据 埃里克·韦伯（是的，那个长得不错的家伙带着一只可爱的狗）最近在LinkedIn上写了一篇帖子，讲述了当他开始数据科学生涯时，他希望自己能少做的10件事。这篇文章是我通过这十点 ...