数据工程师需要掌握的18个python库

2020-07-24

python之所以这么火，是因为它的应用广泛，之所以应用广泛，是因为它包含有许多功能强大的库。对于不是专业数据分析人员的我们，平时在工作和生活中，主要是用python来获取信息，制作可视化报表，但是专业的数据工 ...

如何简单通俗的理解交叉熵损失函数？

2020-07-24

前面小编给大家简单介绍过损失函数，今天给大家继续分享交叉熵损失函数，直接来看干货吧。 一、交叉熵损失函数概念 交叉熵损失函数CrossEntropy Loss，是分类问题中经常使用的一种损失函数。公式为： ...

CNN、RNN、GAN都是什么？终于有人讲明白了

2020-07-23

导读：深度学习已经存在了几十年，不同的结构和架构针对不同的用例而进行演变。其中一些是基于我们对大脑的想法，另一些是基于大脑的实际工作。本文将简单介绍几个业界目前使用的先进的架构。 作者：谢林·托马 ...

过拟合是如何产生的？有什么好的解决方法？

2020-07-23

在机器学习中，相对于欠拟合，过拟合出现的频次更高。这是因为，假设某一数据集其对应的模型为‘真’模型，我们通常是采用提高模型的复杂度的方法，来避免欠拟合现象的产生，但与此同时，我们又很难把网络设计成和 ...

正则化---提高深度学习模型的泛化能力

2020-07-23

前面文章小编简单给大家介绍了泛化能力的一些基础知识，今天给大家带来的是提高模型泛化能力的方法--正则化。 一、首先来回顾一下什么是泛化能力 泛化能力(generalization ability)，百科给出的定义是：机器 ...

深度学习中如何实现Keras模型加载和保存？

2020-07-22

Keras 是源于 Theano 或 者TensorFlow 的一个深度学习框架，它的设计来源于Torch，编程语言使用的是 Python ，是一个拥有强大功能、内容抽象，而且高度模块化的神经网络库。 今天小编给大家分享的就是Kera ...

业务分析模型，该怎么搭建

2020-07-22

文章来源： 接地气学堂 作者：接地气的陈老师 很多同学最怕听“建模型”仨字。尤其是建立“业务分析模型”。往往自己辛辛苦苦搞得LR、SVM、CNN被业务方狂喷：你这都是啥东西！脱离业务！不切实际！ ...

PyTorch是什么？如何进行安装？

2020-07-14

PyTorch是什么?单从字面上，我们就能很容易看出来，与Python和Torch有关。PyTorch是使用Python作为编程语言，可以说是Torch的Python版，是由Torch7团队开发的，一种开源的神经网络框架，专门用于 GPU 加速的深度神 ...

RNN和CNN的区别表现在哪些方面？

2020-07-13

RNN(循环神经网络)，和CNN(卷积神经网络)是深度学习经常进行比较的两个概念，下面小编整理了RNN和CNN的一些区别，希望对大家有所帮助。 1.从应用方面来看CNN主要用于图像识别比较多，而RNN被用于语言处理多一些 ...

深度学习中LSTM的核心思想是什么？

2020-07-13

LSTM全称为：long short term memory，也叫作长短期记忆人工神经网络，本质上是一种时间循环神经网络。LSTM是为了解决一般的RNN长期依赖问题而被专门设计出来的。所有的RNN都具有一种重复神经网络模块的链式形式。 ...

应该怎样理解深度学习Caffe？

2020-07-13

Caffe是深度学习框架中经常遇到的，那么到底Caffe是什么?我们又应该怎样理解呢?下面，小编对于Caffe做了一个简单的介绍，希望对大家有所帮助。 一、Caffe基本概念 Caffe全称为：Convolutional Architecture ...

如何快速简单地入门Keras？

2020-07-13

Keras 是基于 Theano 或 者TensorFlow 的一个深度学习框架，其设计源于Torch，编程语言用 Python ，是一个功能强大、内容抽象，高度模块化的神经网络库，能够支持 GPU 和 CPU。目前tensorflow已经将keras合并到了 ...

终于有人把数据科学、机器学习和人工智能讲明白了

2020-07-10

作者：Alex Castrounis 来源：大数据DT(ID：hzdashuju) 内容摘编自《AI战略：更好的人类体验与企业成功框架》 导读：本文讨论与人工智能相关的概念和技术，包括机器学习、深度学习、数据科学和大数据。还 ...

机器学习中感知机是什么？如何实现？

2020-07-10

感知机(Perceptron)或者叫做感知器，是Frank Rosenblatt在1957年就职于Cornell航空实验室(Cornell Aeronautical Laboratory)时所发明的一种人工神经网络，是机器学习领域最基础的模型，被誉为机器学习的敲门砖。 ...

python数据挖掘常用工具有哪几种？

2020-07-10

python有强大的第三方库，广泛用于数据分析，数据挖掘、机器学习等领域，下面小编整理了python数据挖掘的一些常用库，希望对各位小伙伴学习python数据挖掘有所帮助。 1. Numpy 能够提供数组支持，进行 ...

OpenCV入门及应用案例：手把手教你做DNN图像分类

2020-07-09

作者：吴至文 郭叶军 宗炜 李鹏 赵娟 来源：大数据DT(ID：hzdashuju) 内容摘编自《OpenCV深度学习应用与性能优化实践》 导读：本文将介绍OpenCV的源码结构、OpenCV深度学习应用的典型流程，以及深度学习 ...

过拟合(over-fitting)出现的原因及相应的解决方法

2020-07-08

过拟合(over-fitting)是指机器学习模型或者是深度学习模型在训练样本中表现得过于优越，导致在验证数据集以及测试数据集中表现不佳。也就是referstoa模型对于训练数据拟合程度过高的情况。 通过学习曲线来理解 ...

如何理解欠拟合？常用的处理方法有哪些？

2020-07-08

一、欠拟合概念及理解 机器学习中欠拟合是一个常见的问题，简单来说就是模型在训练和预测时表现都欠佳的情况。一个欠拟合的机器学习模型不是一个良好的模型并且在训练数据上表现不好这是显而易见的。 图 ...

支持向量机SVM 概念及特征介绍

2020-07-03

支持向量机SVM(Support Vector Machine)，是常见的一种判别方法。在机器学习领域，是有监督学习模型，通常用来进行模式识别、分类及回归分析，主要针对小样本数据进行学习、分类和预测，类似的根据样本进行学习的 ...

PCA降维原理(主成分分析)的数学理论

2020-07-03

在机器学习中，有成千上万甚至几十万的维度的数据需要处理，这种情况下机器学习的资源消耗是不可接受的，并且很大程度上影响着算法的复杂度，因此对数据降维是必要的。PCA(Principal Component Analysis)是一种常 ...