网站首页 第105页
-
万字长文带你通俗理解LightGBM(万字文章)
GBDT(GradientBoostingDecisionTree)是机器学习中一个长盛不衰的模型,其主要思想是利用弱分类器(决策树)迭代训练以得到最优模型,该模型具有训练效果好、不易过拟合等优点。GBDT在工业界应用广泛,通常被用...
2025-03-29 balukai 文章精选 8 ℃ -
人工智能编程:如何完成神经网络模型的优化?
人工智能专栏限时打折本文重点在机器学习或者深度学习中,我们需要通过修改参数使得损失的数最小化(或最大化),优化算法就是一种调整模型参数更新的策略。随机梯度下降算法随机梯度下降优化算法,在pytorch中,我们使用如下命令就可以使用这个优化算...
2025-03-29 balukai 文章精选 11 ℃ -
深度学习基础知识点归纳总结(机器视觉和深度学习的基本知识点)
1.最小化代价函数优化方法:BGD、SGD、MBGD、动量、NAG、Adagrad、AdaDelta、Adam、AMSGrad、牛顿法;2.前馈神经网络的隐藏单元不一定在所有的输入点上可微;3.CNN最大池化能产生一定程度的平移不变性...
2025-03-29 balukai 文章精选 10 ℃ -
Deepspeed并行框架介绍--ZeRO去除冗余的并行方案
Deepspeed并行框架介绍一.简介Deepspeed是微软推出的一个开源分布式工具,其集合了分布式训练、推断、压缩等高效模块。该工具旨在提高大规模模型训练的效率和可扩展性。它通过多种技术手段来加速训练,包括模型并行化、梯度累积、动...
2025-03-29 balukai 文章精选 4 ℃ -
TensorFlow和PyTorch相继发布最新版,有何变化
原文来源:GitHub「机器人圈」编译:嗯~阿童木呀、多啦A亮Tensorflow主要特征和改进在Tensorflow库中添加封装评估量。所添加的评估量列表如下:1.深度神经网络分类器(DNNClassifier)2.深度神经网络回归...
2025-03-29 balukai 文章精选 13 ℃ -
一箭N雕:多任务深度学习实战(一箭双雕可能吗)
1、多任务学习导引多任务学习是机器学习中的一个分支,按1997年综述论文Multi-taskLearning一文的定义:MultitaskLearning(MTL)isaninductivetransfermechanism...
2025-03-29 balukai 文章精选 15 ℃ -
PyTorch 源码解读之 torch.autograd:梯度计算详解
前言本篇笔记以介绍pytorch中的autograd模块功能为主,主要涉及torch/autograd下代码,不涉及底层的C++实现。本文涉及的源码以PyTorch1.7为准。torch.autograd.functi...
2025-03-29 balukai 文章精选 9 ℃ -
搞懂大模型实用训练秘籍——混合精度训练
混合精度训练(MixedPrecisionTraining)是一种通过结合单精度(FP32)和半精度(FP16)来提升深度学习模型训练效率的技术。其核心思想是在保证模型精度的同时,充分利用FP16和FP32的优势,从而加速训练过程。FP...
2025-03-29 balukai 文章精选 9 ℃ -
AI系统——梯度累积算法(梯度累加)
明天博士论文要答辩了,只有一张12G二手卡,今晚通宵要搞定10个模型实验挖槽,突然想出一个T9开天霹雳模型,加载不进去我那张12G的二手卡,感觉要错过今年上台BestPaper领奖上面出现的问题主要是机器不够、内存不够用。在深度学习训练...
2025-03-29 balukai 文章精选 10 ℃ -
电脑浏览器无法安装控件问题的解决办法
前几天碰到一个监控设备在浏览器浏览时无法找到控件的问题,调整了好几次才改好,所以今天就来分享一下这个问题的解决办法。电脑在日常生活和办公中有可能需要下载安装一些特殊的控件,比如监控软件和各个银行的登录控件,但是经常会有无法安装或者安装不成功...
2025-03-29 balukai 文章精选 12 ℃
- 控制面板
- 网站分类
- 最新留言
-