魔乐社区

魔乐社区

社区官网工具模型库数据集体验空间

去全站搜索看看？

登录社区云

登录社区云，与社区用户共同成长

魔乐社区

邀请您加入社区

欢迎加入社区

欢迎加入社区

pytorch

python 读取点云pcd文件——open3d库安装

我在之前的pytorch环境上（python3.7）直接安装open3d。然后出错了： DLL load failed: 找不到指定的模块。二、DLL load failed: 找不到指定的模块。一、pip install open3d 老是失败。结果自己的las文件读不了。（自己比较菜，仅供自己参考）

hx461
2023-03-24 13:37:11

 597

#python #深度学习 #pytorch
RuntimeError: ‘lengths‘ argument should be a 1D CPU int64 tensor, but got 1D cuda:0 Long tensor

Pytorch版本1.8，运行程序使用GPU训练时出现以下错误：将lengths改为lengths.cpu()或lengths.to('cpu')即可。原因:Pytorch1.5以上版本升级了Bi-LSTM导致的。

托尼stark
2021-09-23 09:04:10

 5422

 8

#pytorch #深度学习 #神经网络
2022.07， Spacy==3.4.0，en_core_web_md/sm/lg/trf下载

2022.07 最新Spacy==3.4.0，en_core_web_md/sm/lg Download

believe__m
2022-07-29 11:40:43

 1934

 10

#python #pytorch #深度学习 +1
python opencv标注小工具，白平衡数据集标注

做了一个简单的白平衡数据集标注工具。主要参考：https://blog.csdn.net/guyuealian/article/details/88013421使用：python get_illuminant_label_v2.py -read_path /home/xywang/code/ISP/tool/label_illuminant/PNG/ -save_path /home/xywang

三寸光阴___
2021-04-22 17:22:09

 748

 1

#python #opencv #pytorch
Pytorch库的基本架构

原文链接：Pytorch库的基本架构介绍很多同学说每次使用PyTorch时都需要导入很多模块，非常混乱，今天我就将PyTorch常用的模块做一个总结梳理。首先要说明的是PyTorch这是torch的Python版本，所以导入的是torch而不是Pytorch:import torch1 运行基础torch.tensor：基础数据结构torch.autograd：自动微分模块2 torch.util

有温度的算法
2021-12-13 14:15:58

 5611

 2

#pytorch #深度学习 #架构 +2
矩池云｜ GPU 分布式使用教程之 Pytorch

Pytorch 官方推荐使用 DistributedDataParallel(DDP) 模块来实现单机多卡和多机多卡分布式计算。DDP 模块涉及了一些新概念，如网络（World Size/Local Rank），代码修改（数据分配加载），多种启动方式（torchrun/launch），使用前请参考官方文档以及更多学习资料。

机器学习是魔鬼
2022-12-02 10:42:42

 2127

 1

#pytorch #分布式 #深度学习
RuntimeError: Dataset not found or corrupted. You need to download it from official website.

在复现C3D的时候出现这个问题，出现问题的原因是数据集的地址格式错误。

静茹我女神哟
2023-09-27 16:11:30

 677

 1

#pytorch #python #经验分享
torchrun分布式训练的配置踩坑

灵魂拷问：数据很多时少用append，预先分配好整个容器大小，每次用索引去修改内容；DP， DDP ，MP分布式训练，单机多卡，多机多卡训练；

面向@对象编程
2023-08-03 21:46:10

 1513

#pytorch
YOLOv5训练过程中RuntimeError: Unable to find a valid cuDNN algorithm to run convolution

YOLOv5训练过程中出现报错RuntimeError: Unable to find a valid cuDNN algorithm to run convolution解决方法：把batch size调小一点

 weixin_47060902
2022-02-24 20:20:13

 1267

 1

#深度学习 #pytorch #人工智能
RuntimeError: Expected tensor for argument #1 ‘indices‘ to have scalar type Long； but got CUDAFloatT

使用torchsummary 中的 summary函数时，模型中有Embedding层的时候，会报错。原因是Embedding 需要整型的Tensor。这么使用即可：from torchsummary import summarysummary(model, (1, 100, 8), dtypes=[torch.LongTensor], device='cpu')pip install 的torc

周迪新
2021-04-27 15:50:08

 1006

#pytorch #python
OSError: [E050] Can‘t find model ‘en_core_web_sm‘. It doesn‘t seem to be a Python package or a valid

找到文件“anaconda3/envs/hui_pytorch/lib/python3.7/site-packages/torchtext/legacy/data/field.py”，将其中函数参数tokenizer_language的值从'en'改为'en_core_web_sm'（共有两处）

冬天雪后
2022-03-11 16:23:47

 4764

 4

#pytorch #人工智能 #python
SENet(Squeeze-and-Excitation Network)-ImageNet 2017夺冠架构SENet

原文链接：https://www.cnblogs.com/bonelee/p/9030092.html我们从最基本的卷积操作开始说起。近些年来，卷积神经网络在很多领域上都取得了巨大的突破。而卷积核作为卷积神经网络的核心，通常被看做是在局部感受野上，将空间上（spatial）的信息和特征维度上（channel-wise）的信息进行聚合的信息聚合体。卷积神经网络由一系列卷积层、非线性层和下采样层构成，

peacefairy
2020-09-30 13:34:05

 619

 2

#神经网络 #机器学习 #深度学习 +1
【转】DataParallel & DistributedDataParallel分布式训练-转载只为记录

model = nn.DataParallel(model)测试结果相差特别多(如下图所示),加了这句mIoU是第一个结果0.8847,没加是0.4929(以mIoU为例,可以看到其他各项指标也都掉的严重),所以决定花点心思把nn.DataParallel(model)搞清楚。指标结果掉的严重这里需要注意一下:多卡训练要考虑通信开销的, 是个trade-off的过程,不见得四块卡一定比两块卡快多少

 明泽.
2022-03-17 11:27:04

 1365

 1

#pytorch #深度学习 #神经网络
ValueError: num_samples should be a positive integer value, but got num_samples=0

这里我在修改代码时，这个参数没有被用到了，所以这里输出的 len 为 0。DataLoader读出来后，就报了 got num_samples=0，将这个修改后就正常运行了。

Atuosi
2023-03-11 15:00:26

 1470

 6

#python #pytorch #开发语言
TypeError: WebDriver.\_\_init\_\_() got an unexpected keyword argument ‘service‘

造成该情况的原因可能是下载的selenuim版本过低，在低版本中，selenuim模块没有service参数。此时只需要在python所在路径下打开cmd通过pip install selenuim=版本号即可。我安装的是4.1.0版本，推荐4以上的版本。发生该错误是因为在创建WebDriver对象时传递了未知的关键字参数'service'，导致了TypeError。

云慢了晚风490
2024-04-07 20:09:03

 2958

 4

#pip #python #pytorch
python报错Could not fetch URL https://xxx/: There was a problem、SSLError

把代理服务器关了就可以解决了。（不知道在哪的代理服务器设置在哪的，可以在设置里面搜索代理服务器，关闭即可）

心碎★无痕
2025-02-09 14:55:47

 456

 2

#pytorch #人工智能 #python
Detectron2安装测试

Detectron2安装测试Detectron2是FAIR开源的基于Pytorch1.3.1的目标检测算法实现.Detectron2-github1.Detectron2安装1.1 安装配置基本环境可参考项目中的Installtionconda create -n detectron2 python=3.7conda activate detectron2PyTorch ...

NH558J0
2019-12-10 22:36:22

 2.1w

 13

#测试 #pytorch
Pytorch：BatchNorm1d、BatchNorm2d、BatchNorm3d

网络训练时和网络评估时，BatchNorm模块的计算方式不同。如果一个网络里包含了BatchNorm，则在训练时需要先调用train()，使网络里的BatchNorm模块的training=True（默认是True），在网络评估时，需要先调用eval()使网络的training=False。

u013250861
2022-08-19 19:39:32

 712

#pytorch #深度学习 #人工智能
关于‘lengths‘ argument should be a 1D CPU int64 tensor, but got 1D cuda:0 Long tensor报错的解决方发

复现论文的时候遇到的BUG，后来发现是torch版本升级的原因，发个博客记录一下。解决方法是需要修改RNN.py文件中的代码。

有梦的人心态要好
2023-03-02 10:36:31

 634

 1

#pytorch
labelme生成的json文件批量转图片

labelme生成的json文件批量转图片由于labelme所给的工具每次只能对一个json文件生成mask的二值图，多个json文件生成的mask二值图还会存在于不同的文件夹内，mask.png文件还要单独取出来。本代码根据labelme所给的json_to_dataset.py文件修改而来。**代码主要功能：**将labelme生成的json文件批量转换为mask的8bit二值图，并且所有ma

weixin_43549170
2021-04-02 17:29:34

 1732

 3

#深度学习 #tensorflow #python +2
深入浅出PyTorch：基础概念与架构

1.背景介绍在深度学习领域，PyTorch是一个非常流行的开源深度学习框架。它的灵活性、易用性和强大的功能使得它成为许多研究人员和工程师的首选。在本文中，我们将深入浅出PyTorch的基础概念和架构，揭示其核心原理和最佳实践。1. 背景介绍PyTorch是由Facebook的Core Data Science Team开发的开源深度学习框架。它于2017年推出，以其易用性和灵活性而闻名...

禅与计算机程序设计艺术
2024-01-28 14:33:14

 1356

 15

#pytorch #人工智能 #python +2
paddlepaddle-VisualDL2.0对项目进行可视化调参

如果需要更好的阅读体验，可以在ai studio上fork该项目：使用VisualDL2.0对项目进行可视化调参调参是深度学习必须要做的事情。数据和模型处理好后，需要进行模型训练，这个时候就需要进行调参了。一种好的参数配置，可以使得训练出来的模型在测试集上表现出很好的效果。可是要如何调呢？这里用飞桨（paddlepaddle深度学习框架）我们通常说的调参是指调整超参数这些，例如：先给他个设置一个不

 一只会走路的鱼
2021-09-02 08:49:15

 1977

 1

#paddlepaddle #深度学习 #pytorch
paddle.paramattr转换为torch框架下算法

paddle.paramattr是PaddlePaddle框架中用于表示网络层参数的属性类。如果想要将其转换为PyTorch框架下的算法，需要使用torch.nn.Parameter类。具体而言，需要将PaddlePaddle中的参数属性类转换为PyTorch中的Parameter对象。可以通过以下步骤实现：首先，需要从PaddlePaddle框架中加载模型的参数值。接下来，需要遍历Pa...

Waiyuet Fung
2023-02-16 14:30:37

 926

#paddle #深度学习 #pytorch +2
TensorRT安装与测试

TensorRT安装与测试

 luohuaqiuyu
2022-02-28 16:53:13

 2154

 1

#深度学习 #pytorch #visual studio
CitySacpes转COCO格式（labelIds.png转json）

CitySacpes数据集转COCO格式（labelIds.png转json）导语：CSDN上有位大神写了Cityscapes转COCO格式的代码，但是代码是将xxx_gtFine_instanceIds.png即实例分割标注转换成COCO格式。然而很多我需要的类别，例如道路，人行道，树以及天空等类别是没有的，要得到这些类别需要对语义分割标注即xxx_gtFine_labelIds.png文件进行

 Mallika_
2020-12-30 16:38:55

 3194

 5

#计算机视觉 #pytorch #深度学习 +1
SegNetr: 重新思考 U 形网络中的局部-全局交互和跳过连接

近年来，U 形网络因其简单且易于调整的结构而在医学图像分割领域占据主导地位。然而，现有的U型分割网络：1）大多侧重于设计复杂的自注意力模块来弥补基于卷积运算的长期依赖性的不足，这增加了网络的总体参数数量和计算复杂度；2）简单地融合编码器和解码器的特征，忽略它们空间位置之间的联系。在本文中，我们重新思考上述问题并构建了一个轻量级的医学图像分割网络，称为SegNetr。具体来说，我们引入了一种新颖的

 Philo`
2023-09-08 15:51:11

 1426

#pytorch #深度学习 #人工智能 +2
PyTorch四种常用优化器测试

PyTorch四种常用优化器测试SGD、SGD（Momentum)、RMSprop、Adamimport osos.environ['KMP_DUPLICATE_LIB_OK'] = 'TRUE'importtorchimporttorch.utils.data as Dataimport torch.nn.functional as Fimport matplotlib.pyplot as pl

想成为风筝
2021-11-20 14:47:03

 1614

 2

#深度学习 #pytorch #tensorflow
语义分割算法(pytorch版本)C++部署全流程解析

语义分割算法(pytorch版本)C++部署全流程解析本文以https://github.com/CSAILVision/semantic-segmentation-pytorch作为示例语义分割算法，采用libtorch来进行C++部署整个部署分为以下几个步骤进行展开：示例语义分割算法简介原始模型预处理opencv化模型网络结构重构模型转化C++数据预处理、前向传播及后处理代码开发opencv和

 Camlin_Z
2020-12-08 23:19:01

 4240

 7

#pytorch #c++#深度学习
下载phpstorm2021汉化包

网址网址：https://plugins.jetbrains.com/plugin/13710-chinese-simplified-language-pack----点安装到phpstorm打开phpstorm2021版本点file-------seeting-------k~（省略了）-----搜索chinese--------最后点安装就可以了。

美食与你不可或缺
2021-09-17 10:01:06

 1451

 2

#深度学习 #php #phpstorm +1
机器学习四大框架PyTorch、TensorFlow、Keras、Scikit-learn特点详解及实战应用

机器学习四大框架PyTorch、TensorFlow、Keras、Scikit-learn特点详解及实战应用（包含完整的程序）_机器学习框架资源-CSDN文库。机器学习四大框架PyTorch、TensorFlow、Keras、Scikit-learn特点详解及实战应用（包含完整的程序）_机器学习框架资源-CSDN文库。在机器学习的快速发展中，各种框架层出不穷，选择一个合适的框架对于研究和开发意义重

 xiaoxingkongyuxi
2024-11-24 14:53:28

 2446

 34

#机器学习 #pytorch #tensorflow +4
json.decoder.JSONDecodeError: Unterminated string starting at

文件没有传完整导致报错。

Alex Ruan
2023-01-29 13:38:02

 2246

#python #pytorch
Restnet34网络结构及代码

看了https://blog.csdn.net/rothschild666/article/details/123497166这个博客的代码，感觉有错误。我自己又修改了一下。torch环境是1.8.1。

壹晴天
2023-12-23 19:07:18

 1878

 11

#python #pytorch #开发语言
Pytorch分布式训练快速入门教程（一）：从Accelerate说起

DP模型的基本思路是将数据/Batch分发到不同机器，在Forward过程将模型复制，数据分batch后分发给不同的GPU，最后由主GPU gather所有的输出；对于大型的DL任务，需要添加大量的工程化步骤，如hyperparams的管理，系统状态的监控等。如果是多机多卡就表示对应第几台机器，如果是单机多卡，由于一个进程内就只有一个 GPU，所以 rank 也就表示第几块 GPU。问题，主GPU

u013250861
2023-04-27 14:38:13

 3327

 1

#pytorch #分布式 #人工智能
深度网络中的上采样总结

一、上采样概述在深度学习中，上采样是一种使图像分辨率变高的方法/技术。目前有以下几种基本的上采样方法：1. UpSample + Conv 1X12. ConvTransposed3. Conv + PixelShuffle下文对每种方法进行详细介绍。二、UpSample + Conv 1x1先使用upsample进行简单插值（最近邻、线性、双线性或三次线性），由于upSample中没有课学习的参

 包休
2022-01-22 22:08:16

 2487

 4

#深度学习 #pytorch
【错误】 undefined symbol: cublasLtHSHMatmulAlgoInit, version libcublasLt.so.11

pip安装完pytorch=1.13.1后，build代码时出错：原因因为pytorch1.13安装时会给我们自动安装但由于一般用户已经安装CUDAtoolkit，所以会产生这个错误。

there2belief
2023-10-17 15:54:20

 1474

 4

#pytorch #python
Hammersley采样算法生成的伪随机分布和均匀随机分布的区别

这种均匀的分布更有助于在有限的采样点下获得更全面、更准确的采样结果。

小白也有IT梦
2024-05-25 09:01:23

 1287

 3

#算法 #python #pytorch
Pytorch LSTM网络初始化hidden维度报错：RuntimeError: Expected hidden[0] size (2, 14, 150), got [2, 64, 150]

Pytorch LSTM网络初始化hidden维度报错：RuntimeError: Expected hidden[0] size (2, 14, 150), got [2, 64, 150]

lym-ucas
2022-11-22 23:41:43

 2789

 8

#pytorch #lstm #深度学习
【笔记】ssd mobilenet 网络

之前实习用过太多次mobilenet_ssd，但是一直只是用，没有去了解它的原理。今日参考了一位大神的博客，写得很详细，也很容易懂，这里做一个自己的整理，供自己理解，也欢迎大家讨论。先整理MobileNet这里奉上大神的博客地址：https://blog.csdn.net/u013082989/article/details/77970196论文地址：MobileNets: Efficient C

程序猿的探索之路
2021-09-23 10:15:55

 1770

#深度学习 #神经网络 #pytorch
神经网络最大池化层

最大池化层（常用的是maxpool2d）的作用：一是对卷积层所提取的信息做更一步降维，减少计算量二是加强图像特征的不变性，使之增加图像的偏移、旋转等方面的鲁棒性具体操纵：取图像中的最大值作为输出，如下所示，第一个橙色框代表最大池化操作，最左边池化的最大值为3，即第一个输出为3，后面以此类推。橙色的操作代表ceil_mode=True()时的操作，即不够的向上取整，False代表向下取整。代码：im

沉睡中的主角
2021-08-04 20:08:30

 7141

 6

#pytorch #神经网络
使用Pytorch构建网络时，损失函数需要迁移到GPU上吗？

再进一步，如CrossEntropyCriterion等pytorch自带的loss类(或称losslayer)虽然也是Module的子类，但是这些类的成员变量不含Parameter对象或Buffer对象，所以无需to或cuda处理。模型输入tensor是数据不用多说，Module对象使用.cuda是为了将模型内部的数据(即每个子叶Module的Parameter或Buffer成员变量)递归地传入

 zcshiguangji
2022-08-01 10:22:20

 1451

 4

#深度学习 #pytorch #神经网络
PyTorch实现NMS算法

NMS 算法源码实现Python实现NMS（非极大值抑制）对边界框进行过滤。目标检测算法（主流的有 RCNN 系、YOLO 系、SSD 等）在进行目标检测任务时，可能对同一目标有多次预测得到不同的检测框，非极大值抑制（NMS）算法则可以确保对每个对象只得到一个检测，简单来说就是“消除冗余检测”。

lqjun0827
2024-06-20 19:31:03

 1131

 6

#pytorch #算法 #人工智能
RuntimeError: Unable to find a valid cuDNN algorithm to run convolution

RuntimeError: Unable to find a valid cuDNN algorithm to run convolution

hye0501
2022-04-20 13:30:01

 5679

 5

#python #pytorch #深度学习
Pytorch搭建DTLN降噪算法

前面介绍了几种轻量级网路结构的降噪做法，本文介绍DTLN—一种时频双核心网络降噪做法。

Leo606
2023-10-21 13:08:41

 1111

 1

#pytorch #算法 #音视频
【面经】超全版本AIGC算法工程师面经

对于所有的相关经历，都是跟面试官聊技术（举例，提供参考方向）从数据规模、特征、指标、目前使用的模型方法、项目难点详细介绍。

邵院Rookie
2024-06-23 16:59:53

 2970

 31

#AIGC #算法 #python +4
强化学习经典算法笔记(二十一)：gym-super-mario-bros游戏环境笔记

gym-super-mario-bros游戏环境笔记gym-super-mario-bros游戏环境笔记简介安装DemoGym demo命令行demo环境单独关卡随机选择关卡奖励函数info内容解读gym-super-mario-bros游戏环境笔记最近在学习Intrinsic Reward Model相关的paper，super-mario-bros可以说是算法性能测试的标配游戏环境了，可惜之前

 hhy_csdn
2020-10-30 21:13:59

 8935

 7

#游戏 #深度学习 #pytorch +1
Pytorch实现ResNet50网络结构，包含ResNet18，ResNet34，ResNet50，ResNet101，ResNet152

创建各版本的ResNet模型，ResNet18，ResNet34，ResNet50，ResNet101，ResNet152原文地址: https://arxiv.org/pdf/1512.03385.pdf论文就不解读了，大部分解读都是翻译，看的似懂非懂，自己搞懂就行了。最近想着实现一下经典的网络结构，看了原文之后，根据原文代码结构开始实现。起初去搜了下各种版本的实现，发现很多博客都是错误百出，有

 weixin_44277280
2020-10-12 20:33:00

 7694

 18

#pytorch #神经网络 #深度学习 +2
PyTorch报错：ValueError: num_samples should be a positive integer value, but got num_samples=0

在跑pytorch代码时候根据github提供的源码克隆到自己电脑上跑，出现各种bug，经过替换几个python版本之后还是发现错误，依然报错：ValueError: num_samples should be a positive integer value, but got num_samples=0网上搜索发现有小伙伴出现类似情况(参考以下博客解决)：https://blog.csdn.ne

stevedreamer
2021-05-23 12:35:34

 1946

#python #pytorch #深度学习
ReDet网络复现

ReDet复现

 追幸福
2022-09-30 09:31:23

 1480

 1

#深度学习 #pytorch
【GNN】第一章：知识体系架构概览

的PyTorch的扩展库，几何深度学习指的是应用于图和其他不规则、非结构化数据的深度学习。是非常随意的，它不像MLP、CNN、RNN、Transformer那样，必须要数据规整、要resize、要截断填补等，图神经网络要求的数据只要有点有边就行，至于几个点几条边都随意。然而在真实世界中，并不是所有的事物都可以用结构化数据来表示，比如社交网络、知识图谱、电商购物、复杂的文件系统、蛋白质相互作用关系、

宝贝儿好
2025-03-03 11:46:24

 1030

 25

#人工智能 #深度学习 #知识图谱 +2
python实现样本集划分---kennard-stone算法，T-SNE对所选样本集的绘制

一、Kennard-Stone算法原理Kennard-Stone算法原理：把所有的样本都看作训练集候选样本,依次从中挑选样本进训练集。首先选择欧氏距离最远的两个样本进入训练集，其后通过计算剩下的每一个样品到训练集内每一个已知样品的欧式距离，找到距已选样本最远以及最近的两个样本，并将这两个样本选入训练集，重复上述步骤直到样本数量达到要求。二、Kennard-Stone算法作用Kennard-Ston

梅子山楂酒
2020-08-21 10:14:47

 7809

 10

#python #pytorch #深度学习 +1

加载更多

回到
顶部

提供社区服务与技术支持

提供社区服务与技术支持

©1999-2023北京创新乐知网络技术有限公司京ICP备19004658号