PyG(PyTorch Geometric)安装教程(附Cora数据集)PyG是多特蒙德工业大学(Technische University Dortmund)的Matthias Fey博士基于PyTorch框架提出的图卷积(Graph Convolution Net)神经网络框架,用于方便地编写和训练图神经网络(GNNs)。该框架由各种对图和其他不规则结构进行深度学习的方法组成,且提供了大量的公
Kaggle 上使用 GPU0. 环境介绍环境使用 Kaggle 里免费建立的 Notebook教程使用李沐老师的 动手学深度学习 网站和 视频讲解小技巧:当遇到函数看不懂的时候可以按 Shift+Tab 查看函数详解。1. Kaggle 上使用 GPU找到右边 Settings 里面的 Accelerator: 选择 GPU: 每周可以使用 36 小时: 查看显卡信息:!nvidia-smi 可
转载
2023-12-20 21:49:11
188阅读
最近发现kaggle每周给了30小时的GPU额度,直接使用在线jupyter notebook,非常方便。以后就直接在kaggle上练习了。第一版,尽量不要“Save Version”离线运行,因为离线运行只要一个语句出错,整个程序白跑。所以一般是第一版在线跑完,没有错,之后改动比较小的细调时再离线跑。比如这场比赛,因为数据集是压缩包,所以需要先导入库、然后在线解压到缓存里(大概需要20分钟),然
转载
2024-09-01 21:48:28
828阅读
导 论:Kaggle 每周可以白嫖GPU资源约40小时,Kaggle相比于Colab而言可以离线运行,而且运行时间挺长的。Colab如果不开pro会员的话只能使用Tesla k40 这种低级显卡约4小时,开会员的话可以用Tesla V100、P100等显卡。Kaggle侧重于数据竞赛,他们希望你使用Kaggle来跑竞赛题目而不是你的实验工程。然而Kaggle不同于Colab
转载
2024-05-22 18:22:02
267阅读
这是 Kaggle 你问我答 (AMA) 的第一期活动,本期请到的嘉宾是 SueTao,他研究生毕业于东南大学,目前是腾讯的一名算法工程师。 Kaggle profile:https://www.kaggle.com/shentao
SueTao 擅长计算机视觉(Computer Vision),半年 5 战 5 金,也许是史上最快的 GrandMaster。截至
前言:window10+cuda9.0+cudnn+pycharm+py3.5+tensorflow1.9 这是本文的开发环境一、数据部分:从kaggle下载https://www.kaggle.com/c/dogs-vs-cats下载以后直接解压成两个文件,train和test,直接copy在eclipse的工程目录data中即可 二、结构部分: 三、代码部分: 1.input_data.
转载
2024-08-20 17:51:58
124阅读
前言Colab Pro(目前仅在美国、加拿大、日本、巴西、德国、法国、印度、英国和泰国可用)提供了随时可用和加速但是维护起来既昂贵又繁琐的云计算资源。和其免费版不同,Colab Pro 允许用户使用 TPUs 和高端的 GPUs,比如 V100 和 P100 等等,可以访问高内存的实例,并且保持 notebooks 运行的时间最长可以达到 24 小时,费用是每个月 10 美元。Colab Pro可
前方干货预警:这篇文章可能是你目前能够找到的可以无痛跑通LLM微调并基本理解整个流程的门槛最低的入门范例。门槛低到什么程度,本范例假设你是一个三无用户。1,无NLP经验:你没有扎实的NLP理论知识,只有一些基本的炼丹经验。没关系,我们会在恰当的时候告诉你必要的原理。2,无GPU:你没有任何一块可以使用的GPU。没关系,我们直接在Kaggle环境上使用免费的P100GPU,并给没有kaggle使用经
转载
2024-06-18 22:29:09
526阅读
参考:机器学习系列(3)_逻辑回归应用之Kaggle泰坦尼克之灾参考:Kaggle泰坦尼克特征工程和模型融合『解决一个问题的方法和思路不止一种』『没有所谓的机器学习算法优劣,也没有绝对高性能的机器学习算法,只有在特定的场景、数据和特征下更合适的机器学习算法。』 Kaggle上的大神们,也分享过一些experience,说几条我记得的哈: 『对数据的认识太重要了!』 『
转载
2024-07-25 18:25:06
110阅读
前言因为使用Stable Diffusion进行AI绘图需要GPU,这让其应用得到了限制本文介绍如何在Kaggle中部署Stable Diffusion,并使用免费的P100 GPU进行推理(每周可免费使用30小时),部署好后可以在任意移动端使用。本项目在stable-diffusion-webui-kaggle基础上进行改进,原作者Github项目地址
欢迎大家Copy and Edit我的ka
转载
2024-05-21 14:25:20
79阅读
文章目录写在前面安装必要的模块和文件1.模块2.文件下载数据读取数据训练模型训练过程评估模型效果测试集准备提交材料提交结果写在最后后面的训练 写在前面这篇接上一篇教程2,终于要看到autogluon在竞赛中的应用了。安装必要的模块和文件1.模块pip install kaggle2.文件下载API文件,通过在kaggle个人账号,点击头像 然后会得到一个kaggle.json文件,如果你是用ka
转载
2024-08-20 20:23:57
472阅读
DeepLearning to digit recongnizer in kaggle 近期在看deeplearning,于是就找了kaggle上字符识别进行练习。这里我主要用两种工具箱进行求解。并比对两者的结果。两种工具箱各自是DeepLearningToolbox和caffe。Deeplearnin
KaggleKaggle是一个提供免费CPU,GPU,TPU的编程(主要是机器学习,其他也行),学习,竞赛的网站。(若有colab,可无视此篇) 对于只为了编程的作用而言(如果你的电脑GPU足够强劲,可以不用过多关心了,数据分析Jupyter,常规编程Pycharm,Vim,Sublime等等这些足够了) Kaggle的注册,验证账号等等,网上文章众多,在此就不赘述。。。文件常用的,帮助显示你的文
转载
2024-07-10 21:45:18
89阅读
IntroKaggle提供免费访问内核中的NVidia K80 GPU。该基准测试表明,在深度学习模型的训练过程中,为您的内核启用GPU可实现12.5倍的加速。 这个内核是用GPU运行的。我将运行时间与在CPU上训练相同模型内核的运行时间进行比较。 GPU的总运行时间为994秒。仅具有CPU的内核的总运行时间为13,419秒。这是一个12.5倍的加速(只有一个CPU的总运行时间是13.5倍)。 将
转载
2024-02-05 00:57:37
385阅读
题目介绍今天我们来讲kaggle比赛中最经典,也是官方最推荐入门机器学习的一项比赛——预测泰坦尼克号的生存人数。那么这个比赛在哪找呢?首先我们找到competitions的页面,然后可以看到根据比赛的类型有很多分类,那么我们可以想入门的话就可以选择GettingStarted类型。 那么我们在该类型中往下翻几页就可以找到这个比赛了。 我们点开比赛之后,在其中的overview里的descripti
转载
2024-05-09 10:33:35
158阅读
最近在参加:2023AIWIN——中文网页自动导航挑战赛
DataWhale的大佬们提供了baseline的讲解:如何手把手打一场世界人工智能大赛
下面就来记录一下使用Kaggle上提供的30小时15G免费GPU算力的运行情况。数据集预处理数据下载及配置首先从比赛官网上下载A榜的数据集:获取数据
在本地解压缩后,进入到路径:\2023S-T1-A-Data[供选手] 0513\指令数据&标
转载
2024-02-28 23:09:31
1008阅读
:投稿 作者:子苏 编辑:学姐之前一直在Googel Colab平台上薅羊毛(使用免费GPU),但是很快就遇到了GPU使用达到上限的问题,如下图:limited GPU因此又来到Kaggle平台来薅羊毛,作为Kaggle小白,在此总结了一些常见的问题和实用tips。安装第三方包开始时一直安装不上任何包,把电脑wifi,工具检查了一遍,简直怀疑人生,后来发现原来是 Internet选项没开启
转载
2024-03-11 15:13:35
37阅读
跑深度学习代码的时候电脑GPU太垃圾了,batch-size设置的很小,训练时间长?kaggle提供免费GPU啦!!!跟着我一起来白嫖吧1、第一步:注册登录kaggle可以使用Google、雅虎、Facebook账号登录,如果你已经有了这些账号直接登录即可。这些账号博主都没有,所以通过邮箱注册登录。首先进入kaggle主页Kaggle: Your Machine Learning and Data
转载
2023-12-03 21:14:16
408阅读
本文不包含Kaggle的入门步骤,如何上传数据集,如何选择GPU自行学习 文章目录*开头的话*一、Kaggle的使用1、**为什么选择Kaggle**2、Kaggle的操作难度二、Yolox代码的更改1.train.py更改2.callbacks.py部分更改3、训练数据的路径更改4、正式训练*末尾的话* 开头的话本文所用yolox的代码来自bubbliiing的pytorch yolox项目 链
转载
2024-01-10 23:01:55
160阅读
利用kaggle提供的免费GPU完成卫星图片识别任务 文章目录利用kaggle提供的免费GPU完成卫星图片识别任务1.数据集的介绍2.将数据集上传到kaggle3.利用tf.data构造输入4.模型的创建与配置5.下载模型在本地导入并用于预测结语 1.数据集的介绍该数据集提供了,两类图片,飞机airplane,和湖(lake),是属于一个二分类的问题,同时提供的数据都为彩色图,RGB三通道,大小为
转载
2024-03-23 10:35:24
324阅读