1、Kaggle简介
Kaggle是一个数据分析的竞赛平台，网址：
https://www.kaggle.com/
企业或者研究者可以将数据、问题描述、期望的指标发布到Kaggle上，以竞赛的形式向广大的数据科学家征集解决方
案，类似于
KDD-CUP（国际知识发现和数据挖掘竞赛）。Kaggle上的参赛者将数据下载
：投稿 作者：子苏 编辑：学姐之前一直在Googel Colab平台上薅羊毛(使用免费GPU)，但是很快就遇到了GPU使用达到上限的问题，如下图：limited GPU因此又来到Kaggle平台来薅羊毛，作为Kaggle小白，在此总结了一些常见的问题和实用tips。安装第三方包开始时一直安装不上任何包，把电脑wifi，工具检查了一遍，简直怀疑人生，后来发现原来是 Internet选项没开启
转载
2024-03-11 15:13:35
37阅读
学习了一些机器学习的算法，总想找个地方用一用试一试。上网搜索了一番，发现了 Kaggle 这个网站，是各种企业举办机器学习竞赛的地方。Kaggle 上有一个入门级的数据集，要我们通过分析泰坦尼克号上乘客的信息，来判断他们是否获救。
学习了一些机器学习的算法，总想找个地方用一用试一试。上网搜索了一番，发现了 Kaggle 这个网站，是各种企业举办机器学习竞
转载
2024-08-23 11:00:05
159阅读
前言：window10+cuda9.0+cudnn+pycharm+py3.5+tensorflow1.9 这是本文的开发环境一、数据部分：从kaggle下载https://www.kaggle.com/c/dogs-vs-cats下载以后直接解压成两个文件，train和test，直接copy在eclipse的工程目录data中即可 二、结构部分： 三、代码部分： 1.input_data.
转载
2024-08-20 17:51:58
131阅读
本文参考LearnOpenGL，链接原作者Joey de Vries1. 下列代码是同时用两组VBO和VAO进行绘制，这里是设置界面，一个VAO挖一个VBO的数据，挖完存储起来，再挖下一组VBO。unsigned int VBO[2],VAO[2];
glGenBuffers(2, VBO);
glGenVertexArrays(2, VAO);
glBindBuffer(GL_ARRAY
参考：机器学习系列(3)_逻辑回归应用之Kaggle泰坦尼克之灾参考：Kaggle泰坦尼克特征工程和模型融合『解决一个问题的方法和思路不止一种』『没有所谓的机器学习算法优劣，也没有绝对高性能的机器学习算法，只有在特定的场景、数据和特征下更合适的机器学习算法。』 Kaggle上的大神们，也分享过一些experience，说几条我记得的哈： 『对数据的认识太重要了！』 『
转载
2024-07-25 18:25:06
110阅读
IntroKaggle提供免费访问内核中的NVidia K80 GPU。该基准测试表明，在深度学习模型的训练过程中，为您的内核启用GPU可实现12.5倍的加速。 这个内核是用GPU运行的。我将运行时间与在CPU上训练相同模型内核的运行时间进行比较。 GPU的总运行时间为994秒。仅具有CPU的内核的总运行时间为13,419秒。这是一个12.5倍的加速（只有一个CPU的总运行时间是13.5倍）。 将
转载
2024-02-05 00:57:37
389阅读
参赛历程比赛时间：3.10-4.11历时一个多月，无论是知识眼界还是心态方面，都有了较大的改变。刚开始选这个赛题，没有什么特别的地方，顺眼就是了。直到着手准备这个比赛的时候，才发现，事情并不简单，虽然数据集只有训练集和测试集以及一个提交结果的样本，但是数据没有任何的说明，（数据应该都是从客户那里收集的，所以主办方为了保护客户的隐私，做了脱敏处理）除了ID_code都是数值型的数据，可是它们代表的是
转载
2024-08-08 15:48:04
54阅读
kaggle进行模型训练的时候需要用到GPU进行运算，此时便需要较好的显卡。在大模型·面前1050Ti是不够用的。不过还好有kaggle——主要是为开发商和数据科学家提供举办机器学习竞赛、托管数据库、编写和分享代码的平台。它会免费提供云服务器。 kaggle是外国网站，以前国内可以访问只是不能上传数据。现在可通过网址访问。 网址为https://www.kaggle.com/&
转载
2024-01-10 21:26:17
81阅读
利用kaggle提供的免费GPU完成卫星图片识别任务 文章目录利用kaggle提供的免费GPU完成卫星图片识别任务1.数据集的介绍2.将数据集上传到kaggle3.利用tf.data构造输入4.模型的创建与配置5.下载模型在本地导入并用于预测结语 1.数据集的介绍该数据集提供了，两类图片，飞机airplane，和湖(lake)，是属于一个二分类的问题，同时提供的数据都为彩色图，RGB三通道，大小为
转载
2024-03-23 10:35:24
333阅读
Linux配置Hadoop单机模式一、准备工作一台装有CentOS 7 的虚拟机并且要能远程连接JDK和Hadoop的安装包两个软件 Xshell 和Xftp(或filezilla)1.首先，将JDK和Hadoop的安装包通过Xftp传入虚拟机当然也可以用其他软件，下图用的是filezilla )]注意：我们将JDK放入/usr/local/java 而Hadoop放入/usr/local/had
转载
2023-08-08 07:44:13
225阅读
导 论：Kaggle 每周可以白嫖GPU资源约40小时，Kaggle相比于Colab而言可以离线运行，而且运行时间挺长的。Colab如果不开pro会员的话只能使用Tesla k40 这种低级显卡约4小时，开会员的话可以用Tesla V100、P100等显卡。Kaggle侧重于数据竞赛，他们希望你使用Kaggle来跑竞赛题目而不是你的实验工程。然而Kaggle不同于Colab
转载
2024-05-22 18:22:02
278阅读
最近发现kaggle每周给了30小时的GPU额度，直接使用在线jupyter notebook，非常方便。以后就直接在kaggle上练习了。第一版，尽量不要“Save Version”离线运行，因为离线运行只要一个语句出错，整个程序白跑。所以一般是第一版在线跑完，没有错，之后改动比较小的细调时再离线跑。比如这场比赛，因为数据集是压缩包，所以需要先导入库、然后在线解压到缓存里（大概需要20分钟），然
转载
2024-09-01 21:48:28
834阅读
谷歌有两个平台提供免费的云端GPU：Colab和Kaggle， 如果你想深入学习人工智能和深度学习技术，那么这两款GPU将带给你很棒学习的体验。那么问题来了，我们该选择哪个平台进行学习和工作呢？接下来，本文将介绍如何比较硬件规格和探索优缺点的差异；本文还将基于一个计算机视觉任务，比较在不同平台下，使用迁移学习、混合精度训练、学习率模拟退火以及测试时间增广等操作时，所需的训练
转载
2024-08-03 12:33:51
143阅读
跑深度学习代码的时候电脑GPU太垃圾了，batch-size设置的很小，训练时间长？kaggle提供免费GPU啦！！！跟着我一起来白嫖吧1、第一步：注册登录kaggle可以使用Google、雅虎、Facebook账号登录，如果你已经有了这些账号直接登录即可。这些账号博主都没有，所以通过邮箱注册登录。首先进入kaggle主页Kaggle: Your Machine Learning and Data
转载
2023-12-03 21:14:16
410阅读
这篇文章适合那些刚接触Kaggle、想尽快熟悉Kaggle并且独立完成一个竞赛项目的网友，对于已经在Kaggle上参赛过的网友来说，大可不必耗费时间阅读本文。本文主要介绍Kaggle，如何解决一个竞赛项目的全过程，请参考上一篇：kaggle入门-Bike Sharing Demand自行车需求预测1、Kaggle简介 Kaggle是一个数据分析的竞赛平台，网址：https://www.kaggle
转载
2024-08-15 14:23:06
85阅读
这也是搭建hadoop集群前的准备工作，只有准备工作做好，集群才能正常运行，另外有需要压缩文件的人可以评论区联系我。
准备工作1.给普通用户授予root权限（注意sudoers的权限）su (到root用户) cd /etc (到根目录下的etc) ll(查看sudoers的权限)(因为sudoers没有写权限，所以修改sudoers文件的权限) 修改命令为chmod 777/u+w sudoer
转载
2023-10-29 09:00:03
116阅读
目录一、上传项目二、训练模型1.导入项目2.关于下包以及配置虚拟环境的问题1）创建虚拟环境2）下包3.训练模型1）两种方法：2）关于写文件的问题3）开启GPU4）离线训练4.下载日志、运行结果什么的5.关掉GPU 三、模型预测一、上传项目网址： 登陆后，将项目(连同数据集和代码一起）压缩上传，上传需要梯子。上传成功后点击create，kaggle会自动解压压缩包，处理完成后会有
转载
2023-12-12 16:55:56
4924阅读
由于选修了数据挖掘课程，课程作业是完成Kaggle上的一个比赛，所以在机缘巧合下就知道了Kaggle这个平台，事实上我认为这是用来练手数据挖掘的一个绝佳场所。这篇文章适合和我一样刚接触Kaggle的朋友，对于已经熟悉这个平台的朋友，欢迎指出我的错误，必定虚心受教。本文分为两个部分，第一部分简单介绍在上面完成比赛的流程，第二部分以手写数字识别为例子详细描述完成比赛的整个过程。1、Kag
转载
2024-05-24 08:51:20
130阅读
一、目的使用深度学习对kaggle上的titanic项目，使用乘客数据(如姓名、年龄、性别、社会经济阶层等)，建立一个模型预测泰坦尼克号沉船上哪些乘客能够幸存。二、编程该项目的训练集与测试集在官网下载即可：https://www.kaggle.com/c/titanic，在完成后还可以上传你的预测文件参与全世界排名。我们本次编程使用pytorch进行。本次将搭建一个三层神经网络，relu->
