Kaggle上传并公开数据集并用TPU训练
2020-05-11 04:09
2156 查看
上传一个dataset
以动漫人物头像数据集为例,首先,把数据集打包好
在Kaggle dataset上点New Dataset创建一个新的数据集
填好信息,等上传就行了,记得在左下角设置里面把Private改成Public
完成后为你的数据集创建一个starter kernel就好啦
创建notebook
接下来我们new一个notebook,会显示数据集下载中,等就行了。当然,首先要保证notebook网络功能是打开的
notebook准备好以后,我们通过KaggleDatasets获取公开数据集在Google Cloud Storage上的地址
from kaggle_datasets import KaggleDatasets GCS_PATH = KaggleDatasets().get_gcs_path('animation') print(GCS_PATH) #路径中间加连字符
再在anaconda下用gsutil ls GCS_PATH(GCS_PATH根据实际情况替换)查看二级目录地址,以此类推
至于如何使用TPU进行训练,请参照我的另一篇博客Kaggle比赛Flower Classification with TPUs中配置TPU以及加载公开数据集的问题
相关文章推荐
- 情感分析︱网络公开的免费文本语料训练数据集汇总
- 逻辑回归(Logistic regression)详解-并用scikit-learn训练逻辑回归拟合Iris数据集
- 逻辑回归(Logistic regression)详解-并用scikit-learn训练逻辑回归拟合Iris数据集
- Kaggle研究16,000+数据科学从业者并公开数据 !(附数据集下载)
- Tensorflow制作并用CNN训练自己的数据集
- 对kaggle比赛的猫狗数据集的tensorflow训练
- ML之RF&DT:利用RF(RFR)、DT(DTR)两种算法实现对boston(波士顿房价)数据集进行训练并预测
- [目标检测][图像分割] 使用 mask rcnn 训练自己数据集 识别琦玉老师
- 在MNIST数据集上训练一个卷积网络自编码器
- 详解Matconvnet使用imagenet模型训练自己的数据集
- opencv_haartraining.exe 训练数据集自己经历过的坑
- 利用SegNet训练自己的数据集----制作自己的数据集
- 使用谷歌Object Detection API进行目标检测、训练新的模型(使用VOC 2012数据集) (转)
- 微软删除最大的公开人脸识别数据集,只因员工离职?!
- 【Darknet】【yolo v2】训练自己数据集的一些心得----VOC格式
- 仿照VOC2007制作自己的数据集,并在Caffe上训练Faster-RCNN
- SegNet训练数据集
- 待完成任务(一) 利用自己的数据集 利用lenet网络进行训练
- 将数据集做成VOC2007格式用于Faster-RCNN训练
- windows10一站式YOLOv2训练自己的数据集