首页 > 解决方案 > 如何在 Google Cloud 中的 Jupyter Notebook 服务上安装 Kaggle

问题描述

我使用 Google Colab 来计算我的 Kaggle 比赛,现在我决定看看它是否会在使用 Google Cloud 上的服务时运行得更快。我有一个*.ipybn来自 Google Cloud 的文件,下载并尝试将其上传到 Google Cloud 实例。

我使用此链接在 Google Colab 上创建了所有连接:https ://towardsdatascience.com/setting-up-kaggle-in-google-colab-ebb281b61463 ,它运行良好。

使用本教程:https : //towardsdatascience.com/how-to-use-jupyter-on-a-google-cloud-vm-5ba1b473f4c2 我为 Jupyter notebook 创建了一个新实例。上传了一个*ipybn文件,我尝试安装 Kaggle 并运行我的笔记本,但我通常会出现以下错误:

kaggle: command not found error ensure that your python binaries are on your path

如何将所有内容设置为在 Google Cloud 服务上运行?

标签: google-cloud-platformgoogle-cloud-functionskaggle

解决方案


使用第一个教程时,请注意将根目录路径从 更改content/home/jupyter/,例如:

import zipfile
zip_ref = zipfile.ZipFile("/home/jupyter/Airbus_competition/input/test_v2.zip", 'r')
zip_ref.extractall("/home/jupyter/Airbus_competition/input/test_v2")
zip_ref.close()

对于安装 kaggle 的问题,您无法从 Jupyter 笔记本访问根文件夹,但是您可以安装和使用 Kaggle API,例如,当您将命令从 更改!kaggle为时!~/.local/bin/kaggle(教程中的命令更改为在 GCS 上工作):

!mkdir ~/.kaggle


import json
token = {"your_TOKEN"}
with open('/home/jupyter/.kaggle/kaggle.json', 'w') as file:
    json.dump(token, file)!cp /home/jupyter/.kaggle/kaggle.json 


~/.kaggle/kaggle.json


!~/.local/bin/kaggle config set -n path -v{home/jupyter/Airbus_competition}


!chmod 600 /home/jupyter/.kaggle/kaggle.json


!~/.local/bin/kaggle competitions download -c airbus-ship-detection -p /home/jupyter/Airbus_competition/input --force

推荐阅读