DeepLearning > Google Colaboratoryからファイルを簡単にGoogle Driveへ書き込む方法
   こしあん
2018-10-21

Google Colaboratoryからファイルを簡単にGoogle Driveへ書き込む方法

Posted On 2018-10-21
このエントリーをはてなブックマークに追加
Pocket
LINEで送る
Delicious にシェア

8k{icon} {views}

新刊情報

技術書典8の新刊『モザイク除去から学ぶ　最先端のディープラーニング』（A4・195ページ）好評通販中です！　機械学習の入門からGANの最先端までを書いたおすすめの本となっています！　Boothで試し読みできます。情報まとめ・質問用GitHub


Google ColaboratoryからGoogle Driveに保存する方法はいくつかあるのですが、最近改良が入って簡単に書き込めるようになっていました。その方法を見ていきます。

まずはGoogle Driveをマウント

Google Driveをマウントし、Colabの中で使えるようにします。

from google.colab import drive
drive.mount('./gdrive')

これはカレントディレクトリ以下の「gdrive」というフォルダに、Google Driveをマウントするよという意味です。このフォルダは何でもいいです。Google Driveのファイルはここで指定したフォルダ（gdrive）以下の、「gdrive/My Drive」フォルダに格納されます。

このコードを実行すると認証URLが出てくるので、その認証コードをコピーし認証させます。この認証はランタイムがリセットされるたびに必要なので注意が必要です。

ちゃんとマウントされているか確認するには、Linuxコマンドの「ls」を使います。

!ls gdrive

ColabではビックリマークをつけるとLinuxコマンドを実行できます。マウントが成功するとこのように出てくるはずです。

‘My Drive’

ちなみに、My Drive以下の中身を見たいときは、パスにスペースが入っているため「!ls gdrive/My Drive」とやるとエラーになります。「!ls gdrive/My\ Drive」とスペースをエスケープするか、「!ls “gdrive/My Drive”」とパス全体をクォテーションで囲んでください。

ちなみにこの「マウントする」とは一回読んで終わりではなくて、定期的にGoogle Driveと同期が取られるようです。これを活用すると、Drive上のファイルを簡単に読み書きできるようになります。

Google Driveにファイルを書き込んでみる

例として画像ファイルを書き込んでみましょう。

drive_root_dir="./gdrive/My Drive"

import numpy as np
from PIL import Image

noise = (np.random.rand(128,128,3)*255.0).astype(np.uint8)
with Image.fromarray(noise) as img:
  img.save(drive_root_dir+"/noise.png")

これは乱数を発生させて、ピクセルにノイズを作り出し、そのノイズ画像（128×128）をGoogle Driveに保存する例です。即Google Drive側に反映されないかもしれませんが、数秒待つとこのようにGoogle Driveに保存されているのが確認できます。

あとはGoogle Driveを普通に使うようにダウンロードすればいいだけなので簡単ですね。

読み込む場合

ちなみに読み込む場合はもっと簡単で、普通にファイルを読めばいいのです。

drive_root_dir="./gdrive/My Drive"

import numpy as np
from PIL import Image

with Image.open(drive_root_dir+"/noise.png") as img:
  img_array = np.asarray(img)
  print(img_array.shape)

(128, 128, 3)

ローカルにあるファイルと同じ要領で使えるので、とても簡単ですね。

以上です。ColabのVMのストレージは時間制限があり、長期的に使用することができませんが、Google Driveに適宜出力することでモデルやファイルの永続化をすることができます。

新刊情報

技術書典8の新刊『モザイク除去から学ぶ　最先端のディープラーニング』好評通販中（A4・195ページ）です！　Boothで試し読みもできるのでよろしくね！

このエントリーをはてなブックマークに追加
Pocket
LINEで送る
Delicious にシェア

Tags:

Add a Comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です