＜目次＞
(１) Kaggleのデータセットをダウンロードする方法（API）をご紹介
(１-０) STEP0：（事前準備）Kaggleアカウント作成
(１-１) STEP1：（事前準備）パッケージのインストール
(１-２) STEP2：（事前準備）APIトークンの取得
(１-３) STEP3：サンプルプログラム（データセットダウンロード）
(１) Kaggleのデータセットをダウンロードする方法（API）をご紹介
本記事ではKaggleのデータセットをPythonプログラムからAPI経由でダウンロードする手順についてご紹介します。
(１-０) STEP0：（事前準備）Kaggleアカウント作成
データセットのダウンロードにはKaggleアカウントが必要なため、持っていない方は作成します。
・①URLにアクセスしRegisterを進める
（図１１１①）
↓
（図１１１②）
↓
（図１１１③）
↓
・②「Verify Your Account」押下
（図１１１④）
↓
・「Send Verification Code」押下
（図１１１⑤）
↓
・「Verify」押下
（図１１１⑥）
↓
・「Close」押下
（図１１１⑦）
(１-１) STEP1：（事前準備）パッケージのインストール
Kaggleパッケージをインストールします。
（実行コマンド）
- > pip install kaggle --user
（図１２１）
（結果例）
- Running setup.py install for kaggle ... done
- Successfully installed kaggle-1.5.12
(１-２) STEP2：（事前準備）APIトークンの取得
この状態でプログラムを実行しても下記のエラーとなります。
（エラーメッセージ）
- OSError: Could not find kaggle.json. Make sure it's located in C:\Users\Rainbow\.kaggle. Or use the environment method.
（図１２２）
これは認証に必要な情報（ユーザーID、APIキー）が適用されていないためです。
よって、下記の対応が必要。
●STEP2-1：APIトークンの発行
・①自分のアイコン→「Account」押下
（図１２３）
↓
（図１２３）
↓
・②「Create New API Token」を押下
（図１２３②）
↓
・③kaggle.jsonが生成されます。
→この中にユーザー名とキーが発行されます
{“username”:”XXXX”,”key”:”XXXXX”}
（図１２３③）
●STEP2-2：kaggle.jsonの配備
・「C:\Users\[ご自身のユーザー名]\.kaggle」に配備します。
（図１２４）
(１-３) STEP3：サンプルプログラム（データセットダウンロード）
（サンプルプログラム）
- from kaggle.api.kaggle_api_extended import KaggleApi
- import zipfile
- api = KaggleApi()
- api.authenticate()
- output_path = './kaggle_download_dataset/'
- # kaggle.com/c/dogs-vs-catsからダウンロード
- # train.zip / test1.zipの2つのファイルがある
- # './'はカレントディレクトリの意味。
- api.competition_download_file('sentiment-analysis-on-movie-reviews',
- 'train.tsv.zip', path=output_path)
- api.competition_download_file('sentiment-analysis-on-movie-reviews',
- 'test.tsv.zip', path=output_path)
- # zipファイルの解凍
- with zipfile.ZipFile(output_path+'train.tsv.zip', 'r') as zipref:
- zipref.extractall(output_path)
- with zipfile.ZipFile(output_path+'test.tsv.zip', 'r') as zipref:
- zipref.extractall(output_path)
・①プログラムを実行します。
（図１３１）
（結果例）
- Downloading train.tsv.zip to ./kaggle_download_dataset
- 100%|█████████████████████████████████████████████████████████████████████████████████████████| 1.28M/1.28M [00:01<00:00, 1.25MB/s]
- Downloading test.tsv.zip to ./kaggle_download_dataset
- 100%|███████████████████████████████████████████████████████████████████████████████████████████| 494k/494k [00:00<00:00, 5.65MB/s]
↓
・②同じ階層にzipがダウンロードされ、同時に解凍もされました。
（図１３２）
↓
・③tsvファイルについて
tsvはタブを区切り文字に使ってフォーマットされたファイルです。
（図１３３）
Pythonのcsvモジュールを用いて読込みできます。
- # tsvファイルの読込み
- with open(output_path+'train.tsv', encoding='utf-8', newline='') as f:
- for cols in csv.reader(f, delimiter='\t'):
- print(cols)
（図１３４）
(１-４) エラー対処：HTTP 403エラーが出た時の対処方法について
●エラー
（エラーメッセージ）
- HTTP response body: b'{"code":403,"message":"Permission \\u0027competitions.downloadData\\u0027 was denied"}'
（図２１１）
●原因
CompetionのルールをAcceptしていないため。
（図２１２）
●対策
下記のURLにアクセスし、CompetionのルールをAcceptする。
・URL
↓
・「I Understand and Accept」を押下
（図２１３）
↓
・完了
（図２１４）
