時代はクラウド。しかしお財布が…… AWSやAzure、GCP、OCIなど大手ITはクラウドサービスを揃え、熱心に推進しています。個人でもクラウドを学習しやすいように、無料枠やクーポンを拡充するベンダーも増えてきました。… 続きを読む 個人データ基盤を敢えてオンプレで構築する理由
タグ: ビッグデータ
Google Colaboratory(Colab Pro)でkaggleデータをダウンロードする方法[備忘録]
技術的な要素は無いのですが、忘れやすいのでコピペ出来るように記事を残しておきます。 kaggle.jsonをGoogleドライブに保存しておく kaggleのAccount画面でCreate New API Toke… 続きを読む Google Colaboratory(Colab Pro)でkaggleデータをダウンロードする方法[備忘録]
Googleドライブの鬼仕様な『フォルダダウンロード』を回避する裏技(Piping Server)
最近、Google Colab Pro(月1,072円)を契約したので、『NVIDIA V100』という高性能GPUで機械学習ごっこ(GPT-2,BERT等)をして遊んでいます。 ところが、機械学習は10GB単位で鬼… 続きを読む Googleドライブの鬼仕様な『フォルダダウンロード』を回避する裏技(Piping Server)