Enviar búsqueda
Cargar
Datalab and colaboratory
•
3 recomendaciones
•
1,654 vistas
Hayato Yoshikawa
Seguir
Let's learn how to use Cloud Datalab deeply.
Leer menos
Leer más
Tecnología
Vista de diapositivas
Denunciar
Compartir
Vista de diapositivas
Denunciar
Compartir
1 de 15
Descargar ahora
Descargar para leer sin conexión
Recomendados
Serverless on GCP
Serverless on GCP
Hayato Yoshikawa
スクリーンリーダーと点字ディスプレイの話
スクリーンリーダーと点字ディスプレイの話
Takuya Nishimoto
サイト制作(Nuxt.js)学習実施要項
サイト制作(Nuxt.js)学習実施要項
IIHARA HODAKA
自由な空間情報利用のためのツールQGISと日本語化プロジェクトの紹介
自由な空間情報利用のためのツールQGISと日本語化プロジェクトの紹介
Yoichi Kayama
Vue.js with Go
Vue.js with Go
Kazuhiro Kubota
120517 cf tour_london
120517 cf tour_london
Takayoshi Tanaka
RubyConfの話の続きのおはなし
RubyConfの話の続きのおはなし
yamanekko
Clojure で chatbot 作るライブラリ作った
Clojure で chatbot 作るライブラリ作った
Masashi Iizuka
Recomendados
Serverless on GCP
Serverless on GCP
Hayato Yoshikawa
スクリーンリーダーと点字ディスプレイの話
スクリーンリーダーと点字ディスプレイの話
Takuya Nishimoto
サイト制作(Nuxt.js)学習実施要項
サイト制作(Nuxt.js)学習実施要項
IIHARA HODAKA
自由な空間情報利用のためのツールQGISと日本語化プロジェクトの紹介
自由な空間情報利用のためのツールQGISと日本語化プロジェクトの紹介
Yoichi Kayama
Vue.js with Go
Vue.js with Go
Kazuhiro Kubota
120517 cf tour_london
120517 cf tour_london
Takayoshi Tanaka
RubyConfの話の続きのおはなし
RubyConfの話の続きのおはなし
yamanekko
Clojure で chatbot 作るライブラリ作った
Clojure で chatbot 作るライブラリ作った
Masashi Iizuka
Slide
Slide
Moriyuki Arakawa
Gitoriousをubuntu 10.04 LTSへインストール
Gitoriousをubuntu 10.04 LTSへインストール
Kiyoshi SATOH
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
kimukou_26 Kimukou
Config mapについて
Config mapについて
Arata Honda
自分的pkgsrcの課題
自分的pkgsrcの課題
Ryo ONODERA
Quartzでcronを範囲検索したい
Quartzでcronを範囲検索したい
chibochibo
Excite beer bash06
Excite beer bash06
Arata Honda
ホームディレクトリに埋もれた便利なコードをさがせ!
ホームディレクトリに埋もれた便利なコードをさがせ!
Yohei Fushii
GoによるWebアプリ開発のキホン
GoによるWebアプリ開発のキホン
Akihiko Horiuchi
LT#7 Hello coffeeしてきた
LT#7 Hello coffeeしてきた
Shingo Inoue
Rookの今とこれから(CloudNative Meetup #3)
Rookの今とこれから(CloudNative Meetup #3)
JUNICHI YOSHISE
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
ThinReports
Yapc2012資料
Yapc2012資料
matsuo kenji
OSS Reporting Solution ThinReports
OSS Reporting Solution ThinReports
ThinReports
How To Drink Wsgi
How To Drink Wsgi
Atsushi Odagiri
Nuxt+TypeScript+Class構文のはなし
Nuxt+TypeScript+Class構文のはなし
kyoheichida
pkgsrcユーザー向け設定
pkgsrcユーザー向け設定
Ryo ONODERA
ちゃんとWeb会議スライド『Coffee script』
ちゃんとWeb会議スライド『Coffee script』
H2O Space. Co., Ltd.
日本androidの会 中国支部 29回勉強会 github
日本androidの会 中国支部 29回勉強会 github
Tomohiko Himura
NuxtでChrome拡張作ってみた
NuxtでChrome拡張作ってみた
kyoheichida
GOCON Autumn (Story of our own Monitoring Agent in golang)
GOCON Autumn (Story of our own Monitoring Agent in golang)
Huy Do
20171105 go con2017_lt
20171105 go con2017_lt
Keigo Suda
Más contenido relacionado
La actualidad más candente
Slide
Slide
Moriyuki Arakawa
Gitoriousをubuntu 10.04 LTSへインストール
Gitoriousをubuntu 10.04 LTSへインストール
Kiyoshi SATOH
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
kimukou_26 Kimukou
Config mapについて
Config mapについて
Arata Honda
自分的pkgsrcの課題
自分的pkgsrcの課題
Ryo ONODERA
Quartzでcronを範囲検索したい
Quartzでcronを範囲検索したい
chibochibo
Excite beer bash06
Excite beer bash06
Arata Honda
ホームディレクトリに埋もれた便利なコードをさがせ!
ホームディレクトリに埋もれた便利なコードをさがせ!
Yohei Fushii
GoによるWebアプリ開発のキホン
GoによるWebアプリ開発のキホン
Akihiko Horiuchi
LT#7 Hello coffeeしてきた
LT#7 Hello coffeeしてきた
Shingo Inoue
Rookの今とこれから(CloudNative Meetup #3)
Rookの今とこれから(CloudNative Meetup #3)
JUNICHI YOSHISE
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
ThinReports
Yapc2012資料
Yapc2012資料
matsuo kenji
OSS Reporting Solution ThinReports
OSS Reporting Solution ThinReports
ThinReports
How To Drink Wsgi
How To Drink Wsgi
Atsushi Odagiri
Nuxt+TypeScript+Class構文のはなし
Nuxt+TypeScript+Class構文のはなし
kyoheichida
pkgsrcユーザー向け設定
pkgsrcユーザー向け設定
Ryo ONODERA
ちゃんとWeb会議スライド『Coffee script』
ちゃんとWeb会議スライド『Coffee script』
H2O Space. Co., Ltd.
日本androidの会 中国支部 29回勉強会 github
日本androidの会 中国支部 29回勉強会 github
Tomohiko Himura
NuxtでChrome拡張作ってみた
NuxtでChrome拡張作ってみた
kyoheichida
La actualidad más candente
(20)
Slide
Slide
Gitoriousをubuntu 10.04 LTSへインストール
Gitoriousをubuntu 10.04 LTSへインストール
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
レガシー環境で個人ベースでなんとか頑張るDVCS(Git)運用
Config mapについて
Config mapについて
自分的pkgsrcの課題
自分的pkgsrcの課題
Quartzでcronを範囲検索したい
Quartzでcronを範囲検索したい
Excite beer bash06
Excite beer bash06
ホームディレクトリに埋もれた便利なコードをさがせ!
ホームディレクトリに埋もれた便利なコードをさがせ!
GoによるWebアプリ開発のキホン
GoによるWebアプリ開発のキホン
LT#7 Hello coffeeしてきた
LT#7 Hello coffeeしてきた
Rookの今とこれから(CloudNative Meetup #3)
Rookの今とこれから(CloudNative Meetup #3)
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
Ruby向け帳票ソリューション「ThinReports」の開発で知るOSSの威力
Yapc2012資料
Yapc2012資料
OSS Reporting Solution ThinReports
OSS Reporting Solution ThinReports
How To Drink Wsgi
How To Drink Wsgi
Nuxt+TypeScript+Class構文のはなし
Nuxt+TypeScript+Class構文のはなし
pkgsrcユーザー向け設定
pkgsrcユーザー向け設定
ちゃんとWeb会議スライド『Coffee script』
ちゃんとWeb会議スライド『Coffee script』
日本androidの会 中国支部 29回勉強会 github
日本androidの会 中国支部 29回勉強会 github
NuxtでChrome拡張作ってみた
NuxtでChrome拡張作ってみた
Destacado
GOCON Autumn (Story of our own Monitoring Agent in golang)
GOCON Autumn (Story of our own Monitoring Agent in golang)
Huy Do
20171105 go con2017_lt
20171105 go con2017_lt
Keigo Suda
Gocon2017:Goのロギング周りの考察
Gocon2017:Goのロギング周りの考察
貴仁 大和屋
TensorFlow on GCP
TensorFlow on GCP
Hayato Yoshikawa
[Lt]versionごとにurlを自動生成
[Lt]versionごとにurlを自動生成
shouta yoshikai
元OracleMasterPlatinumがCloudSpanner触ってみた
元OracleMasterPlatinumがCloudSpanner触ってみた
Kumano Ryo
GCPUG-FUKUOKA データ加工&可視化ハンズオン
GCPUG-FUKUOKA データ加工&可視化ハンズオン
Wasaburo Miyata
Destacado
(7)
GOCON Autumn (Story of our own Monitoring Agent in golang)
GOCON Autumn (Story of our own Monitoring Agent in golang)
20171105 go con2017_lt
20171105 go con2017_lt
Gocon2017:Goのロギング周りの考察
Gocon2017:Goのロギング周りの考察
TensorFlow on GCP
TensorFlow on GCP
[Lt]versionごとにurlを自動生成
[Lt]versionごとにurlを自動生成
元OracleMasterPlatinumがCloudSpanner触ってみた
元OracleMasterPlatinumがCloudSpanner触ってみた
GCPUG-FUKUOKA データ加工&可視化ハンズオン
GCPUG-FUKUOKA データ加工&可視化ハンズオン
Similar a Datalab and colaboratory
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
Katsunori Kanda
CEDEC 2015: Google スケールで実現する!ゲーム&分析基盤
CEDEC 2015: Google スケールで実現する!ゲーム&分析基盤
Google Cloud Platform - Japan
明日から使えるgradle
明日から使えるgradle
kimukou_26 Kimukou
Tizen 2.0 alpha でサポートされなかった native api
Tizen 2.0 alpha でサポートされなかった native api
Naruto TAKAHASHI
俺とGitHub
俺とGitHub
Masayuki KaToH
特盛!Heroku
特盛!Heroku
Shunji Konishi
20170527 inside .NET Core on Linux
20170527 inside .NET Core on Linux
Takayoshi Tanaka
20090124shibuya Trac
20090124shibuya Trac
Kazuya Hirobe
プログラミング支援AI GitHub Copilot すごいの話
プログラミング支援AI GitHub Copilot すごいの話
Mitsushige Ishiguro
Getting Started GraalVM / GraalVM超入門 #jjug_ccc #ccc_c2
Getting Started GraalVM / GraalVM超入門 #jjug_ccc #ccc_c2
tamtam180
Getting Started GraalVM (再アップロード)
Getting Started GraalVM (再アップロード)
tamtam180
PostgreSQL開発コミュニティに参加しよう!(PostgreSQL Conference Japan 2021 発表資料)
PostgreSQL開発コミュニティに参加しよう!(PostgreSQL Conference Japan 2021 発表資料)
NTT DATA Technology & Innovation
Grailsのススメ(仮)
Grailsのススメ(仮)
Tsuyoshi Yamamoto
20220615_Visual_Programing_IoTLT_vol11_kitazaki_v1.pdf
20220615_Visual_Programing_IoTLT_vol11_kitazaki_v1.pdf
Ayachika Kitazaki
【初心者向け】API を使ってクラウドの管理を自動化しよう
【初心者向け】API を使ってクラウドの管理を自動化しよう
富士通クラウドテクノロジーズ株式会社
Metahub for github
Metahub for github
Suguru Oho
Jupyterで運用やってみた
Jupyterで運用やってみた
Satoshi Yazawa
Cloudn PaaSチームのChatOps実践
Cloudn PaaSチームのChatOps実践
Kazuto Kusama
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
MicroAd, Inc.(Engineer)
Azure Function GAした!Visual Studio Tools for Azure Functions もプレビューだ!
Azure Function GAした!Visual Studio Tools for Azure Functions もプレビューだ!
Yasuaki Matsuda
Similar a Datalab and colaboratory
(20)
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
BazelでビルドしたアプリをGCPにデプロイしようとしてハマった話
CEDEC 2015: Google スケールで実現する!ゲーム&分析基盤
CEDEC 2015: Google スケールで実現する!ゲーム&分析基盤
明日から使えるgradle
明日から使えるgradle
Tizen 2.0 alpha でサポートされなかった native api
Tizen 2.0 alpha でサポートされなかった native api
俺とGitHub
俺とGitHub
特盛!Heroku
特盛!Heroku
20170527 inside .NET Core on Linux
20170527 inside .NET Core on Linux
20090124shibuya Trac
20090124shibuya Trac
プログラミング支援AI GitHub Copilot すごいの話
プログラミング支援AI GitHub Copilot すごいの話
Getting Started GraalVM / GraalVM超入門 #jjug_ccc #ccc_c2
Getting Started GraalVM / GraalVM超入門 #jjug_ccc #ccc_c2
Getting Started GraalVM (再アップロード)
Getting Started GraalVM (再アップロード)
PostgreSQL開発コミュニティに参加しよう!(PostgreSQL Conference Japan 2021 発表資料)
PostgreSQL開発コミュニティに参加しよう!(PostgreSQL Conference Japan 2021 発表資料)
Grailsのススメ(仮)
Grailsのススメ(仮)
20220615_Visual_Programing_IoTLT_vol11_kitazaki_v1.pdf
20220615_Visual_Programing_IoTLT_vol11_kitazaki_v1.pdf
【初心者向け】API を使ってクラウドの管理を自動化しよう
【初心者向け】API を使ってクラウドの管理を自動化しよう
Metahub for github
Metahub for github
Jupyterで運用やってみた
Jupyterで運用やってみた
Cloudn PaaSチームのChatOps実践
Cloudn PaaSチームのChatOps実践
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
Hadoopデータ基盤とMulti-CloudなML基盤への取り組みの紹介
Azure Function GAした!Visual Studio Tools for Azure Functions もプレビューだ!
Azure Function GAした!Visual Studio Tools for Azure Functions もプレビューだ!
Datalab and colaboratory
1.
Datalabを”もっと”使おう & Colaboratoryって何? GCPUG Nov. 18, 2017
2.
Hi there! ● Hayato
Yoshikawa @hayatoy @hayatoy82 ● Publication! 「Google Cloud Platformではじめる機 械学習と深層学習」という本を書きまし た。
3.
Cloud Datalabとは ● Jupyter
Notebookのクラウド版 ● ブラウザ上でインタラクティブに PythonコードやBigQueryのクエリが走る ● GCPのリソースに簡単アクセス
4.
Datalabの構成はどうなってるの? 本体は gcr.io/cloud-datalab/datalab ユーザー領域はPDをマウント SSH接続
5.
Datalabにライブラリを追加するには? startup.shに”pip install xxx”などを記載 startup.sh自体はPDにある。コンテナ起動 時に/root配下にコピー&実行される
6.
startup.shのデバッグ (たぶん)どこにも書いて無いけど、 /terminals/1 にアク セスするとTerminalを起動できる
7.
例:xgboostをインストール apt-get update apt-get install
build-essential git clone --recursive https://github.com/dmlc/xgboost cd xgboost; make -j4 この2つを忘れずに
8.
Swapfile DatalabはPDにVMメモリと同じサイズのswapfileを生成する PDのサイズを小さくしていると、すぐ容量が足りなくなる mem_total_line=`cat /proc/meminfo |
grep MemTotal` mem_total_value=`echo "${mem_total_line}" | cut -d ':' -f 2` memory_kb=`echo "${mem_total_value}" | cut -d 'k' -f 1 | tr -d '[:space:]'` swapfile="${MOUNT_DIR}/swapfile" Custom metadataにスクリプトがあるので 書き換えればOKかも
9.
datalabコマンドを使わないで接続 datalabコマンドは内部的にSSHを呼んでいるだけ 自分でSSHポートフォワードすればdatalabコマンド ・Googleアカウントが無くても接続できる
10.
Cloud Shellだと遅い? ● Boost
ModeをONにする ● zoneをasia-east1-*にする 体感速度上がるかって? それは気持ちの問題です・・
11.
Colaboratory
12.
Colaboratoryって? ● https://colab.research.google.com/ ● 機械学習の勉強と研究用のJupyter ●
複数人同時編集できる(Google Docsみたいに) ● NotebookはGoogle Driveに保存 ● カーネルはGCEで実行 ● Python2のみ *現時点(2017年11月)では無料で利用可能、た だし許可制
13.
スペック? CPU 2.2 GHz
Intel Xeon E5 v4 (Broadwell) x2 Memory 13GB n1-highmem-2 ?
14.
Zoneとかその他情報 Metadata覗けなかった・・・(´・ω・`)
15.
Thank you!
Descargar ahora