Recommended
Recommended
More Related Content
What's hot
What's hot (20)
Similar to JAWS-UG東京 - 2019-09-26 - Gateway祭
Similar to JAWS-UG東京 - 2019-09-26 - Gateway祭 (20)
More from Yutaro Ono
Recently uploaded
Recently uploaded (10)
JAWS-UG東京 - 2019-09-26 - Gateway祭
- 1. 2019年9月26日 ゲートウェイ祭 Transit Gateway & Storage Gateway
- 2. Japan Digital Design, Inc. 2 小野 雄太郎 VP of Infrastructure, Technology and Design Division. Japan Digital Designにてインフラストラクチ ャの設計運用等をメインに、パブリッククラウ ドのみで構成されたプラットフォームを実装中 これまでWindows Server, Visual Studio, IPv6などを中心に、コミュニティ運営など。 ここ最近はAWSメイン 個人事業主で普通のIT屋さんもしています Twitter: @chamreo LinkedIn: linkedin.com/in/yutaro
- 3. Japan Digital Design, Inc. 3 三菱UFJフィナン シャルグループ 持株会社 三菱UFJ銀行 34,000人 … 三菱UFJ信託銀行 7,000人 三菱UFJ証券ホー ルディングス 三菱UFJモルガン スタンレー証券 5,300人 Kabu.com … 三菱UFJニコス 3,100人 … Japan Digital Design 100人 > …
- 4. Japan Digital Design, Inc. 4 Gateway
- 5. 異世界へ ネットワーク屋さんがゲートウェイと聞くと… わくわく (ですよね!? 今日は最近登場した2種類をご紹介 ⚫ Storage Gateway ⚫ Transit Gateway Japan Digital Design, Inc. 5
- 6. What’s new 今日なにか東京リージョンに来ましたよね? …それはあとで Japan Digital Design, Inc. 6
- 7. Storage Gateway S3をほかのでアクセス可能にするGateway 3種類ある ⚫ ファイルゲートウェイ ⚫ ボリュームゲートウェイ ⚫ テープゲートウェイ Japan Digital Design, Inc. 7
- 8. ファイルゲートウェイ SMB or NFSの共有を、S3に同期する ⚫ 共有に保存されたデータがS3に保存される ⚫ オンプレミスにファイルゲートウェイを置いて、バックエンドの ストレージをS3にすることができる ◼ ゲートウェイのローカルボリュームにいったんキャッシュし、 非同期でS3に書き込みされる ⚫ 3rd Partyアプライアンスのほか、VMware ESXi, Hyper-Vのイメ ージに加えて、”EC2”も対応している Japan Digital Design, Inc. 8
- 9. ボリューム ゲートウェイ iSCSIターゲットになれるゲートウェイ ⚫ キャッシュ型と保管型がある ◼ キャッシュはS3のボリュームをキャッシュして低レイテンシー でアクセス可能にする ◼ 保管型はボリュームデータを非同期でS3に書き込む (S3はボリュームのスナップショット保管場所) Japan Digital Design, Inc. 9
- 10. テープゲートウェイ 仮想テープ装置として見える ⚫ D2D2Tなどの長期バックアップ先として利用できる ⚫ S3にバックアップを保存することで、長期保管ストレージを任せ ることができる Japan Digital Design, Inc. 10
- 11. Japan Digital Design, Inc. 11 本日はファイルゲートウェイをご紹介
- 12. VPC上にも作れる オンプレミスに置くと思われがち ⚫ たしかにゲートウェイをAWSへ接続する、という表記が多い ちゃんと試せばEC2でも展開できる ⚫ ファイルゲートウェイのイメージがある オンプレとVPCを接続済ならすぐに活用できる Japan Digital Design, Inc. 12
- 13. 試しに作ってみる Japan Digital Design, Inc. 13 ⚫ ゲートウェイの作成 ⚫ ファイルゲートウェイを選択
- 14. 試しに作ってみる Japan Digital Design, Inc. 14 ⚫ ホストプラットフォームで “EC2” を選択
- 15. 試しに作ってみる Japan Digital Design, Inc. 15 ⚫ “インスタンスの起動”からEC2でファイルゲートウェイを作っておく ◼ AMI選択済みの状態でEC2の作成が始まる ⚫ ローカルキャッシュ用ボリュームを追加
- 16. 試しに作ってみる Japan Digital Design, Inc. 16 ⚫ 利用するファイル共有プロトコルを受け付けるセキュリティグループを作っておく ◼ 詳しくはドキュメントを…
- 17. 試しに作ってみる Japan Digital Design, Inc. 17 ⚫ ファイルゲートウェイ インスタンスを起動する
- 18. 試しに作ってみる Japan Digital Design, Inc. 18 ⚫ Internetに出ていかないVPC内の場合、3つのVPCエンドポイントが必要 ◼ Storage Gateway エンドポイント (Storage Gateway のコントロール用) ◼ S3 エンドポイント (Storage Gateway インスタンスがS3にアクセスするため) ◼ STS エンドポイント (S3にアクセスするIAMロール取得のため)
- 19. 試しに作ってみる Japan Digital Design, Inc. 19 ⚫ 作成したStorage Gateway VPCエンドポイントのアドレスを指定する ◼ VPCエンドポイントがたくさんポートを使うのでセキュリティグループをちゃんと用意する ⚫ よくドキュメントを確認する ⚫ TCP 443, 1026, 1027, 1028, 1031, 2222
- 20. 試しに作ってみる Japan Digital Design, Inc. 20 ⚫ 起動したStorage GatewayインスタンスのIPアドレスを指定する ◼ このあと、このインスタンスに接続していく ◼ ので、この時点でVPC上のEC2が接続可能である必要がある
- 21. 試しに作ってみる Japan Digital Design, Inc. 21 ⚫ ファイルゲートウェイをアクティブ化する
- 22. 試しに作ってみる Japan Digital Design, Inc. 22 ⚫ アップデートキャッシュ用のローカルディスクを選択 ◼ しばらく待つと、キャッシュ用に用意しておいたディスクが表示されるのでキャッシュ用に選択する
- 23. 試しに作ってくる Japan Digital Design, Inc. 23 ⚫ ストレージゲートウェイが有効になった ちょっとめんどくさいね
- 24. ここまで ストレージゲートウェイのサービスが入った EC2インスタンスをVPC上に作成した Storage Gatewayのサービスと、EC2を接続した あとはStorage Gatewayのマネジメントコンソール から管理できる Japan Digital Design, Inc. 24
- 25. ファイル共有する Japan Digital Design, Inc. 25 ⚫ SMB共有を作る場合 ◼ File GatewayをあらかじめActive Directoryドメインに追加 ⚫ DCの名前解決などは別途環境を整えておく… ⚫ ドメインユーザーを使わない場合 ◼ ゲストパスワードを設定する
- 26. ファイル共有する Japan Digital Design, Inc. 26 ⚫ ファイル共有に利用するS3バケットを指定
- 27. ファイル共有する Japan Digital Design, Inc. 27 ⚫ S3バケットを利用する方法を指定 ◼ アクセスに利用するIAMロールを指定できる
- 28. ファイル共有する Japan Digital Design, Inc. 28 ⚫ 認証方法をあらかじめ設定した認証方法 (Active Directoryドメイン or ゲストパスワード)を指定する ◼ 共有は、読み書き可能 or 読み取り専用にできる ◼ 共有の設定を “閉じる” しないと作成ボタンが有効にならないので注意
- 29. ファイル共有する Japan Digital Design, Inc. 29 ⚫ ファイル共有ができた (ふぅ
- 30. ファイル共有する Japan Digital Design, Inc. 30 ファイル共有に接続する ⚫ 例: net use x: ¥¥192.168.0.10¥storage-gateway-bucket /user:sgw-123456¥smbguest
- 31. やっとつながった まあまあ大変… なににつかうの…? Japan Digital Design, Inc. 31
- 32. Japan Digital Design, Inc. 32 こんな使い方が、実はできる...
- 33. 既存システムとの連携 に超便利 既存データをAWS上へ簡単に送りたい… ⚫ S3にInternet経由でアップする? ⚫ VPCにProxy立ててS3 VPC Endpoint経由にする? ⚫ SCPクライアント入れる? AWS上で処理した結果を社内に戻したい… ⚫ マネジメントコンソールからダウンロード? ⚫ AWS CLIをバッチファイルに組み込む? ⚫ SCPクライアント? S3のファイルは(AWS上でないと)意外と使いにくい Japan Digital Design, Inc. 33
- 34. オンプレのデータを S3経由で活用 オンプレのサービスや、クライアントPCから ファイルゲートウェイ経由でS3へデータ追加 S3へ追加されたデータを、Lambdaなりなんなりで 取り込んで使っていく… ⚫ すでにファイルベースで連携するシステムなどがある場合、共有 フォルダパスを指定するだけで、AWSのサービスとシームレスに 連携ができるようになる ⚫ クライアントPCからファイルを送ることも簡単 ◼ ユーザーサイドでマニュアルの更新などが現状で必要な場合、 TerraTerm/WinSCPでSCPするなどの手順を省ける Japan Digital Design, Inc. 34
- 35. クラウドの出力を オンプレミスへ クラウド上で生成されたアウトプットを、 既存システムやクライアントで利用 読み取り専用ファイル共有を使い、S3内のデータを そのままオンプレミス側に公開 ⚫ クラウドネイティブなアプリを作ると、結果はS3に入っているこ とが多い ◼ httpsで直接ダウンロードには、ファイル一覧性がない… ◼ SCPやAWS CLI使うとすると、バッチなりが必要… ⚫ ファイルゲートウェイを経由すると、S3バケットのオブジェクト を一覧できる ◼ ユーザーに必要なファイルを探して使ってもらうことができる ◼ 移行期の段階的なクラウド化を容易に Japan Digital Design, Inc. 35
- 36. たとえば… データ分析プラットフォームの出力 ⚫ S3バケットに定期的に増分出力される… ⚫ “じゃぱにーず とらでぃしょなる” な会社にデータを渡さないと いけない… ◼ エンドユーザにマネジメントコンソールは触らせたくない ◼ SCPでもいいけど… 読み取り専用ファイル共有 ⚫ S3バケットの特定日付フォルダから必要なファイルを各自取得 ◼ ユーザーは慣れた操作で行える ⚫ Active Directory ドメイン連携でアクセス制御もシームレス ◼ 管理者はマネージドな環境で日々のメンテナンスを軽減 Japan Digital Design, Inc. 36
- 37. トラブルシューティング Tips Japan Digital Design, Inc. 37 Storage Gateway インスタンスにSSHできる ⚫ ネットワーク接続のテストなどができるので、うまくつながらないときは要チェック
- 38. トラブルシューティング Tips Japan Digital Design, Inc. 38 S3に直接追加されたファイルが共有に出てこない ⚫ キャッシュ更新でS3バケットとファイルゲートウェイ内のキャッシュを同期する必要あり ◼ S3のデータを直接いじるのは推薦されない ◼ が、ファイル共有が読み取り専用なら、キャッシュ同期するだけで不整合は気にせず大丈夫 (のはず 読み書き可能な共有で、IAMロールにS3の書き込み権限がないと不整合が出る ⚫ ファイルゲートウェイ内のキャッシュからS3を更新しようとして、失敗し続ける ⚫ キャッシュのクリア (更新したファイルのアップロード取り消し)はできない ◼ 共有の作り直し以外に現状解決できないようなので、読み書き可能な共有でトリッキーな構成は要注意
- 39. Japan Digital Design, Inc. 39 Transit Gateway
- 40. Transit Gateway 複数のVPCをつなぐGateway ⚫ 1:N の接続を簡単に作れる VPC Peeringはメッシュ構成 DirectConnect Gatewayはオンプレ : VPC n Transit Gatewayを使うことで、複数のVPC同士、 複数のVPCとオンプレを簡単に相互通信できる ⚫ IPSec to Transit GW to VPCs ⚫ DirectConnect to DirectConnect GW to Transit GW to VPCs Japan Digital Design, Inc. 40
- 41. Transit Gateway with DirectConnect Gateway Japan Digital Design, Inc. 41 東京リージョンはまだ… キタっ (きょう
- 42. Japan Digital Design, Inc. 42 まじか
- 43. Japan Digital Design, Inc. 43 これは
- 44. Japan Digital Design, Inc. 44 祭だ
- 45. Japan Digital Design, Inc. 45 やるのか?
- 46. Japan Digital Design, Inc. 46 やるよね?
- 47. Japan Digital Design, Inc. 47 やった
- 48. つないできた! Japan Digital Design, Inc. 48
- 49. つないできた! Japan Digital Design, Inc. 49
- 50. ネットワーク構成図 Japan Digital Design, Inc. 50 会社 Equinix ラック ルータ AWSVirtual IF VPC DirectConnect Gateway Transit Gateway VPC NURO P2MP CrossConnect BGP BGP
- 51. ネットワーク構成図 Japan Digital Design, Inc. 51 DirectConnect GatewayとTransitGatewayはASが異なる必要性 ⚫ おそらく、DirectConnect Gatewayからは別のASとしてルーティングしているだけ 会社 Equinix ラック ルータ AWSVirtual IF VPC DirectConnect Gateway Transit Gateway VPC NURO P2MP CrossConnect BGP BGP AS-65000 AS-65001
- 52. ルーティングテーブル あとはネットワーク屋さんお仕事 Japan Digital Design, Inc. 52
- 53. ルーティングテーブル デフォルトルートを広報して VPCからインターネットへオンプレ経由で出たり… Japan Digital Design, Inc. 53 会社 Equinix ラック ルータ AWSVirtual IF VPC DirectConnect Gateway Transit Gateway VPC NURO P2MP CrossConnect BGP BGP ルータ 0.0.0.0/0
- 54. ルーティングテーブル VPCのインターネット出口を集約したり.. Japan Digital Design, Inc. 54 会社 Equinix ラック ルータ AWSVirtual IF VPC DirectConnect Gateway Transit Gateway VPC NURO P2MP CrossConnect BGP BGP ルータ 0.0.0.0/0
- 55. 時間切れ! すみません… とりあえず ap-northeast-1 つなぎました 使えます!(笑 Japan Digital Design, Inc. 55