SlideShare una empresa de Scribd logo
1 de 11
「運用自動化」に
失敗してみた
~そして復旧へ~
#ssmjp 2019/xx (仮)
日本Unboundユーザー会
@goto_ipv6
「運用自動化」してますか?
• 私もやっていますし登壇もしています
• 「障害ありきで運用自動化をやってみた」
@JANOG39
• 障害発生時に自動で仮復旧させるシステム
• お客様へも自動で通知します
• 「自動化の行き着く先は?」@JANOG43
• で、結果どうなったか、どうあるべきかを議論
• でも失敗しちゃいました……
自己紹介
• 名前 : 後藤 芳和
• 「JANOG 後藤 芳和」でググってください
• というか前のページのリンクをたどってください
• Twitter : @goto_ipv6
• https://www.slideshare.net/goto_ipv6
• https://togetter.com/id/goto_ipv6
• #ssmjp では「DNS 浸透いうな」ネタで登壇
• でも DNS を仕事で運用したことはありません
「運用」といえば?
• 波田野さん(@tcsh)
• https://www.opslab.jp/publish/
• とても勉強になっています
• ありがとうございます
なのに
• 失敗しちゃいました
• というか、「失敗しそうに」なりました
• 何が起きた?
• 人を減らされてしまいました
• 現場への相談もなしに……
• 「運用自動化」で、人が要らないだろうと思われた?
復旧作業
• 「障害」が起きたら「復旧」しますよね?
• 本件もしました
• やったこと
• 上司へ「キレて」みた → トップダウンの契機に
• 運用タスクの (再) 洗い出し → ボトムアップ
• ドキュメントの (再) 鮮度維持 → ボトムアップ
• つまり、運用業務の「再構造化」
• 波田野さんの資料『運用業務の「構造化」 』
トップダウンアプローチも
• 「キレる」ことも必要
• でもキレ方は上手くやらないとダメ
• それまでの信頼度とか、そういったものに依存
• 運用への情熱とかもあるのかな
• 「再構造化」作業を最優先項目にしてもらった
• じゃないと、「人手が必要な何か」が発生したとき
にシステムが本当に止まるから
• 運用自動化により、属人化が進んでいることを知っても
らった
そもそもの落とし穴
#ssmjp 2019/05 運用業務の「構造化」より引用
ここより
上は?
つまり自動化
の範囲が、あ
るグループに
閉じていたら
外 (上) から見ると
• 「運用自動化」は「工数削減手段」だと見えて
しまう
• というか、そこを上にアピールされてしまう場合も
• 結果、上から「じゃあ人はもう要らないよね」
と判断されてしまう
• そうじゃない!
• 品質向上、納期短縮のための自動化であるべき
• → 「運用自動化」に対する幻想
三角形を大きくしていく
• 自動化を始める際に、会社の
トップをいきなり巻き込むこ
とは、普通はできない
• でも上の人達にも「運用自動
化の真実」を理解して貰う必
要がある
• 「運用自動化」が完了した三
角形を、徐々に大きく広げて
いく必要性
• 上方向だけでなくて、左
右にも
• つまり社内展開して多く
の人に知ってもらう
#ssmjp 2019/05 運用業務の「構造化」より引用
まとめ (仮)
• 運用業務の「再構造化」をやりましょう
• ドキュメントの鮮度維持を
• タスクの棚卸しを
• 運用自動化がどこかの範囲で完成したら、その
範囲を「上」にも「左右」にも
• 色んな人を巻き込んで「運用自動化の真実」を知っ
てもらう
• 社内勉強会でも良いし、上の人へ相談できる場があ
るならそこでも良い

Más contenido relacionado

La actualidad más candente

中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
Yuuki Namikawa
 
RxTStudy第3回_LT_yohhatu
RxTStudy第3回_LT_yohhatuRxTStudy第3回_LT_yohhatu
RxTStudy第3回_LT_yohhatu
Yoh Nakamura
 
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
kirin_nico
 

La actualidad más candente (20)

120225 bootstrap
120225 bootstrap120225 bootstrap
120225 bootstrap
 
Vi Boot Camp #1
Vi Boot Camp #1Vi Boot Camp #1
Vi Boot Camp #1
 
オープンソースエコシステム #demodaytokyo
オープンソースエコシステム #demodaytokyoオープンソースエコシステム #demodaytokyo
オープンソースエコシステム #demodaytokyo
 
エディタ遍歴2014 #hachiojipm
エディタ遍歴2014 #hachiojipmエディタ遍歴2014 #hachiojipm
エディタ遍歴2014 #hachiojipm
 
「だるやなぎのグッズを求めるのは間違っているだろうか」 プロ生勉強会 第34回@サイボウズ株式会社 松山オフィス #pronama
「だるやなぎのグッズを求めるのは間違っているだろうか」 プロ生勉強会 第34回@サイボウズ株式会社 松山オフィス #pronama「だるやなぎのグッズを求めるのは間違っているだろうか」 プロ生勉強会 第34回@サイボウズ株式会社 松山オフィス #pronama
「だるやなぎのグッズを求めるのは間違っているだろうか」 プロ生勉強会 第34回@サイボウズ株式会社 松山オフィス #pronama
 
AssetBundle (もどき) の作り方
AssetBundle (もどき) の作り方AssetBundle (もどき) の作り方
AssetBundle (もどき) の作り方
 
中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
中国のクラウドサービスについて (サイバーエージェント×クックパッド合同勉強会LT資料)
 
プログラマの本気
プログラマの本気プログラマの本気
プログラマの本気
 
Django と Wagtail で作る Headless CMS
Django と Wagtail で作る Headless CMSDjango と Wagtail で作る Headless CMS
Django と Wagtail で作る Headless CMS
 
pythonで始める筋トレ(競技プログラミング)
pythonで始める筋トレ(競技プログラミング)pythonで始める筋トレ(競技プログラミング)
pythonで始める筋トレ(競技プログラミング)
 
Introduction of ios-chart in oss-labs#3
Introduction of ios-chart in oss-labs#3Introduction of ios-chart in oss-labs#3
Introduction of ios-chart in oss-labs#3
 
Pythonで始める競技プログラミング
Pythonで始める競技プログラミングPythonで始める競技プログラミング
Pythonで始める競技プログラミング
 
個人開発で神社APIを作った話
個人開発で神社APIを作った話個人開発で神社APIを作った話
個人開発で神社APIを作った話
 
AssetBundle と TextureCompression のおはなし
AssetBundle と TextureCompression のおはなしAssetBundle と TextureCompression のおはなし
AssetBundle と TextureCompression のおはなし
 
20150216 Unity Hands-on 「できる!Unity 2D」
20150216 Unity Hands-on 「できる!Unity 2D」20150216 Unity Hands-on 「できる!Unity 2D」
20150216 Unity Hands-on 「できる!Unity 2D」
 
RxTStudy第3回_LT_yohhatu
RxTStudy第3回_LT_yohhatuRxTStudy第3回_LT_yohhatu
RxTStudy第3回_LT_yohhatu
 
リアルタイムにデータ分析してWebサービスの面白さを伝えたい
リアルタイムにデータ分析してWebサービスの面白さを伝えたいリアルタイムにデータ分析してWebサービスの面白さを伝えたい
リアルタイムにデータ分析してWebサービスの面白さを伝えたい
 
20161125 尾崎 bootstrap
20161125 尾崎 bootstrap20161125 尾崎 bootstrap
20161125 尾崎 bootstrap
 
自己紹介LT「俺の迷走っぷり」
自己紹介LT「俺の迷走っぷり」自己紹介LT「俺の迷走っぷり」
自己紹介LT「俺の迷走っぷり」
 
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
「アイロンビーズプロッター作ろうとしてみた with プロ生ちゃん」 プロ生勉強会 第44回@熊本
 

Similar a 20190531 「運用自動化」に失敗してみた

これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012bこれからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
Yusuke Yamamoto
 
実践的IT勉強会参加術
実践的IT勉強会参加術実践的IT勉強会参加術
実践的IT勉強会参加術
Hiromu Shioya
 

Similar a 20190531 「運用自動化」に失敗してみた (16)

自動化について
自動化について自動化について
自動化について
 
#JANOG 44 「運用自動化に「失敗」しちゃった」
#JANOG 44 「運用自動化に「失敗」しちゃった」#JANOG 44 「運用自動化に「失敗」しちゃった」
#JANOG 44 「運用自動化に「失敗」しちゃった」
 
俺のZabbixがこんなに可愛いわけがない~北海道巡業編~
俺のZabbixがこんなに可愛いわけがない~北海道巡業編~俺のZabbixがこんなに可愛いわけがない~北海道巡業編~
俺のZabbixがこんなに可愛いわけがない~北海道巡業編~
 
Teclab4
Teclab4Teclab4
Teclab4
 
【Qp08】ざびたん2リリース報告lt 20111022
【Qp08】ざびたん2リリース報告lt 20111022【Qp08】ざびたん2リリース報告lt 20111022
【Qp08】ざびたん2リリース報告lt 20111022
 
クソアプリ作った
クソアプリ作ったクソアプリ作った
クソアプリ作った
 
JavaScriptで出来る、あんなことこんなこと
JavaScriptで出来る、あんなことこんなことJavaScriptで出来る、あんなことこんなこと
JavaScriptで出来る、あんなことこんなこと
 
MF GeeksNight pplogの話
MF GeeksNight pplogの話MF GeeksNight pplogの話
MF GeeksNight pplogの話
 
JJUG Oracle Code One 2018 報告会 LT(@nishino_chekhov)
JJUG Oracle Code One 2018 報告会 LT(@nishino_chekhov)JJUG Oracle Code One 2018 報告会 LT(@nishino_chekhov)
JJUG Oracle Code One 2018 報告会 LT(@nishino_chekhov)
 
第2.1回 ツイッターAPI勉強会 @ts_3156 発表資料
第2.1回 ツイッターAPI勉強会 @ts_3156 発表資料第2.1回 ツイッターAPI勉強会 @ts_3156 発表資料
第2.1回 ツイッターAPI勉強会 @ts_3156 発表資料
 
Global Lab Sendai主催 Unity初心者講座2018
Global Lab Sendai主催 Unity初心者講座2018Global Lab Sendai主催 Unity初心者講座2018
Global Lab Sendai主催 Unity初心者講座2018
 
Chrome-eject がこの先生きのこるには
Chrome-eject がこの先生きのこるにはChrome-eject がこの先生きのこるには
Chrome-eject がこの先生きのこるには
 
これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012bこれからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
これからの自分戦略 〜組織に埋もれない自分のウリコミ〜 #devlove2012b
 
rucs_vim LT
rucs_vim LTrucs_vim LT
rucs_vim LT
 
tokyo_webmining_no51
tokyo_webmining_no51tokyo_webmining_no51
tokyo_webmining_no51
 
実践的IT勉強会参加術
実践的IT勉強会参加術実践的IT勉強会参加術
実践的IT勉強会参加術
 

20190531 「運用自動化」に失敗してみた