シェル芸勉強会へようこそ

シェル芸勉強会へようこそ
シェル芸勉強会へようこそ usp友の会田代勝也
まずは御礼ご参加いただき誠にありがとうございます
テキスト処理の重要性 • 各種テキストファイル • データファイル HTML、JSON、RDF • 設定ファイル • ログファイル • プログラムコード C、Java、Ruby • 各種命令の文字列 • コマンド実行 • SQL文 • HTTP、SMTP
テキスト処理の重要性情報処理にテキスト処理は欠かせない！
テキスト処理に強くなろう • テキストデータの整理 • ログデータの整理とか • データからSQL文作ってデータぶち込む • テストデータ入れたいとか • プログラムコードの一括変換 • 型を変えたいとか、関数名変えたいとかシェル芸で出来ると便利！
テキストエディタ何使う？ Vidual Studio、Eclipse SublimeText、Atom 秀丸、サクラエディタ、TeraPad Emacs、Vim IDEエディタ論争！？
テキストエディタ何使う？だが心配ない！だってテキストエディタ使わない！
シェル芸のイメージ一般的？なイメージコワイ！メラしか使えないのにベギラゴンが飛び交ってる
シェル芸のイメージ • いきなり長いワンライナ書いてない • 出力を確認しながら少しずつ • 慣れてないから難しく見える訓練することで誰でも！
manにもシェル芸が FreeBSDのlddコマンドマニュアルにシェル芸 https://www.freebsd.org/cgi/man.cgi?query=ldd ワンライナーは何も特別なことじゃない！そのままだと問題があるので修正版がこちら $ find /usr/bin -type f | xargs -n1 file -F' ' | grep ELF | cut -f1 -d ' ' | xargs ldd -f '%A %on' | grep libc.so.7
スクリプト言語としてのシェル • 変数 • スカラ、配列 • 制御構造 • if、for、while • 関数 • 定義、スコープ • データを変数に持たせる • 制御構造で処理する • 関数で処理の共通化これらは苦手で遅いスクリプト組む時・・
スクリプト言語としてのシェル手続き型な言語としては正直イケてない・・・しかし！パイプを使ったストリーム処理が得意
パイプの利点 • 簡単な問題に分解 • コードの簡素化 • バグの軽減につながる • 並列処理 • マルチコアの場合自動的に並列化 • 禁断の界王拳2倍超え（CPU300%とか） • メモリ使用量 • sortされたデータなら大幅に軽減可モダンなプログラミングに対して利点も
シェルプログラミングの考え方 • データはファイルに持たせる • ファイル読み書きは得意（リダイレクト） • フィルタとして処理 • パイプでのストリーム処理（関数型の考え方） • 並列処理の活用 • シェルのパイプやバックグラウンド機能
コマンドを知る •テキスト処理系 •単機能 •cat、grep、sort、uniq、 tail、head、tr、paste、 diff、comm •多機能 •sed •ファイル操作系 •ls、ﬁnd •シーケンス生成 •seq、jot •その他 •xargs、time、tee、echo、 printf、bc、curl •最終兵器 •awk •perl、ruby (-alne)
Open usp Tukubaiの紹介 • ユニケージ開発手法で利用されるコマンド群 • よく使われるコマンドをオープンソースで公開 • 端末が有用な道具になる • シェル芸にも強い味方何が嬉しいのか？
Open usp Tukubaiの紹介 • スペース区切りのデータが前提 • フィールド数は固定 • 固定数じゃなくていい場合も • 処理速度は遅い • Pythonで実装（より高速なHaskell版やShell版も） • 商用版は超高速（C言語）
Open usp Tukubaiの紹介 •日付時刻処理 •mdate、calclock、yobi •各種集計 •gyo、count、sm2、map •フィールド切出 •self、delf Open usp Tukubaiコマンドマニュアル https://uec.usp-lab.com/TUKUBAI_MAN/CGI/TUKUBAI_MAN.CGI?POMPA=LIST •行列変換 •tarr、yarr、tateyoko •データ結合 •loopj、loopx、join0、join1、 join2 •その他 •getﬁrst、getlast、juni、mojihame
古くて新しいパラダイム • テキストデータは基本で自由 • ストリーム処理という考え方 • 並列処理で高速化も改めてUNIXの基本にたち返ろう！
シェル芸情報 • USP友の会 • https://www.usptomo.com • UEC - use engineers' community site • https://uec.usp-lab.com/ INFO/CGI/INFO.CGI? POMPA=LIST • 上田ブログ（会長） • https://blog.ueda.asia • 大チェッカー：シェル芸人たち • https://daichkr.hatelabo.jp/ antenna/960679194075891200 • 稚拙ブログ • http://papiro.hatenablog.jp

シェル芸勉強会へようこそ

Check these out next

シェル芸勉強会へようこそ

Recomendados

Más contenido relacionado

Similar a シェル芸勉強会へようこそ(20)

Último(20)

シェル芸勉強会へようこそ