障害発生时に抑えておきたい基础知识
?
21 likes?2,172 views
NODE-Setagaya#0 ( http://www.zusaar.com/event/650010 ) の発表＆ディスカッションをした際に使った資料です。
![障害発生时の基本确认编
何かバッチ処理が動いていないか？
atコマンドジョブの確認
# atq
# at -c [ジョブ番号]
# atq | awk '{print $1}' | xargs at -c
※ 「トラしゅ」ではこいつに苦しめられましたね。。
# atq
# at -c [ジョブ番号]
## 一行で確認
# atq | awk '{print $1}' | xargs at -c](https://image.slidesharecdn.com/random-130420232445-phpapp02/85/-16-320.jpg)
![障害発生时の基本确认编
ミドルウェアは何が入っている？
必ずしもyumやaptで行儀よく入っているとは
限らない
※ ソースコンパイルでインストールする際は
/usr/local/[ミドルウェア名]
に突っ込むことが多い。というかほぼ暗黙の了解。
また、モノによっては /opt配下も好まれる場合もあり
# ls /usr/local
# ls /opt](https://image.slidesharecdn.com/random-130420232445-phpapp02/85/-17-320.jpg)
障害発生时に抑えておきたい基础知识
- 2. Profile ? 名前 Kei Iwasaki ? Twitter @laugh_k ? 職業 MSP(監視運用代行)の会社で サーバ?ネットワークエンジニア的なもの
- 3. 3月某日のこと
- 5. 参加してきました！
- 8. 障害発生时の基本确认编
- 11. 障害発生时の基本确认编 聞き耳を立てているポート?プロセスはないか？ ※プロセスの情報もセットで追いかける場合は rootで実行する。 # netstat -nplt # netstat -nplu # netstat -nplx
- 12. 障害発生时の基本确认编 CPU、MEMなどのシステムリソースは どうなっているか？ Mem # free -m Load Average(CPU) # uptime # free -m # uptime
- 13. 障害発生时の基本确认编 CPU、MEMなどのシステムリソースは どうなっているか？ 入っていたら # sar -A 現状のプロセスと照らし合わせながら # top ※topは表示中にfを押すと詳細な表示オプションが 選択できる！ # sar -A # top
- 14. 障害発生时の基本确认编 何かシステムがエラーを吐いていないか？ システムログの確認 ※ /etc/rsyslog.conf,/etc/syslog.confを確認すると 他にもどこかに吐かれていることがわかる！ # dmesg # less /var/log/messages # less /var/log/syslog # less /var/log/secure # less /var/log/auth
- 15. 障害発生时の基本确认编 何かバッチ処理が動いていないか？ Cronの確認 ※ cronは管理者によって書き方が色々なので注意！ # ls /var/spool/cron/crontab/* # cat /etc/crontab # ls /etc/cron* ## /etc/cron* のファイルを全部表示 # find /etc/cron* -type f -exec cat '{}' ;
- 16. 障害発生时の基本确认编 何かバッチ処理が動いていないか？ atコマンドジョブの確認 # atq # at -c [ジョブ番号] # atq | awk '{print $1}' | xargs at -c ※ 「トラしゅ」ではこいつに苦しめられましたね。。 # atq # at -c [ジョブ番号] ## 一行で確認 # atq | awk '{print $1}' | xargs at -c
- 17. 障害発生时の基本确认编 ミドルウェアは何が入っている？ 必ずしもyumやaptで行儀よく入っているとは 限らない ※ ソースコンパイルでインストールする際は /usr/local/[ミドルウェア名] に突っ込むことが多い。というかほぼ暗黙の了解。 また、モノによっては /opt配下も好まれる場合もあり # ls /usr/local # ls /opt
- 18. 障害発生时の基本确认编 ミドルウェアのログを見よう！ 単純にエラーを探すだけでなく、 タイムスタンプが不自然に切れていないかなども重要 Apacheだと大体はこんな感じ ※vimが入っている場合はハイライトが効いて 見やすくなることもある。 ## yumやaptなどの場合 # less /var/log/apache2/access.log ## ソースコンパイルの場合 # less /usr/local/apache2/logs/access.log
- 19. 障害発生时の基本确认编 自動起動しているプロセスはあってる？ 意図しているもの 今起動しているもの ※ちゃんと意図したとおりに動いているのか確認 # chkconfig –list # cat /etc/rc.local # ls /etc/rc{1..5}.d/ # ps auxwww # pstree -p