狠狠撸

狠狠撸Share a Scribd company logo
クラウド+オンプレミス統合管理に
向けたZabbixカスタマイズの紹介

     TIS株式会社
    コーポレート本部
    戦略技術センター
      池田 大輔
自己紹介

name     Daisuke Ikeda
twitter  @ike_dai
facebook https://www.facebook.com/ikedai




                           弊社技術ブログ『Tech-Sketch』
                           毎週技術系記事を公開中!!
                           (http://tech-sketch.jp/)
  Zabbix2.0紹介記事(ThinkIT)                              Self-Introduction
今日の話題

クラウド+オンプレミス統合管理に向けた取り組み紹介
- コンセプト
- デモ
- 今後の取り組み予定




                     Today's Theme
全て絶賛開発中です!
最終的にはいろいろと変わることを
前提にお聞き下さい!!

ご意見も随時募集中!

採用できるかは要相談
早速ですが???             仮想マシンの
                     追加?削除したら
こんな感じで管理してませんか?      変更大変




                    あの障害が発生し
                    た時どんな状態
                    だったっけ?




 仮想マシンとハイパーバイザの関係をドキュメント管理
                                Problems
早速ですが???                       SSHクライアントも
                               沢山のサーバを管
                               理すると大変なこ
こんな感じで管理してませんか?                とに




              VMwareは
              vShpereClientで




AWSの管理は
AWS管理コンソー
ルで


            いろんなツールを駆使した管理              Problems
管理するの大変じゃないですか?
高頻度で仮想マシンの削除?追加?移動発生




環境の多種多様化




                       Problems
面倒なことなくしたい!


マルチ環境一括管理
できるようにしてみよう!


既に監視で利用している    Zabbixから
管理できるなら便利かも!
何ができるようになった?
Physical Machine
■ IPMIを利用したサーバの起動?停止
■ IPMIコンソール接続
■ SSH接続
VMware ESXi
■ HV,VMのリソース状況取得
■ VMの起動?停止
■ データストアの管理
■ VMコンソール接続
AWS EC2
■ EC2インスタンス情報取得
■ EC2起動?停止
                       New Function
システム概略
                                       Check            Operation


              Custom
                                       Zabbix Frontend
Add                                            Zabbix
                 External Scripts
              monitoring




                                         DeltaCloud API
      Add                     Custom                                Custom
             IPMI Driver                       vSphere Driver                 EC2 Driver



            iLO,BMC等IPMI                       vSphere API
                                                                               AWS API

             物理マシン                             VMware ESXi                     Amazon
                                                                             Web Services




                                                                                           Overview
DeltaCloudとは?
■ Apache Top Project (2012/02/16昇格)
■ 最新バージョン0.5.0(2012/05/12現在)
■ Ruby実装
■ RedHatのクラウドプロジェクトの1つ
■ CloudFormsの中の1コンポーネント
■ 対応クラウド
 AWS,Eucalyptus,GoGrid,Opennebula,Rackspace,
 RHEV-M,Rimuhosting,Terremark,vSphere,OpenStack,WindowsAzure
■ 各対応クラウド毎に環境操作用Driverが提供
■ RESTful API提供




   *Deltacloud公式サイトより引用( ttp://deltacloud.apache.org/index.html)
                       h                                           What's DeltaCloud
DeltaCloudの使い方
Install & Start Service
$ sudo gem install deltacloud-core
$ deltacloudd -i ec2 -p 3000 -r 192.168.xx.xx --daemon

                                                         http://192.168.xx.xx:3000/




-i           デフォルトドライバ指定

-p           ポート番号指定

-r           ホスト指定

--daemon     デーモン起動




                                                                              How to Use DeltaCloud
DeltaCloudの使い方
API(ex. Get EC2 instances list)
HTTP Request

$ curl --user "ACCSESS_KEY:SECRET_KEY" -H "X-deltacloud-Driver:ec2" -H "X-deltacloud-Provider:us-
west-1" http://192.168.xx.xx:3000/api/instances?format=json


 JSON Response
{"instances":
                                                                  X-deltacloud-Driver
  [{"id":"i-86254000",
    "owner_id":"918550410000",
                                                                  X-deltacloud-Provider
    "image_id":"ami-3e060000",
    "name":"ami-3e060000",                                        を変えることでマルチな環境の操
    "realm_id":"ap-northeast-1a",                                 作を一括で実現
    "state":"STOPPED",
    ???略
    "href":"http://192.168.xx.xx:3000/api/instances/i-86254000"
    }
    {
    ???略
    }
   ]
}

                                                                           How to Use DeltaCloud
Zabbixカスタマイズ
External Script
 ●   DeltaCloud経由でマシン稼働状況 ?マシンリソース状況 を取得
 ●   取得結果をZabbix Senderで該当アイテムに登録
 ●   vSphereやEC2の仮想マシン情報は 自動的にホスト登録



Template
 ●   タイプ毎にテンプレート を作成
      ○ IPMI用
      ○ vSphere用(ホストOS用、ゲストOS用)
      ○ AWS用(アカウント用、EC2インスタンス用)



FrontEnd(Dashboard etc...)
 ●   カスタマイズExternalScript実行結果をダッシュボードに表示
 ●   ホストに対する"操作"(起動?停止?再起動等)をダッシュボードから 直接実行可能 に
      ○ 実行リクエストはDeltaCloud経由で各環境に送付
 ●   コンソール接続画面 を追加

                                             Customize Zabbix
Zabbixカスタマイズ
External Script
 ●   DeltaCloud経由でマシン稼働状況 ?マシンリソース状況 を取得
 ●   取得結果をZabbix Senderで該当アイテムに登録
 ●   vSphereやEC2の仮想マシン情報はZabbix APIで 自動的にホスト登録&テンプレート割当



Template
 ●   タイプ毎にテンプレート を作成
      ○ IPMI用
      ○ vSphere用                 メリット
      ○ AWS用                     ?個々の仮想マシンの登録負荷軽減
                                 ?基本情報監視アイテム化でリソース変化の管理可能

                                 Zabbix Sender,Zabbix API便利!
                                 2つを駆使することで柔軟にカスタマイズ可能!
FrontEnd(Dashboard etc...)
 ●   カスタマイズExternalScript実行結果をダッシュボードに表示
 ●   ホストに対する"操作"(起動?停止?再起動等)をダッシュボードから 直接実行可能 に
      ○ 実行リクエストはDeltaCloud経由で各環境に送付
 ●   コンソール接続画面 を追加

                                                  Customize Zabbix
デ モ

デモがうまくいかない場合は動画でどうぞ???
   AWS: http://db.tt/qmcdL9OR
   IPMI:   http://db.tt/igUwYe9S
   vSphere: http://db.tt/LWOHoCnM
   VNC:    http://db.tt/Ynwc4UwU




                                    Demonstration
颁辞苍蝉辞濒别接続の仕组み




                Console Architecuture
基本的なことだけできてもメリット少ない???


マルチ環境間連携とか実現できないか?
これから求められていくのは"CloudFederation"!




環境間バックアップ?オートメーション等に挑戦
でも実現方法は????
すでに存在するマルチクラウド運用管理ツールとの差別化はどうする?(Scalr,RightScaleな
どなど沢山出てきている)

                                           Future Work
AWS,vSphere,物理マシンだけだと???



幅広く管理できるようにならないか?


KVM?Xen?その他OpenStackへの対応検討
OpenStackなどに全ての環境を集約すればZabbixから実施できる必要ない?
→既存の環境への影響をできる限り少なく?かつ統合管理したい場合もあるのでは?


                                     Future Work
最終的には?

統合管理できるZabbixを皆さんに使ってもらいたい


          Zabbix本体に機能を
OSS公開?
          取込んでもらえたらなぁ




               外部ツール使いすぎて
               厳しいかも???




                            Goal?
目标!
   1.公開できるレベルまで仕上げてどこかで公開

 2.皆さんのご意見を聞きながら少しずつ良いものに

3.Zabbixをクラウド時代の運用方法にもマッチしたツールに


                        できなかったら...


             @ike_dai             end

More Related Content

What's hot (20)

PDF
AWSを含めたハイフ?リット?環境の監視の実現 ~zabbixのクラウト?対応モシ?ュールHyClops~
Daisuke Ikeda
?
PDF
Zabbix-jp study #4 20111020 session2
Hitoshi Yoshida
?
PDF
Osc2013 kansai@kyoto ZABBIX-JP クラウド環境監視効率化
Daisuke Ikeda
?
PDF
第6回zabbix jp勉強会資料
Daisuke Ikeda
?
PPTX
自宅ラック勉強会 2.2 夏のZabbix特別教室 ~構築編~
真乙 九龍
?
PDF
手作业なしの安定环境実现に向けた窜补产产颈虫活用方法绍介+窜补产产颈虫2.4最新机能绍介
Daisuke Ikeda
?
PDF
窜补产产颈虫勉强会
Hiroshi Morotomi
?
PDF
第2回 OSS運用管理勉強会 運用あるある(Zabbix)
真治 米田
?
PDF
Zabbixのパフォーマンスチューニング & インストール時の注意点
Kodai Terashima
?
PDF
第5回oss運用管理勉強会 zabbix徹底活用術の紹介
Daisuke Ikeda
?
PDF
オープンに活动することと现场の改善~窜补产产颈虫导入による改善物语~
Daisuke Ikeda
?
PPTX
AWSのElastic BeanstalkでWordPressを 構築レスで導入してみる。
Daigou Harada
?
PPTX
5分て?インストール!补飞蝉て?锄补产产颈虫3.0
Tadashi Mishima
?
PDF
窜补产产颈虫超入门
Daisuke Ikeda
?
PPTX
Zabbixの分散構築~ConoHa VPSでのzabbix server構築~
真乙 九龍
?
PPTX
ニフティクラウドに窜补产产颈虫をインストールしてみた
VirtualTech Japan Inc./Begi.net Inc.
?
PDF
窜补产产颈虫による翱辫别苍厂迟补肠办/翱辫别苍颁辞苍迟谤补颈濒の监视
Kodai Terashima
?
PDF
OSC 2014 Tokyo/Spring 「Zabbix 2.2を使ってみよう」
Atsushi Tanaka
?
PDF
ザビ家の野望 ? 全自動ZABBIX AWS編 ?
Katsuhiro Miura
?
PDF
JobScheduler ユーザカンファレンス 2016 東京日産コンピュータシステム様 事例紹介
Daisuke Ikeda
?
AWSを含めたハイフ?リット?環境の監視の実現 ~zabbixのクラウト?対応モシ?ュールHyClops~
Daisuke Ikeda
?
Zabbix-jp study #4 20111020 session2
Hitoshi Yoshida
?
Osc2013 kansai@kyoto ZABBIX-JP クラウド環境監視効率化
Daisuke Ikeda
?
第6回zabbix jp勉強会資料
Daisuke Ikeda
?
自宅ラック勉強会 2.2 夏のZabbix特別教室 ~構築編~
真乙 九龍
?
手作业なしの安定环境実现に向けた窜补产产颈虫活用方法绍介+窜补产产颈虫2.4最新机能绍介
Daisuke Ikeda
?
窜补产产颈虫勉强会
Hiroshi Morotomi
?
第2回 OSS運用管理勉強会 運用あるある(Zabbix)
真治 米田
?
Zabbixのパフォーマンスチューニング & インストール時の注意点
Kodai Terashima
?
第5回oss運用管理勉強会 zabbix徹底活用術の紹介
Daisuke Ikeda
?
オープンに活动することと现场の改善~窜补产产颈虫导入による改善物语~
Daisuke Ikeda
?
AWSのElastic BeanstalkでWordPressを 構築レスで導入してみる。
Daigou Harada
?
5分て?インストール!补飞蝉て?锄补产产颈虫3.0
Tadashi Mishima
?
窜补产产颈虫超入门
Daisuke Ikeda
?
Zabbixの分散構築~ConoHa VPSでのzabbix server構築~
真乙 九龍
?
ニフティクラウドに窜补产产颈虫をインストールしてみた
VirtualTech Japan Inc./Begi.net Inc.
?
窜补产产颈虫による翱辫别苍厂迟补肠办/翱辫别苍颁辞苍迟谤补颈濒の监视
Kodai Terashima
?
OSC 2014 Tokyo/Spring 「Zabbix 2.2を使ってみよう」
Atsushi Tanaka
?
ザビ家の野望 ? 全自動ZABBIX AWS編 ?
Katsuhiro Miura
?
JobScheduler ユーザカンファレンス 2016 東京日産コンピュータシステム様 事例紹介
Daisuke Ikeda
?

Viewers also liked (20)

PDF
障害対応?运用におけるトリアージ的対応と窜补产产颈虫の活用
Masahito Zembutsu
?
PDF
fluentd を利用した大規模ウェブサービスのロギング
Yuichi Tateno
?
PDF
贵濒耻别苍迟诲のお勧めシステム构成パターン
Kentaro Yoshida
?
PDF
(旧版) オープンソースライセンスの基礎と実務
Yutaka Kachi
?
PDF
Aws summit tokyo 2016
Shotaro Motomura
?
PPTX
AWS Direct Connectの構築を自動化(しようと)している話
Kaoru Kitauchi
?
PDF
見えないモノを見ようとしてSNMP MIBを覗き込んだ
Kaoru Kitauchi
?
PDF
OSSで支えられるライブドアの巨大ログ集計 #nhntech
SATOSHI TAGOMORI
?
PDF
技术书のススメ
onozaty
?
PDF
しばちょう先生による特別講義! RMANバックアップの運用と高速化チューニング
オラクルエンジニア通信
?
PDF
HBase at LINE
Shun Nakamura
?
PDF
Storage infrastructure using HBase behind LINE messages
LINE Corporation (Tech Unit)
?
PDF
パフォーマンスタブ見れないんですけど!! 株式会社コーソル 河野 敏彦
CO-Sol for Community
?
PPTX
贵濒耻别苍迟诲の使い方
Tomohiro Goya
?
PDF
Big Data入門に見せかけたFluentd入門
Keisuke Takahashi
?
PDF
Novius os chiba の紹介
Fumito Mizuno
?
DOCX
Uso didáctico de los medios impresos.
sac30
?
PPTX
Mediosimpresoshistoria
sac30
?
ODP
Guide To AGPL
Mikiya Okuno
?
PDF
物理ネットワーク受け入れテストの自动化を考える
skipping classes
?
障害対応?运用におけるトリアージ的対応と窜补产产颈虫の活用
Masahito Zembutsu
?
fluentd を利用した大規模ウェブサービスのロギング
Yuichi Tateno
?
贵濒耻别苍迟诲のお勧めシステム构成パターン
Kentaro Yoshida
?
(旧版) オープンソースライセンスの基礎と実務
Yutaka Kachi
?
Aws summit tokyo 2016
Shotaro Motomura
?
AWS Direct Connectの構築を自動化(しようと)している話
Kaoru Kitauchi
?
見えないモノを見ようとしてSNMP MIBを覗き込んだ
Kaoru Kitauchi
?
OSSで支えられるライブドアの巨大ログ集計 #nhntech
SATOSHI TAGOMORI
?
技术书のススメ
onozaty
?
しばちょう先生による特別講義! RMANバックアップの運用と高速化チューニング
オラクルエンジニア通信
?
HBase at LINE
Shun Nakamura
?
Storage infrastructure using HBase behind LINE messages
LINE Corporation (Tech Unit)
?
パフォーマンスタブ見れないんですけど!! 株式会社コーソル 河野 敏彦
CO-Sol for Community
?
贵濒耻别苍迟诲の使い方
Tomohiro Goya
?
Big Data入門に見せかけたFluentd入門
Keisuke Takahashi
?
Novius os chiba の紹介
Fumito Mizuno
?
Uso didáctico de los medios impresos.
sac30
?
Mediosimpresoshistoria
sac30
?
Guide To AGPL
Mikiya Okuno
?
物理ネットワーク受け入れテストの自动化を考える
skipping classes
?
Ad

Similar to クラウド环境向け窜补产产颈虫カスタマイズ绍介(第5回窜补产产颈虫勉强会) (20)

PDF
锄补产产颈虫を使ったクラウド环境の监视とツール连携
NHN テコラス株式会社
?
PDF
クラウド连携のキモは管理用础笔滨
Atsushi Nakada
?
PDF
オープンソース統合監視ソフトウェア Zabbix 2.0によるクラウド監視
Kodai Terashima
?
PPT
Zabbix-OSC-Fukuoka
Yuki Nakatake
?
PDF
オープンソースでシステム監視!Zabbix 1.8の機能と簡単インストール手順の紹介
Kodai Terashima
?
PDF
Zabbix 1.8の概要と新機能
Kodai Terashima
?
PDF
2012 OSC Kyoto / 2012 OSC Tokyo Fall - OpenStack vps kvm
Naoto Gohko
?
PDF
オープンソースでシステム監視!統合監視ソフトウェア"Zabbix 1.8"の新機能とデモ
Kodai Terashima
?
PDF
【セミナー讲演资料】オープンクラウドソリューションのご绍介
Nissho-Blocks
?
PDF
[AWSマイスターシリーズ] AWS Elastic Beanstalk -Python編-
Amazon Web Services Japan
?
PPTX
PHP on Cloud
Akio Katayama
?
PDF
窜补产产颈虫社内勉强会资料-窜补产产颈虫2.0新机能绍介编-
Daisuke Ikeda
?
PDF
第12回颁濒辞耻诲厂迟补肠办ユーザ会冲础辫补肠丑别颁濒辞耻诲厂迟补肠办最新情报
Midori Oge
?
PDF
華麗なるElastic Beanstalkでの環境構築
Takehito Tanabe
?
PDF
OpenStack + KVM + IPv6 = oname.com; Next Folsom/Grizzly Service development s...
Naoto Gohko
?
PDF
Automation with SoftLayer and Zabbix
softlayerjp
?
PPTX
翱厂厂で作る翱辫别苍厂迟补肠办监视システム
satsuki fukazu
?
PDF
窜补产产颈虫2.0の新机能と今后の开発ロードマップ
Zabbix
?
PDF
統合監視ソフトウェア Zabbix新バージョン2.0の紹介
takanori suzuki
?
PDF
2012 OpenStack + KVM = onamae.com VPS #2 ~ vnc and snapshot ~
Naoto Gohko
?
锄补产产颈虫を使ったクラウド环境の监视とツール连携
NHN テコラス株式会社
?
クラウド连携のキモは管理用础笔滨
Atsushi Nakada
?
オープンソース統合監視ソフトウェア Zabbix 2.0によるクラウド監視
Kodai Terashima
?
Zabbix-OSC-Fukuoka
Yuki Nakatake
?
オープンソースでシステム監視!Zabbix 1.8の機能と簡単インストール手順の紹介
Kodai Terashima
?
Zabbix 1.8の概要と新機能
Kodai Terashima
?
2012 OSC Kyoto / 2012 OSC Tokyo Fall - OpenStack vps kvm
Naoto Gohko
?
オープンソースでシステム監視!統合監視ソフトウェア"Zabbix 1.8"の新機能とデモ
Kodai Terashima
?
【セミナー讲演资料】オープンクラウドソリューションのご绍介
Nissho-Blocks
?
[AWSマイスターシリーズ] AWS Elastic Beanstalk -Python編-
Amazon Web Services Japan
?
PHP on Cloud
Akio Katayama
?
窜补产产颈虫社内勉强会资料-窜补产产颈虫2.0新机能绍介编-
Daisuke Ikeda
?
第12回颁濒辞耻诲厂迟补肠办ユーザ会冲础辫补肠丑别颁濒辞耻诲厂迟补肠办最新情报
Midori Oge
?
華麗なるElastic Beanstalkでの環境構築
Takehito Tanabe
?
OpenStack + KVM + IPv6 = oname.com; Next Folsom/Grizzly Service development s...
Naoto Gohko
?
Automation with SoftLayer and Zabbix
softlayerjp
?
翱厂厂で作る翱辫别苍厂迟补肠办监视システム
satsuki fukazu
?
窜补产产颈虫2.0の新机能と今后の开発ロードマップ
Zabbix
?
統合監視ソフトウェア Zabbix新バージョン2.0の紹介
takanori suzuki
?
2012 OpenStack + KVM = onamae.com VPS #2 ~ vnc and snapshot ~
Naoto Gohko
?
Ad

More from Daisuke Ikeda (20)

PDF
AIOpsで実現する効率化 OSC 2022 Online Spring TIS
Daisuke Ikeda
?
PDF
Osc 2021 fall_tis_変化に強いチーム育成のための取り組み紹介
Daisuke Ikeda
?
PDF
OSC 2020 Fukuoka IT運用自動化を支援する「運用レコメンドプラットフォーム」実現の舞台裏
Daisuke Ikeda
?
PPTX
OSC2019 LT 運用レコメンドプラットフォーム開発におけるマイクロサービス構成の実現
Daisuke Ikeda
?
PDF
Zabbixを徹底活用してみよう ~4.2の最新情報もご紹介~
Daisuke Ikeda
?
PDF
2019/4/18 窜补产产颈虫勉强会 徹底活用本の改訂の話
Daisuke Ikeda
?
PDF
OSC2018Tokyo/Fall 自律的運用に向けた第一歩(OpsBear取り組み紹介)
Daisuke Ikeda
?
PDF
Jtf2018 自律的運用に向けた第一歩
Daisuke Ikeda
?
PDF
保守运用现场の课题共有しませんか?-翱厂颁2018尝罢-
Daisuke Ikeda
?
PDF
Serverspecを自分好みにアレンシ? スクリーンショットて?証跡保存を撲滅-
Daisuke Ikeda
?
PDF
AWS Ops系サービスが更に便利になる中、それでもなおZabbixとセットで考えたほうが良いのか?
Daisuke Ikeda
?
PDF
Tech circle bot x zabbix オペレータbot lt
Daisuke Ikeda
?
PDF
厂别谤惫别谤蝉辫别肠の活用迟颈辫蝉绍介
Daisuke Ikeda
?
PDF
Osc2016 tokyo sprint-jobschedulerを活用したoperations as codeの世界
Daisuke Ikeda
?
PDF
Job schedulerを活用したoperations as codeの世界
Daisuke Ikeda
?
PDF
Zabbix conference2015 daisukeikeda
Daisuke Ikeda
?
PDF
2.0~2.2~2.4~3.0 zabbixの進化を紐解く zabbix便利機能紹介-
Daisuke Ikeda
?
PDF
Tech circle#2 Vagrant+Docker handson
Daisuke Ikeda
?
PDF
TISMatsuriLT MackerelとZabbix
Daisuke Ikeda
?
PDF
OSC2014.Enterprise Zabbix-JobScheduler連携ツールHyClopsJobMonitoringによる運用システムOSS化の実現
Daisuke Ikeda
?
AIOpsで実現する効率化 OSC 2022 Online Spring TIS
Daisuke Ikeda
?
Osc 2021 fall_tis_変化に強いチーム育成のための取り組み紹介
Daisuke Ikeda
?
OSC 2020 Fukuoka IT運用自動化を支援する「運用レコメンドプラットフォーム」実現の舞台裏
Daisuke Ikeda
?
OSC2019 LT 運用レコメンドプラットフォーム開発におけるマイクロサービス構成の実現
Daisuke Ikeda
?
Zabbixを徹底活用してみよう ~4.2の最新情報もご紹介~
Daisuke Ikeda
?
2019/4/18 窜补产产颈虫勉强会 徹底活用本の改訂の話
Daisuke Ikeda
?
OSC2018Tokyo/Fall 自律的運用に向けた第一歩(OpsBear取り組み紹介)
Daisuke Ikeda
?
Jtf2018 自律的運用に向けた第一歩
Daisuke Ikeda
?
保守运用现场の课题共有しませんか?-翱厂颁2018尝罢-
Daisuke Ikeda
?
Serverspecを自分好みにアレンシ? スクリーンショットて?証跡保存を撲滅-
Daisuke Ikeda
?
AWS Ops系サービスが更に便利になる中、それでもなおZabbixとセットで考えたほうが良いのか?
Daisuke Ikeda
?
Tech circle bot x zabbix オペレータbot lt
Daisuke Ikeda
?
厂别谤惫别谤蝉辫别肠の活用迟颈辫蝉绍介
Daisuke Ikeda
?
Osc2016 tokyo sprint-jobschedulerを活用したoperations as codeの世界
Daisuke Ikeda
?
Job schedulerを活用したoperations as codeの世界
Daisuke Ikeda
?
Zabbix conference2015 daisukeikeda
Daisuke Ikeda
?
2.0~2.2~2.4~3.0 zabbixの進化を紐解く zabbix便利機能紹介-
Daisuke Ikeda
?
Tech circle#2 Vagrant+Docker handson
Daisuke Ikeda
?
TISMatsuriLT MackerelとZabbix
Daisuke Ikeda
?
OSC2014.Enterprise Zabbix-JobScheduler連携ツールHyClopsJobMonitoringによる運用システムOSS化の実現
Daisuke Ikeda
?

クラウド环境向け窜补产产颈虫カスタマイズ绍介(第5回窜补产产颈虫勉强会)