IT基盤のTCO削減に寄与するオープンソースソフトウェア活用推進技術システム構築自動化 Puppet システム構築を手戻りなく高速に！「OSSVERT Smart Builder」すずきしげなり † 1 とよだひろはる † 1 りょう † 2 やまだひろゆき † 2 鈴木繁成すがはら菅原　亮 /山田洋之各種サービスを提供するシステムが大規模化しつつある今日，システムの構築や管理にかかわる稼働の削減，および作業ミスを低減することを目的とし，NTT OSSセンタではOSS（Open Source Software）を活用したシステム構築省力化ツール「OSSVERT Smart Builder」を開発しました．本稿では本ツールの特徴，技術的なポイント，実機にて確認した効果などを紹介します．背景と課題 NTTグループでは，個別に運用されている複数の社内システムを統合基 /豊田裕晴てづかひろひさ † 1 手塚博久 NTT OSSセンタ †2 NTTデータ先端技術 †1 ます． OSSVERT Smart Builder OSSVERT Smart Builder（O-SB） ■概要の開発においてはまず，特に稼働時間システム構築・管理業務は，設計，の多い工程「OS ・ミドルウェアのイ盤上に構築・移行することでシステムインストール・設定，確認，の 3 つのンストール・設定工程」に着目して検構築・管理業務の集約化を進めていま作業工程に分けられます（図 1 ）．こ討を進め，その工程の自動化機能を実す．このため，統合基盤を構成するサーれらの工程の中で，OSとミドルウェ現しました．O-SBの具体的な動作イバ数の増加に伴いシステム構築・管理アのインストール（またはバージョンメージを図 2 に示します．O-SBサー業務のより一層の効率運用が求められアップ）工程，設定工程，および正常バが，ネットワーク越しに，あらかじています．性確認工程は，サーバ台数に比例してめ設定した手順に従い，構築対象とな作業稼働が増大し，さらに人為的ミスるサーバに自動インストールと設定をも発生しやすいという特徴を持ってい行います．開始後はインストール・設このようなニーズにこたえるべく，システム構築・管理を支援するさまざまな市販ツールが提供されています．しかしそれらは，特定ベンダのハードサーバN ウェアでのみ利用可能であったり，非常に高額であったりするため，導入のサーバ 3 サーバ 2 障壁となっています．初期構築を利用しつつ，NTT OSSセンタで蓄 OS インストール・設定ミドルウェアインストール・設定積されたOSSVERTの構築ノウハウサーバＭを最大限活用することで，インストーサーバ 2 テム構築省力化ツール「OSSVERT Smart Builder」の検討・開発に着手しました．環境変更設計作業ミスを減らすことに注力したシスサーバ 1 バージョンアップパッチ適用設定変更正常性確認ル・設定等の構築稼働の削減や人為的正常性確認に，OSS（Open Source Software）サーバ 1 設計そこで上記の課題を解決するため「構築する台数が多くて大変！」「工程，どこまで進んでたかな？」「インストール，もう終わったかな？」「次のサーバ，どれだっけ？」：サーバ台数に応じて，人的稼働が増大し，作業ミスが発生しやすい工程図 1 システム構築・管理の工程 26 NTT技術ジャーナル　2014.3 特集定が完了するまで全自動で行われるた数の記述方法が選択可能です．そのた働を削減します．め，作業者は端末操作を行う必要があめ利用者が記述の仕方に迷う状況が起またO-SBでは，さまざまなOS ・りません．また初期構築後に，意図しこり得ることから，O-SBでは記述要ミドルウェアをすぐに構築できるよない環境変更等が誤って行われた場合領を策定・提供することで利用者の稼う，Puppetマニフェストテンプレーに備え，O-SBサーバが構築対象サーバを正常な状態に維持する機能もあり構築対象サーバ「物理構成」ます． ■技術的なポイント O-SBサーバと構築対象サーバとの間の動作シーケンスを図 3 に示します．O-SBの技術的な特徴としては，以下の 2 点が挙げられます． Puppet 築管理で利用実績のあるOSS （Puppet＊ 1 ，Kickstart＊2）を利用していること ②　OSSVERTの構築ノウハウを Puppetによる構築 OS設定ミドルウェアインストール Kickstart Kickstartによる構築 OSインストール O-SBサーバ筐体 ①　金融，情報，SNSなどさまざまな分野の実システムにおける構凡例ミドルウェア設定ミドルウェア設定ミドルウェア設定 OS設定 OS設定ミドルウェアインストールミドルウェアインストール OSインストール OSインストール VM#1 VM#2 利用していること構築対象サーバ「仮想構成」 OS設定 OSインストール VM#3 筐体この中で特に重要な，Puppetと図 2 O-SBの具体的な動作イメージ OSSVERT（OSs Suites VERified Technically）について，詳しく解説します． PuppetはOSSのシステム自動設定管理ツールです．利用者が「マニフェ O-SBサーバ Kickstart スト」と呼ばれる設定ファイルに，シ IPアドレス要求 dhcp ステムを「このような状態にしたい」内容を記述しておくと，Puppetマスターがマニフェストを読み込み，構築対象サーバに置かれたPuppetエー構築対象サーバ IPアドレス取得 TFTPサーバIPアドレス取得ブートローダ要求ブートローダ取得 tftpserver Kickstart設定ファイル要求 Kickstart設定ファイル取得ジェントを通じてシステムを「そのよ BIOS PXE BIOS ブートローダカーネルうな状態」になるように設定します（図 4）．これにより，ミドルウェア等の yum OSインストールファイル取得インストールおよび設定，OSの各種 httpd 設定などが可能です．ただしマニフェストは非常に柔軟な記述ができるため，同じ設定を行う場合であっても複＊1 Puppet：オープンソースのシステムコンフィグレーションフレームワークとツールセットであり，UNIX系システムの設定管理が可能です．＊2 Kickstart：Red Hat LinuxやFedora Coreなど，Red Hat系OSのインストールを自動化する仕組み． OSインストールファイル要求 Puppet Puppet マスターマニフェスト問合せ依頼マニフェスト問合せマニフェスト取得・反映 OS Puppet エージェント図 3 O-SBサーバと構築対象サーバ間の動作シーケンス NTT技術ジャーナル　2014.3 27 IT基盤のTCO削減に寄与するオープンソースソフトウェア活用推進技術トを提供しています．これらのテンプ検証し，インストール手順書，環境定正が必要なパラメータ群について，テレートは，上記の記述要領に加え，義書（推奨設定値一覧），検証報告書ンプレートのどこを修正すれば良いか OSSVERTのノウハウに基づき作などの技術資料にまとめたものです．をまとめたドキュメントも提供してい成されています．OSSVERTとは， O-SBでは，このOSSVERTのインスます． Web3層のシステムを構築する場合トール手順書と環境定義書に従い，記に，NTT OSSセンタが推奨するOSS 述されたマニフェストを利用することスタックのことです．OSSVERTは，で，正常動作実績のあるシステムの自 OSSVERT構成の物理サーバ 6 台ベンチマークアプリを含めたWeb3層動構築を実現します．ただし実際の利（Webサーバ，アプリケーションサーシステム全体としての挙動（性能，可用シーンでは，一部の値（アドレスなバ，データベースサーバで構成され，用性，長時間安定性，保守性など）をど）を変更する必要が生じるため，修それぞれを二重化や冗長化したもの）適用例と効果のWeb3層モデル構築を対象に，効果測定を行いました．構築の手順は，購ユーザ作成して！ user リソースこのパッケージを入れて！ package リソース設定ファイルはこの内容でつくって！ ﬁle リソース入初期状態の物理サーバ 6 台に対し物理結線を施した状態からスタートし，① OSのインストール・設定（ドライバ含む），②各種ミドルウェアのマニフェスト Puppet言語インストール・設定，の 2 ステップで実施しました．一般的な技術者が手作 Puppetマスター XXがあることを確認してこのコマンドを実行して！ exec リソース業で約60時間を要するところ，O-SB を活用することで約 8 時間（手作業の 7 分の 1 ）に短縮できることを確認しました．この 8 時間には， O-SBサー Puppetエージェント Puppetエージェントバ自体の構築時間や，構築したい内容を記述する定義ファイル（マニフェスト）の作成も含まれています．そして同じ環境を再度構築する場合（ 2 回目図 4 Puppetの仕組み以降）は，O-SBサーバを流用するこ 59 1.5 O-SBサーバ準備手動構築トータル：60.5 h O-SB定義ファイル準備手動作業 1 3.2 2.8 O-SB （初回）手動構築比： 7 分の 1 トータル：8.0 h 手動作業 2 O-SB自動構築 1.6 0.4 O-SB （ 2 回目）手動構築比：30分の 1 トータル：2.0 h 1.6 0.4 0 20 40 60 手動作業1：OS・ミドルウェアのインストールおよび設定作業手動作業2：ストレージ設定，クラスタ設定，Puppet エージェントのアンインストール作業図 5 O-SB活用による時短効果 28 NTT技術ジャーナル　2014.3 80 (h) 特集コラム OSSVERT Smart Builder への期待 NTT西日本　技術革新部　ITイノベーション部門　IT統合基盤担当部長　小島一弘 NTT西日本のシステム統合基盤は，さまざまな社内情報システムを収容する基盤環境であり，設計から運用までの業務をグループ内製で行っています．今後も本基盤のより一層のコスト削減，スピーディな構築の必要性が高まりますが，OSSVERT Smart Builderは， OSSを活用し，短期間で間違いのないシステムを構築できる技術であるため，構築コストの削減と作業品質の向上を両立できるソリューションとして，大きな期待を寄せています．表　O-SBでインストール・設定可能なソフトウェア群分　類 OS データベース製品名ため，さまざまな環境でのO-SB適用 PostgreSQL を想定した検討・開発を，今後進めて Oracle いきます． Tomcat OpenJDK JDBC HeapStats Webサーバ Apache mod_jk クラスタリングソフト Pacemaker ロードバランサ UltraMonkey-L4 とができるため，約 2 時間（30分の 1 ）で構築できます（図 5 ）．そして構築大していくものと考えています．この Red Hat Enterprise Linux JBoss EAP アプリケーションサーバい，ますますO-SBの利用シーンは増 ■参考文献（1）平川：“RHEL6で実践！誰でも自宅でクラウド構築（第 4 回）〜プロビジョニングサーバーの構築，” 日経Linux，2011年 7 月号，2011. （2）内川：“オープンソースを手際よく使うために ― OSSVERTの取り組み，” NTT技術ジャーナル，Vol.19，No.3，pp.60-62，2007．（3）豊田・奥村・角：“オープンソースソフトの導入を支援するOSSVERTの拡張，” NTT技術ジャーナル，Vol.23，No.8，pp. 8-13, 2011．今後の予定台数がさらに増えた場合をシミュレー O-SBにより構築可能なソフトウェションすると，O-SBは並列実行が可アは表のとおりで，OSSVERTの構能であるため，ネットワークやサーバ成製品の代表的なものを網羅していまのスペックにもよりますが，一定台数す．表のソフトウェアであれば，多少までは構築時間が増えないことも確認のバージョンの違いがあったとしても（後列左から）鈴木繁成/ 豊田裕晴/ 手塚博久テンプレートを活用することで，比較（前列左から）菅原亮/ 山田洋之以上のように，O-SBによるインス的短時間で利用者が望むソフトウェアトール・設定工程での時短効果を確認をインストール・設定するためのマニしています．そのほか，OSSVERT フェストを作成可能です．今回紹介したツールは，NTT OSSセンタ内でも日々の検証業務などで環境構築や環境変更作業に活用しており，その有用性は確認済です．また，O-SBの根幹を成すOSS 「Puppet」につきまして問合せサポートも実施していますので，ぜひ安心してご利用ください．しました．の設計ノウハウをマニフェストへ反映 NTT OSSセンタでは利用者向けしているため設計工程での検討稼働をに，「テンプレートの修正方法に関す削減できること，設定工程における人る研修」「 1 からマニフェストを作成為ミスを削減できること，インストーするための研修」などを用意していまル・設定工程中にオペレータの端末操す．加えてPuppetについては，問合作が不要なこと，などの効果も確認しせ窓口を用意し，サポートを行っていています．ます．システムのさらなる大規模化に伴 ◆問い合わせ先 NTT OSSセンタ応用技術ユニット TEL　03-5860-5055 FAX　03-5463-5491 E-mail　oss-contact lab.ntt.co.jp NTT技術ジャーナル　2014.3 29