JobScheduler ユーザカンファレンス 2016 東京日産コンピュータシステム様事例紹介

Copyright © 2016 TIS Inc. All rights reserved.

東京日産コンピュータシステム様

JobScheduler導入事例のご紹介

IT基盤技術推進部

OSS推進室池田大輔

Copyright © 2016 TIS Inc. All rights reserved. 2

アジェンダ

❏ JobSchedulerの採用に至った経緯 ❏ 導入までのプロセス ❏ JobScheduler導入環境について ❏ JobSchedulerで実践しているジョブ管理 ❏ JobScheduler運用における工夫ポイント ❏ JobScheduler採用のメリット ❏ JobScheduler利用時の課題・今後の展開 ❏ TISから提供するサポート


自己紹介

池田大輔 (いけだだいすけ) TIS株式会社 OSS推進室

TISが提供するサービス・JobSchedulerの構築のご支援・JobSchedulerの保守サービス・JobSchedulerのレクチャー等

Copyright 2016 Tokyo Nissan Computer System CO., LTD

1

会社案内

http://svcsa/xoops/


会社案内

2

最も安心してIT基盤を任せられる企業というビジョンのもとに

所有

利用

【弊社の強み】所有型から利用型までお客様ITに関わる様々な課題を解決

・IBM第1期認定特約店として早期から事業を開始、ITインフラの豊富な構築実績より、14年連続上位プレミアムパートナーとして、様々なパートナー・アワードを受賞・日産自動車様、関連EDIベンダー様との強い結びつきより、日産自動車様を中心としたEDIソリューションと、１０年に渡るサポートを提供できるEDIのベストパートナー・設立当初から親会社のホスト・コンピュータの運用代行を行なってきた知見から、様々なITに関わる運用をサポート・お客様の運用の煩わしさを解放するため、2002年よりデータセンター事業開始・データセンター事業を中核とした様々なクラウドサービスを提供

運用代行

商号東京日産コンピュータシステム株式会社

創立 1989（平成1年）年3月3日

資本金 8億6,774万円

上場証券取引所東京証券取引所JASDAQ

事業所本社：東京都渋谷区恵比寿1-18-18 東急不動産恵比寿ビル3階江東事業所：東京都江東区東砂7-19-31 東京日産江東ビル2階

株主数 988名（2016年3月末現在）

主要株主日産東京販売ホールディングス株式会社

取引銀行三井住友銀行りそな銀行みずほ信託銀行

役員

代表取締役社長吉丸弘二朗常務取締役佐藤浩之取締役赤木正人取締役外川孝彦取締役北村章彦取締役桜井英一常勤監査役平尾彰監査役小川和洋監査役松尾憲治

売上高 65億3,000万円（2016年3月実績）

従業員 141名（2016年3月末）

URL http://www.tcs-net.co.jp

事業内容情報システム関連業務（データセンター東京都 2箇所）

認定取得 ISO20000 ／ ISO27001

http://svcsa/xoops/


弊社沿革

3

1982年 3月東京日産自動車販売株式会社の新規事業として、日本アイ・ビー・エム株式会社初となる特約店事業を開始

1989年 3月東京日産自動車販売株式会社コンピュータ事業部を分社独立東京日産コンピュータシステム株式会社設立（略称 TCS）

2002年 7月データセンター事業開始

2003年 9月 PARTNERヘルプデスク開始

2004年 3月ＪＡＳＤＡＱ市場上場

2011年 12月第2データセンター稼動

2013年 4月ビックデータビジネス参入

2013年 6月サプライヤー様向けEDIソリューション『EXシリーズ』発表

2015年 2月 IBM Beacon Awards 2015 Finalist 受賞

2016年 2月 IBM Choice Awards 2016 受賞

IBM Beacon Award （グローバル）

２０１２年 IBM Beacon Award Finalist受賞（Storage部門）

２０１４年 IBM チョイスアワード受賞（マーケティング部門）

２０１５年 IBM Beacon Award Finalist受賞（Cloud Storage部門）

２０１６年 IBM Choice Award 受賞（ High-Performing Solution Provider)

IBM Partner Award

２０１１年 IBM エクセレント・パートナー・アワードJapan受賞

２０１２年 IBM エクセレント・パートナー・アワードJapan受賞 IBM System Storage Specialty パートナー認定

２０１３年 IBM エクセレント・パートナー・アワードJapan受賞

２０１４年 IBM エクセレント・パートナー・アワードJapan受賞

プレミアムビジネスパートナーは２００３年より１３年連続認定

http://svcsa/xoops/


4

×

http://svcsa/xoops/


東京日産コンピュータシステム様とTIS

エンドユーザ様

東京日産コンピュータシステム様

TIS

プロダクトサポート提供(2015/11～)

構築・提供


JobScheduler採用に至った経緯


これまでのジョブ管理

IBM AS/400 ホストサーバ

IBM AS/400 IAサーバ


A-AUTO

他のツール1

他のツール2

ジョブ管理ツール管理対象システム


これまでのジョブ管理




A-AUTO

他のツール1

他のツール2


統合管理による全体最適が必要


導入までのプロセス


JobSchedulerが優位と感じたポイント

機能が豊富 (イベントハンドル、ファイルトリガー、パラメータ引き渡しなど)

ジョブを様々な言語で書ける (shell, VBscriptなど)

ワールドワイドでの豊富な実績 HyClops JobMonitoring

を利用することでのZabbix連携可

AD連携が可能 (Linux標準機能を利用)


HyClops JobMonitoring

【参考】

ZabbixとJobSchedulerを連携するツール 3つの機能

1. ジョブの失敗状況をZabbixに連携 2. ジョブの実行処理時間情報をZabbixに連携 3. ジョブ実行時にZabbixのトリガー条件式を動的変更

公式サイトURL: http://tech-sketch.github.io/hyclops_jm GitHubリポジトリ: https://github.com/tech-sketch/hyclops_jm

平常時のCPU負荷

Job実行時のCPU負荷

閾値

閾値 Job

http://tech-sketch.github.io/hyclops_jm

https://github.com/tech-sketch/hyclops_jm


導入に向けての事前検証

Windows端末からの完全操作可能か

A-AUTOと連携可能か

・Samba/Winbind、FTPでのジョブ定義登録・LDAPやWebDAVによるAD連携

・他のジョブ管理ツールとの柔軟な連携の設計

●通常運用において、Windows端末からの操作で完結可能 ● AD認証も対応可能 ●スクリプトやLinux標準機能の活用により他ツールとの柔軟な連携設計が可能


検証～本番導入

検証活動検証対象は2製品・JobScheduler ・他のOSSのジョブ管理ツール実施項目

・ジョブの作成・実行・修正・外部連携(API経由でのジョブ実行等) 期間

・約2ヶ月の検証

本番導入期間は約3ヶ月


JOEからのジョブ定義ファイル連携

【参考】

JOE xml

FTP、SFTP、WebDAV ・都度アップロード可・保存時自動アップロード可

xml

作成した定義はローカルのディレクトリに保存

マウントして同期させる形も可能

JobScheduler Engine

つまり、XMLのファイルがEngineのLiveフォルダ上に展開されれば設定反映完了


JobScheduler導入環境について


JobScheduler導入環境構成

開発用

Engine: JobScheduler ver. 1.10.1 OS: CentOS 6.7(64bit) DB: MySQL

本番用

DB

DB

Engine: JobScheduler ver. 1.10.1 OS: RHEL 6.7(64bit) DB: MySQL

VMware上の仮想マシン

①

Universal Agent: ver. 1.10.1 OS: Windows 2012R2

ジョブ実行先サーバ 2,30台

①開発・本番間rsyncによるクロスバックアップ

・ジョブ等の各種定義情報(XMLファイル) ・ジョブ実行用スクリプト・ジョブ実行ログ・監査ログ(samba/winbind,ftp等)

②VMwareの機能でのシステム全体のバックアップ

②

Universal Agent: ver. 1.10.1 OS: Windows 2008R2

③

Agentレス OS: CentOS 6.7


JobSchedulerで実践しているジョブ管理について


ジョブ管理運用の流れ - 開発者によるジョブ設定運用 -

ジョブの登録・変更

JOE Engine

liveフォルダ

Active Directory

xml

xml

作成・修正

FTP経由でのアップロード

開発者 PAM認証


ジョブ管理運用の流れ - システム管理者によるスクリプト配置 -

A-AUTO-JobScheduler連携用スクリプト配置

Engine

A-AUTO実行可能領域

Active Directory

samba/ winbind script

配置

認証

script

マウント済みフォルダ

システム管理者


ジョブ管理運用の流れ - 運用者によるジョブ実行状況確認 -

ジョブ実行状況確認

Engine

Active Directory

HTTPD (LDAP連携)

認証

運用者

JOC

A-AUTO

全体状況は A-AUTO管理画面で確認

詳細ログ等はJOC経由


ジョブ管理運用の流れ -ジョブ実行 -

ジョブの実行

A-AUTO スクリプト Standalone Job

ジョブ実行先サーバ JobScheduler Server

バッチファイル

・登録ジョブは同様の処理を行う１パターンのみ

・実行管理はメインツールのA-AUTO側で管理

・ジョブ呼び出し時の引き渡すパラメータにより実行自動化


A-AUTOとJobSchedulerの使い分け

A-AUTO JobScheduler

・全体のジョブスケジューリング管理・ジョブの異常終了情報の管理・運用担当者への異常状態の発報・ホスト系サーバへのジョブ実行に特化

・ジョブ実行先へのジョブ実行処理・ジョブ実行履歴管理・ジョブの振り分けの自動制御・IAサーバのジョブ実行を統合管理


JobScheduler運用における工夫ポイント


jobscheduler.shスクリプトによるXMLコマンド実行

A-AUTO スクリプト Standalone Job

ジョブ実行先サーバ JobScheduler Server

バッチファイル

【再掲】

jobscheduler.shスクリプトによるXMLコマンド発行による以下の処理自動化・ジョブの実行処理・ジョブの実行結果の確認

ポイント1


jobscheduler.shスクリプト

【参考】

JobSchedulerインストール時に標準で配置されるJobScheduler操作用スクリプト

JobScheduler Engineを起動

$ /opt/sos-berlin.com/…./bin/jobscheduler.sh start

xmlコマンドを実行してジョブ１を即座に実行

$ /opt/sos-berlin.com/…./bin/jobscheduler.sh command ‘<start_job job=”job1”>’


パラメータ引き渡しによるジョブ実行時の振る舞い制御

以下の設定項目をパラメータ化しジョブ実行時の動作を制御ジョブ実行時・処理実行結果の一時保存先ファイル名の自動生成・ログ保存先ディレクトリ情報ジョブ実行結果確認処理時・確認対象のジョブ実行タスクID

ポイント2

1種類のジョブですべてのコントロールを実現


Jobへのパラメータ引き渡し

【参考】

JobSchedulerは様々な方法でパラメータの引き渡しが可能

1. 固定で設定 2. 実行時に設定 3. JobChainのフロー中で動的に設定 4. APIを用いた自動設定

<job name="param_test">

<params >

<param name="param_1" value="100"/>

<param name="param_2" value="this is param_2"/>

</params>

<script language="shell">

<![CDATA[

echo "This is param_test job"

]]>

</script>

<run_time />

</job>


JobScheduler採用のメリット


統合管理の実現




A-AUTO

JobScheduler


口は一つ

バックエンドは高度に自動化

各種接続部分も社内ADとの連携に統合しセキュリティ面強化


JobScheduler利用時の課題・今後の取り組み


利用時の課題

・ナレッジ情報の日本語化対応不足 - Zabbixのようなコミュニティベースでの活発な情報交換が少ない

・AgentがJavaベースのため

既存Javaアプリケーションとの共存の心配


今後の取り組み

・システム自体の拡大に向けた更なる有効活用・パブリッククラウド環境への適用


TISから提供するサポート


TISから提供しているサポート

・機能仕様に関するお問い合わせへの対応・トラブル発生時の状況分析と調査を中心に年間対応件数無制限にてサポート

具体的な対応例) ① jobscheduler.shのコマンド実行仕様についての問い合わせ対応 ②JOEからWebDAV接続時に発生したエラー原因の調査対応 ③ジョブ実行結果の戻り値の取得方法の提供等々

THANK YOU

本件に関するお問い合わせ先

TIS株式会社 OSS推進室

OSSサポートサービス担当

03-5337-4588 [email protected]

Technology

JobScheduler ユーザカンファレンス 2016 東京日産コンピュータシステム様 事例紹介

JobScheduler ユーザカンファレンス 2016 東京日産コンピュータシステム様事例紹介