パターン)や技術情報、アップデートなどをお知らせするAWS公式ブログです。本日は、株式会社クライムの鈴木様よりDBレプリケーションツールである、DBMotoについてご紹介頂きます。DBMotoはオンプレ・クラウド間の異機種間DBのレプリケーションにも対応しており、AWSでも今後の活躍が期待されるソリューションです。株式会社クライムシステム構成図:製品/ソリューション概要:DBMotoとはDBMotoはデータベース間レプリケーションツールです。主な特長としまして下記が挙げられます。使用用途DBMotoは下記の用途でご活用いただけます。※オンプレミス・AWS間の移行・連携や、AWS間同士の連携も可能ですレプリケーションモードDBMotoは下記の3つのレプリケーションに対応しております。リフレッシュ...最初に行うモードで全件転送します。ミラーリング...変更点のみを差分転送します。シンクロナイゼーション...変更点のみを差分転送します。双方向に対応しております。AWSへのレプリケーション検証DBMotoはAWSのEC2やRDSに対応しております。HANAへオンプレミスのOracleからレプリケーションを検証した結果を下記のブログに記載しております。WARPについてご紹介頂きます。WARP」は次の3つを特徴とする、あらゆるシステムのデータを連携するためのソフトウェアです。WARP」はこれまでAWSの各種サービスと積極的に連携し、多数の実績があります。Redshift)の活用を促進するためのRedshiftコンポーネントを新たに追加します。これによって、これまでより一層データ分析の活用の場を広げることができます。Redshiftを利用すると安価に大量のデータを分析することができます。今日では、分析したいデータは社内外、さらには多くの場合がAWS内外のクラウド上に分散しているのが実情です。WARP」を使うことによって、簡単にデータを収集しRedshiftに取り込むことができるようになります。WARP」を使った場合のメリットとしては以下の点が上げられます。かかるような作業でも、早ければ1日で実現できてしまいます。2.Redshift上でデータをフィルタリングRedshiftは巨大なデータを高速に分析するためのプラットフォームです。今は分析に必要なくても後々必要になるかもしれないデータも含めて、とりあえず何でも入れておくということがよくあります。必要なときに必要なデータがないと困りますからね。Redshiftとはいえ、データが大きくなれば処理も遅くなります。このようなとき、元データから必要なデータだけを分析用に切り出してデータ量を少なくしてから分析するようにすれば、処理時間を短縮できます。WARP」ではRedshiftCopyTableコンポーネントという機能を提供します。これを使うことで、それぞれの分析用途にあったテーブルを作成することが可能です。RedshiftCopyTableコンポーネントでは、SQLBuilderというグラフィカルにSQLを構築する機能も提供されています。SQLにあまり詳しくなくても、画面上で設定できるのでとても便利です。日々データはどんどん追加されますので、分析用のデータも常に更新しておかなければなりません。これを定期的に実行する仕組みを作るのも煩わしいものです。WARP」はスケジュールに応じて処理を定期的に実行する仕組みも持っていますので、画面操作だけで簡単に設定できてしまいます。3.キーの再設定Redshiftでは分散キーやソートキーをテーブル作成後に変更することはできません。変更したい場合はテーブルを作成し直す必要があります。これも、上記の分析用テーブル作成のときと同じように、RedshiftCopyTableコンポーネントを使うことで、元のテーブルからキーを変更したテーブルを簡単に作成することができます。先程と同様に定期的に実行することも可能です。用途に応じて分散キーやソートキーの異なるテーブルを複数準備しておくこともできますね。4.レポーティング機能Redshiftは各種BIツールとの連携も可能です。BIツールを利用するほど複雑な分析を必要としないことやライセンスを持っていないユーザーに結果をレポートとして配布するようなケースはよくあります。WARP」を使えば、Redshiftのデータも、通常のRDB連携と同様に検索機能を使うことができます。検索したデータをExcelに埋め込んで表やグラフとして表示したり、PDFを作成したりすることも簡単です。メールを送信することもできますので、定期的に関係者にメールでレポートを送ることだってできます。WARP」を組み合わせることで、利用の幅がどんどん広がります。これがノンプログラミングでできてしまうので、システム開発効率もアップ。時間がなくてできなかった、あんな分析、こんな分析にどんどんトライしてみてください。導入事例http://www.infoteria.com/jp/warp/case費用:導入までの費用についてはASTERIAマスターパートナー各社にお問い合わせください。JobCenter(日本電気株式会社)PSA酒徳です。JobCenterについてご紹介頂きます。オンプレのジョブ管理ツールとして実績のあるJobCenterのAWS対応についてお話頂きます。JobCenterは、きめ細かいスケジューリング機能とわかりやすいフロー機能で、お客様の業務運用を自動化するジョブ管理ツールです。この度、AWSのサービスをプログラムレスで簡単に制御できる部品(AWS制御部品)を提供開始しました。EC2インスタンスの起動、通常の業務バッチ処理の実行、EBSスナップショットの取得、EC2インスタンスの停止など一連の業務をフローで制御することができます。設定は簡単で、フローの中にAWS制御部品を配置し、インスタンスIDなどのパラメータを設定するだけです。instancesにも対応しているので、個々にシークレットアクセスキーやアクセスキーIDを登録する手間も省けます(もちろん個別に設定することもできます)。AWS制御部品は単にAWSのAPIを呼び出しているだけではなく、使い勝手がよくなるように複数のAPIを組み合わせて一連の処理をシンプルに実行できるようにしてあります。API実行結果をメール通知したり、後続の処理の引数として設定したりする事もできます(詳細は後述)。Driveサイトにて無料でお試しいただくことができますので、是非、ご体験ください。JobCenterを活用したAWSの自動化例や、活用のメリットをご紹介させて頂きます。稼動が無いシステム(開発/検証用途のインスタンスなど)は、夜間は停止し、業務開始時刻に起動させることで、無駄なコストを削減。インスタンスの起動・停止は、インスタンスID指定だけでなくタグ指定も可能なため、インスタンスの台数の増減時にフローを変更することなく運用が可能。週次や月次で処理量がわかっていれば、予めEC2インスタンのスペックを指定して起動させることで利用リソースを最適化。業務バッチ処理を実行後、サービスを停止して静止点を確保し、EBSボリュームのスナップショットを取得するという一連の流れを自動化。■スナップショットのいろいろな取り方3.柔軟なフロー制御とスケジューリング日付による処理の分岐、ファイルの待ち合わせなど従来から提供している各種部品で、きめ細かいフロー制御ができる。営業日を意識したスケジューリング(例:月初第5営業日、月末から5日前など)や、ジョブ実行予定日が休日の場合、前後にシフトして実行する(例:給与日25日が休暇の場合、前日に実行する)などの柔軟なスケジュール設定ができる。当日、急なスケジュール変更が発生した場合も、マスタスケジュールを操作することなくその日のスケジュールのみの変更も可能。詳細なフローの確認イメージ5.ダッシュボード作成したフローを、ダッシュボード機能を用いて、簡易コントロールパネルのような使い方ができる。実施させたいとう場合に、ダッシュボードを利用して、特定の制御機能だけをオペレータに提供することができる。JobCenterは、小規模なシステムから1日数十万以上のジョブを実行するような大規模システムまで、様々な業種、業務での実績があります。X」と連携することで、HAクラスタ構成をAWS上で組み可用性を向上させることもできます。JobCenterのAWS制御部品は、使い勝手よく利用頂けるように、いくつかのAPIを組み合わせて実装しております。ID"を指定してスナップショットを取得する際の内部的な動きを紹介します。ID"を元に[CreateSnapshot]のAPIを発行し、スナップショットを取得。抽出したIDを元に[DeleteSnapshot]のAPIを発行し古いスナップショットを削除。■スナップショット取得部品の動作イメージこれら一連の流れを1つの部品にパラメータを設定するだけで利用できるように作成しております。JobCenter内部で保存しており、Mustache形式のテンプレートエンジンを用いて内容を任意に加工して出力することができます。部品はURLをご参照ください。上記は直近の予定で、今後、お客様の声を元に部品の強化を図っていきたいと思います。「こんな使い方をしたいのでこのような部品を強化して欲しい」というご要望がございましたら、是非、お気兼ねなく、下記問合せ先にご連絡いただければと思います。Drive(無料お試しサイト):http://jpn.nec.com/websam/jobcenter/testdrive.htmlお問い合わせ先:以下サイトよりお問い合わせください。株式会社シマンテック)PSA松本です。今回はSymantec社の星野様にAWSでNetBackupを利用する際の構成例などをご紹介頂きます。製品/ソリューション概要:シマンテックのNetBackupは「AWSとの連携によりバックアップを効率化させたいお客様」に対し、要件に応じて3つのソリューションを提供します。ソリューション1:AWS内完結型NetBackupは、EC2インスタンス上での動作をサポートします。従って、EC2やEBSを用いたAWS内で完結するシステムをお持ちのお客様は、従来のデータセンタ内に導入する場合と同じように、AWS内にNetBackupを導入してお使い頂けます。バックアップの格納先としては、コスト優先であればS3、リストアのスピードを優先するのであればEBS、という観点で選択する事ができます。S3を選択することが出来ます。S3にバックアップを行う際は、独自の暗号化と重複排除技術により、安全且つネットワークに与える負荷を最小限に抑えて、データを転送します。これにより、バックアップデータの格納先を調達する手間から解放され、コストの効率化が実現できます。災害などでお客様のデータセンタが長時間ダウンしてしまった場合は、EC2上に代替サーバを構築し、そこにデータをリストアする事が可能です。これにより、安価で且つ短納期に災害対策サイトを構築することができます。VTLをサポートします。VTLを構築頂くだけで、それを通常のVTL装置として認識し、バックアップデータの格納先として使用することが出来ます。Glacierにアーカイブする事も可能です。自社データセンタ内でNetBackupとVTLをお使いのお客様は、このソリューションに切り替える事で、VTLに関連するコストを大幅に圧縮する事ができます。システム要件/利用するAWSサービス:・対応OSWindows、Linux、UNIXの主要なOSに幅広く対応。上記ソリューション2を導入し、バックアップ媒体にかかるコストを大幅に削減。DR目的で従来行っていた遠隔地へのバックアップデータ複製も不要になり、DR関連コストの削減も同時に実現。費用及びお問い合わせ先:NetBackupは代理店様経由での販売とさせて頂いており、価格はオープン価格ですので、以下のサイトより販売代理店様を検索の上、お問い合わせください。(NTTソフトウェア株式会社)PSA松本です。今回はAWS上でオールインワンのBIパッケージを提供しているNTTソフトウェアさんからのご紹介です。Services(以下、AWS)上でオールインワン提供するクラウド型BIサービスです。ホームページのお問合せフォームよりお申し込みください。Redshift用モデル4タイプをご用意しています。本日は、ウイングアーク1st株式会社の中土井様よりBIツールである、MotionBoardについてご紹介頂きます。お客様のオンプレミス環境にある様々なデータソースにノンプログラミング接続し利用者のPCやモバイル上に様々なグラフや情報を表示する、情報活用ダッシュボードです。企業内で利用される様々なデータを意思決定に必要な情報に変え、分析やレポートを出力するBIツールです。自社で開発した「地図機能」を標準で搭載しています。データを地図上に表現することで、今まで見えなかった情報が直感的に可視化され、現場の皆様により深い分析をサポートします。各種業務におけるExcelの利用は日々の業務に欠かせません。業務に利用しているExcelデータの活用(可視化・分析)を考慮した場合、手動でのデータ加工等が必要不可欠となります。業務で利用しているExcelフォーマットのまま、データの可視化や分析が実現できます。EC2のインスタンスを構成ください。製品紹介に関しては、下記サイトをご参照ください。http://www.wingarc.com/product/motionboard/お問い合わせ先:弊社下記お問い合わせサイトからお問い合わせください。Analyticsについてご紹介頂きます。Analyticsは、大容量データを高速に分析し、新しい「気づき」を得られるデータ・ビジュアライゼーション・ツールです。製品の特徴は以下のとおりです。安価なライセンス体系サーバー能力課金で4コア(8vCPU)向け初年度952,000円(税別、保守費用含)のみで、ユーザー数不問です。最小4コア(8vCPU)から開始し、データ量やユーザー数が増加した場合、4つ以上のEC2インスタンスによる並列分散アーキテクチャ構成も可能です。この場合、インスタンスを追加していくことで上限なく拡張可能です。分析対象データは全てインメモリにロードしてから処理します。並列分散アーキテクチャを適用することで、データ容量とユーザー数が増加してもリニアにパフォーマンスを向上させることが可能です。PostgreSQL等)上のテーブルやEBS上のCSVやExcelファイルを簡単にインメモリ分析エンジンにアップロードすることができます。多種多様なビジュアライゼーションデータ容量に制限されることなく、レポートやダッシュボード作成、データ探索、高度なデータ分析が可能であり、幅広い用途、ユーザー層でご利用頂けます。セルフサービス型BI直感的かつ簡単操作で非定型な集計・分析・結果のビジュアライズ、そしてレポートやダッシュボードの作成までをビジネスユーザー自身で実施することが可能なセルフサービス型BIです。)、相関分析(数多くの項目間の関係性を洗い出す)、ディシジョンツリーによるデータマイニングを用いて、アナリティクスに基づく意思決定のパワーを業務に適用することができます。2012AWSサービス:EC2AWSでの導入実績:国内1社(大手小売)、WWで10社以上。Lenovo様での適用例:http://www.sas.com/ja_jp/news/press-releases/2014/august/2014-08-28-amazon-cloud-analytics-jp.html世界トップのPCメーカーですが薄利多売型ビジネスモデルのため、内部業務の効率化と最適化に取り組む必要性がありました。Analyticsは製品品質の分析業務に適用され、様々なデータ項目間の関係性をビジュアルに高速に分析することで、時々刻々と変化する品質状況の可視化、品質問題のリアルタイムアラート検知に活用されています。ご参考)オンプレミスでの導入実績:国内100社以上、WWで3000社以上。2003のサポートを終了するアナウンスが出ているのはご存知かと思います。Import機能での移行も実施頂くことができるようになります。お客様の環境が継続してAWS上で稼働し続けるための技術的なトラブルシューティングの支援も提供致します(*1)。技術的な問題にたいしてデバック・トラブルシュートを試みますが、Microsoft社からのパッチ等の提供はされません。本プログラムは専用Webサイトから無償にて申し込み頂くことができます。詳しくはFAQ(日本語)をご覧ください。このサイトから本プラグラムに申し込み頂くことも可能です。ServerのAWSへの移行やアセスメント、アップグレードやセキュリティ対策などのソリューションを提供しているAPNパートナー様になります。今後も本投稿にソリューションを展開しているパートナー様を追加していきますので定期的にご確認ください。Servistaについてご紹介頂きます。1月17日に実施されたアプレッソ様主催IoTハッカソンでも利用したソリューションになります。ハッカソンの内容はこちらをご覧ください。Servista」は、システムの接続方法やフォーマットの違いを意識することなく、簡単にデータリソースを「つなぐ」ためのデータ連携ソフトウェアです。プログラミングの高い知識を必要としないGUI開発環境を提供し、各種データベースや様々なファイル形式のデータ、各種クラウドサービス、また各種ERPパッケージなどのアプリケーションといった様々なデータソースを手軽に接続出来るアダプタ機能を介してデータ連携・クラウド連携の自動化、開発コスト削減と業務の効率化を支援します。本日は、株式会社ネビラボの橋本様よりについてご紹介頂きます。1月17日に実施されたアプレッソ様主催IoTハッカソンでも利用したソリューションになります。ハッカソンの内容はこちらをご覧ください。CLOUD」を提供しています。センサデバイスからクラウド連携、データ分析まで一気通貫で行うことで、これまでのM2Mクラウドやセンサネットワークより圧倒的に簡単かつ迅速に利用できるサービスです。AWS上にすべてのシステムを構築することにより、センサデータのストリーミング処理やデータ分析の基盤としてEMRを利用するなど、用途に応じて様々なサービスの組み合わせが可能になりました。図書館センサを用いての,リアルタイム座席利用率調査として弊社のセンサとデータ処理クラウドを採用。情報がリアルタイムに得られるようになり、図書館のサービスを「マーケティング」の手法で改善するという取組が可能になった。採用事例2:ニシム電子工業株式会社ネットワークや設備の監視制御技術をパッケージ化した、ニシム電子工業様の「Megakiku(メガキク)」。BOXは、Megakikuへの連携も自動で行っています。CLOUDを経由して連携することにより、データクレンジング、データ加工した後のセンサデータを連携することができ、受け手側であるMegakiku側の負担を軽減も同時に実現しています。