Logi COMPOSERを試す！

14838 ワード
Realtime MemSQL Visualization BI Zoomdata BI テキストリンク

そして、ZoomdataはCOMPOSERになった・・・

かなり以前に、インタラクティブなデータ可視化を、マルチデータソースで実現出来るZoomdataなる製品に関して、数回に分けた検証記事を投稿させて頂きました。その後このZoomdata社は、業界大手のLogi Analytics社に買収され、双方の製品の良い所取りのハイブリッド・ソリューションとして、名前をCOMPOSERと新たに変えて市場投入されました。また、幸いにもLogi社のご厚意により、フル機能の評価版を手元に頂く事が出来ましたので、今回から数回に分けてLogi COMPOSERについての検証記事を書いて行きたいと思います。

では、取り急ぎ最初の検証作業を・・

基本的には、Zoomdataのコア部分をエンジンに採用した仕組みになりますので、普通に旧Zoomdata的に使って行く事も可能ですし、可視化ソリューションのエンベデッド領域において長年実績を積み重ねてきたLogi社のコンセプトも、非常にシナジー効果方向に融合していますので、Zoomdataだけでは実現できなかった世界も利用出来るように進化しています。
また、ユーザ領域（一般ユーザとして、可視化チャートの作成やダッシュボードの作成等を行う）に関しては、既に国際化対応が済んでいますので、所定の手続きを行えば簡単に日本語対応にする事が可能です。

今回は、管理者作業と一般ユーザ作業を合わせて行える様に、COMPOSERの管理者アカウントであるadminで検証を行って行く事にします。ログインが無事に成功すると上記の画面が出てきますので、まずはデータ環境との接続設定を管理者権限で実施する事にします。コネクションを選択すると、環境で利用できるデター環境との接続設定画面に移行します。実際にはいきなりソースメニューから以降の設定を行う事も可能ですが、基本的な情報のテンプレートを作成する事が出来ますので、今回はこの作業から検証を開始してみることにしました。

画面の右上にあるコネクションの追加を選択すると、利用可能な項目のメニューが表示されます。（ここで、今回検証に使うMemSQLやMySQL等のコネクション等に関して、JDBCドライバーの後付け作業等が必要な接続形態が有りますので、インストール後に忘れずにそれらの事前作業を実施しておいてください。手順は基本的にZoomdata時代と同じになります）

今回の検証では、まず初めにMemSQL上のテーブルに関しての可視化を行ってみますので、メニューからMemSQLを選択して必要な項目を設定していきます。

記述する内容に関しては、Zoomdataと同じになりますので、それぞれの項目を間違い無いように記述していきます。

jdbc:mysql://xxx.xxx.xxx.xxx:3306/<データベース名>
# MemSQLはMySQLと同じJDBCインターフェースロジックで動作できます。

記述に問題が無ければ、最後のValidateを選択します。

無事にコネクタの登録が出来ました。
同様にMySQLのコネクション設定も行ってみます。

実際のデータとの連携設定・・・

最初の画面に戻って、今度はソースを選択します。このソース設定で可視化対象のデータをエンジンに接続する作業を実施して行きます。

まず初めにデータソースの形式を選択します。

ここでは、MemSQL上に展開されるデータの可視化を検証しますので、MemSQLをメニューから選択します。

ソースの名前を適宜設定し、画面右下にあるNextを選択します。

利用するソースの接続情報を設定する画面に移動しますので、先ほど事前に登録しておいたMemSQLを左側のメニューから選択します。（ここで、直接的にソース単位で真っ新の状態から登録していく事も可能です）

パスワードはセキュリティーの関係上、改めてここで入力する必要がありますが、事前登録の情報を使ってターゲットのデータベースの情報が表示されるので、今回は事前に作成しておいたRTS_JP_Table02を選択します。

この状態では、カラムのみの情報しか入手出来ませんので、プレビュー領域にサンプルデータは表示されませんが、今回の検証ではこの空っぽの状態に対して、ランダム無作為にPythonのFaker機能を使ってデータを生成し、そのデータを高速にMemSQLに挿入していく過程をライブモードでリアルタイム可視化していく事にします。
右下にあるNextを選択します。

各カラム情報が出てきますので、此処では時間情報（タイムスタンプ）のみJSTに変更しておきます。


画面右下のNextを選択し、次の画面に移動します。

Zoomdataと同様に、此処でかなり細かいリフレッシュ関連のタイミング設定が出来ますが、今回の検証では特に触りませんので、ここはそのまま右下のSave & Nextを選択します。

最後に時間軸関連の設定が出てきますので、Live Modeの項目をONにします。

ライブモードは「今より”ほんの少し前”」を取り扱いますので、時間範囲を今日にしておきます。

最後に画面右下のFinishを選択してソースの設定は終了します。

COMPOSERのライブモードについて・・・

以前のZoomdataでは、データのライブモード可視化に関しての敷居が”それなり”に有ったのですが、Zoomdataの後半バージョン位から、その実現に関する条件がかなり緩和されてきており、条件が許せばミリ秒単位（TIMESTAMP(6)の世界ですね・・）でのライブ更新が実現出来るようになっています。今回の検証で使った暫定的なMemSQL上でのテーブル定義も非常にシンプルな形式になっていて、ユニークな情報としてIDとTSを設定し、その情報を合わせてプライマリーキーとしているだけです。
勿論、時間情報が無ければ流石のCOMPOSERでもライブモードとして時間処理が出来ませんので、ユニークな一意の時間情報を含めたキーを設定すれば、殆どのケースの場合誰でも非常に簡単にライブモードでの可視化を実現出来るようになります。

CREATE TABLE IF NOT EXISTS RTS_JP_Table02(
       id         INT AUTO_INCREMENT, 
       ts         TIMESTAMP, 
       Category   VARCHAR(20), 
       Product    VARCHAR(20), 
       Price      INT, 
       Units      INT,
       Card       VARCHAR(40), 
       Number     VARCHAR(30),
       User       VARCHAR(20), 
       Zip        VARCHAR(10), 
       Prefecture VARCHAR(10), 
       Address    VARCHAR(60), 
       Tel        VARCHAR(15), 
       Email      VARCHAR(40),
       PRIMARY KEY(id, ts)
       );

では、簡単な可視化を実施します・・・


ホームに戻ってダッシュボードを選択します。

左上の新規を選択します。

ダッシュボードの作成画面になりますので、右上のメニューからチャートの追加を選択します。


先ほど設定したデータソースを選択します。（今回は、此処で事前に作成しておいたPythonベースの日本語による自動データ生成ツールを起動し、先ほど作成しておいたMemSQL上のターゲットテーブルにランダムなタイミングで連続したデータ挿入を開始しておきました）

可視化したいタイプのビジュアル形式を選択します。

とりあえず、カラム列で最初に引っかかった情報で可視化チャートが作成されます。

チャート下部にあるグループを選択して、時々刻々と変化していそうなカラム情報に変更します。

同様に幾つかの組み合わせと可視化パターンを組み合わせてダッシュボードを作成してみます。
画像的には動きが無いので、一見普通のチャートが並んでいる・・・と思われるかもしれませんが、実際には最小で秒単位（逆に見にくくなるので、敢えて無駄な時間稼ぎを入れてデータ生成をしています）に更新が行われ、時々刻々と棒グラフの高さが変わったり、順位が移動したり、県名の表示位置・大きさ等が変化する、ライブモードでの可視化ダッシュボードになっています。

少しデザインを変更してみます・・・

右側のチャートが同じ系列の色味を使っていますので、少し見栄えが悪いかもしれません。そこで下側のチャートの配色をサクッと変更してみようと思います。

チャート右上の...を選択してメニューを呼び出します。

カラー関連の情報設定を呼び出します。

テーマからの継承を外して色を変更してみます。


この様に、各チャート毎に細かな設定が出来るようになっていますので、必要に応じて変更を行っていけば、かなり使い勝手の良いダッシュボードが誰でも作れる様になると思います。

最後に、ラジアルメニューをご紹介しておきます。

先ほどのチャート上で、ラジアルメニューを呼び出す事で、幾つかの作業をそこから引き継いで行けるようになっています。先ほどの例では、標準構成で表示されるメニュー例になりますが、例えば詳細を選択すると

の様に、そのチャート項目をドリルダウンしたような情報を高速に表示させる事も可能です。

最後に、少しデザインを変えて「データの挿入と同時に可視化を行う」ライブモードのダッシュボードを紹介しておきます。

右下にRawテーブルを表示しましたので、データベース側が空っぽの状態からデータ挿入が開始されると、秒間隔（最小ではミリ秒まで可能）での自動更新が始まります。左上の折れ線グラフは、分間隔での描画（細か過ぎて良く判らないグラフになりますので・・）設定ですので、最初の1分が過ぎると線画を開始します。

また、データの自動生成と挿入間隔は、実際の状況をイメージし易くするために、意図的にランダムな秒間隔を取る様にしてあります。

今回のまとめ

今回は、非常に駆け足になりましたが、Logi COMPOSERに関する基本的な検証を行ってみました。
基本的な特徴としては、以前紹介・検証を実施したZoomdataの進化系になりますので、インタラクティブに利用者が自分の好みでデータ可視化環境を構築でき、その更新速度として最新版ではミリ秒単位での取り扱いまで可能にしています。
また、ライブモードでの利用も進化しており、基本的なSQL経験があれば非常にシンプルな設定で時々刻々と更新される情報を、目の前で普通に可視化出来るようになりました。
出来ない事と言えば、高度な数学演算を前提とするような、バッチ志向の深度解析系の処理がそのままでは出来ないという点になりますが、ここは逆にテーブル単位でR等の解析エンジンと連携させ、その結果を時間情報と一緒にテーブル向けに出力させれば、ライブモードや時間情報を遡って再生させる等の柔軟な時間処理機能を活用して、時系列での結果に関する可視化と、それらを成立させる周辺情報（計算等に使った元の情報ですね・・）を一つのダッシュボード上に見やすく表現し、そこからより高度な洞察やアイディア、戦略やビジネス判断を創出させて行けると思います。

データは過去の反省分析ではなく、今を変えて未来を創る為に活用される・・・

そんなDx時代のリアルタイム・データ可視化環境として、Logi COMPOSERの存在意義は益々高まっていくかもしれません。

次回は、もう少し突っ込んだ使い方を幾つか検証してみたいと思います。

謝辞

本検証は、Logi Analytics社より検証環境利用許可を提供して頂き実施しております。また本内容とLogi Analytics社の公式ホームページで公開されている内容が異なる場合は、Logi Analytics社の情報が優先する事をご了解ください。