先日5月8日、品川にてオープンソースBI/BA/DB製品の紹介セミナーを開催いたしました。
今回も大変多くのお申し込みをいただき、おかげ様で満席となりました。

弊社セミナーでは現在こちらの製品をご紹介しております。
・Pentaho(BI)
・Jedox(BI)
・Infobright(DB)
・Rapid-I(BA)

多くのみなさまがBI製品にご関心を持たれて参加いただいていますが、
合わせてご紹介するデータベース製品のInfobrightにもご興味を持って
お帰りになることも多かったようです。
こちらの製品はBI製品と併用する際パフォーマンス上の相性がよく、とりわけ
Big Data、分析用データベースといったキーワードにご関心のある方にはお勧めの内容です。

2月から新しく提供を開始したJedox(BI)もラインナップに加わリました。
Excelに近く親しみやすいためスモールスタートも可能なJedoxと、より大規模で機能の豊富なPentahoをセミナー会場で是非ご覧いただければと思います。


セミナーでは各製品の機能・価格・事例の説明やデモンストレーションをメインに行なっており、セミナー終了後の個別でのご質問時間もご好評をいただいております。

2012_05_08_13_31_40.jpg

当セミナーは月に1度程開催をしており、
次回の開催は2012年6月5日(火)です。
Ustreamでの配信もございますので、会場と併せてご参加をお待ちしています。

□セミナー詳細情報


★Enjoy our seminar★
KSKソリューションズ Pentahoチーム

本日4月5日、品川にてオープンソースBI/BA/DB製品の紹介セミナーを開催いたしました。
今回も大変多くのお申し込みをいただき、おかげ様で満席となりました。

弊社セミナーでは現在こちらの製品をご紹介しております。
・Pentaho(BI)
・Jedox(BI)
・Infobright(DB)
・Rapid-I(BA)

Infobrightも詳細な説明とデモをおこなっています。
Big Data、分析用データベースといったキーワードにご関心のある方にはお勧めの内容です。

2月から新しく提供を開始したJedox(BI)もラインナップに加わリました。
Excelに近く親しみやすいためスモールスタートも可能なJedoxと、より大規模で機能の豊富なPentahoをセミナー会場で是非ご覧いただければと思います。


セミナーでは各製品の機能・価格・事例の説明やデモンストレーションをメインに行なっており、セミナー終了後の個別でのご質問時間もご好評をいただいております。

2012_04_05_13_45_48.jpg

当セミナーは月に1度程開催をしており、
次回の開催は2012年5月8日(木)です。
Ustreamでの配信もございますので、会場と併せてご参加をお待ちしています。

□セミナー詳細情報


★Enjoy our seminar★
KSKソリューションズ Pentahoチーム

本日、Infobright社のVP Paul Desjardins氏が来日し、ミーティングとお客様訪問をしました。
http://www.infobright.com/Management-Team/paul_desjardins/
infobright_logo-thumb-autoxauto.jpg


今月中にリリースされる新バージョン4.0.6で検索やロードが更に高速になる話や、ここにはまだ書けないその先のプランも聞いた上で、Infobright社世界最大の顧客であるJDSUの詳細情報を入手できました。
これらは日本のお客様にもとても役に立つと思います。

また、ユーザーであるMedicalDataVision社様を訪問し、これまで使用していたMySQLより10倍高速になったという報告を頂くと共に更に高速化したいというご要望に対応すべく貴重なディスカッションとアクションプランを策定しました。


私たちは"大量データを高速処理してビジネスに的確に利用する" 企業が今後大きく成長、成功すると確信しています。
ぜひInfobrightをお試し下さい
★Have a excellent performance DBMS★
KSK Solutions Infobright Team 





昨日と本日、東京国際フォーラム(有楽町)にて開催されているBigDataEXPOにInfobrightを出展しています。
昨日だけでも100名以上の方にご説明をしており、大変盛況です。
2012_02_28_16_57EXPO.jpg
BigDataの中心技術はHadoopをはじめとするNoSQLですが、BIツールを利用して分析するには現時点ではカラムストア型(列指向)RDBMSが最も適しています。InfobrightはHadoopとの親和性を高めるDLP(分散ロード機能)なども拡充していますので、ぜひご評価いただければと思います。

体験版はこちらからお申し込みが可能です。

★Have a nice big data analysis★
KSK Solutions  Infobright team

2月28日、29日に東京国際フォーラム(有楽町)にて開催される、BigDataEXPO(ビックデータEXPO2012春)にInfobrightを出展致します。
お時間がある方は、ぜひお立ち寄り下さい。

bigdataexpo.jpg

★Come and Join us at BigData EXPO★
KSK Solutions Infobright team

Infobright DLP

| | コメント(0) | トラックバック(0)
Infobrightに限らず、カラムストア型RDBMSで大容量のデータを扱う場合、ロード時間がボトルネックになることがあります。
Infobright Enterprise Editionではバージョンアップ毎に専用ローダーの性能を上げてきましたが、V4.0(現時点の最新はV4.0.5)からDLP(Distributed Load Processor)というオプションを用意しています。
DLP.jpg

DLPで実現する主な特徴は以下です。
・高速なロードスピード:リアルタイムに限りなく近い大量データの分析ニーズに対応します
・ロード中の検索も高速: 他のサーバーも利用してロード処理をするため
・Hadoop HDFS コネクタ: HDFSからデータを抜き出しInfobrightにロードします

Linux(RHEL,CentOS,Debian),Windowsで動作し、評価用試用版もありますのでぜひお問い合わせ下さい。
★Have a nice load performance★
KSKソリューションズ Infobrightチーム

弊社では、オープンソースBIソリューション「Pentaho」、 オープンソースBAソリューション「RapidMiner」を顧客様にご提供させて頂いております。
中でも低価格、低レイテンシで、なおかつ管理コストをかけずに大量データの分析を行いたい、
分析結果を迅速に表示したいと言う顧客様のご要望に対しInfobrightのご紹介をさせて頂いております。

今回のブログではカナダのInfobirght社が公表しております、海外でInfobrightをご導入頂いております海外企業様の事例をご紹介したく思います。

■顧客様名:米adMarketplace社様(http://www.admarketplace.com/

■顧客様の企業情報
米adMarketplace社様は2000年に設立され同社のサービスは
主要な検索エンジン上で掲載されるクリック課金型のオンライン広告
ソリューションをマーケッタ向けに提供を行っており、同サービスは
オンライン広告のフィルタリング、スコアリング、ターゲティング、価格決め、
分析を100万レコードを超えるリソースを対象におこなっております。
また、同サービスが一日に扱う検索データは25億検索と非常に規模の大きい
サービスとなります。

■導入背景:
同社が収益の主軸にしているオンライン広告ビジネスは、同ビジネスに
使用するシステムが生成するデータの特性が以下の様になります。

・膨大なデータ量(同社の場合は一日15億リクエスト)
・クリック課金形態を持っているのでクリティカル性が高い
・リアルタイム性が必要とされている
・膨大な履歴データ

同社のシステムは、検索エンジンより流れてくる膨大なデータから
検索語、クリック情報、広告サービスに付随するコンバージョン情報を
元に分析し、ROIの向上のための最適化を行っています。

■データストレージを導入にあたっての考慮事項
同システムの稼働開始時はMySQLをデータストレージに使用していましたが、
同システムの運用に付随し膨大なデータに対し、迅速なクエリレスポンス、
ストレージの確保に課題が露見してきました。左記、状況に対する解決策として
以下要件をデータストレージの選定の際の判断材料といたしました。

・大量データに対し迅速なクエリレスポンスが確保できる事
・データの保存に手間がかからず、なおかつ有効にディスクストレージを利用できる事
・もともとのシステムがMySQLを使用しているので、MySQL互換性が高い事

■導入効果:
MySQLおよびMongoDBに保存されるデータを一時間単位で集計を行い、結果を
Infobrightに保存する事により、より粒度の細かい大量データを分析し結果を元に
最適化を行うことが可能になったことにより、同サービスの利用者様に対し
高いROI率を還元することが可能になりました。

以下に詳細を記載いたします。

・MySQLのみの場合は集計結果の保持しか行えなかったが、Rawデータの保持も可能になった。
・データをInfobrightに保持することによりデータ量が10分の1に圧縮され2.7TB分のデータが
270GBのデータサイズになった。
・MySQLのみの場合、クラスタ構成の設定等でパフォーマンスの向上を図っていたが、左記設定等が必要なくなった。

英語表記になりますが、本ブログで記載いたしましたケーススタディの典拠元は
以下のURLにてご確認いただけますので、ご興味のある方は参照ください。

ウェブ版

PDF版

Infobrightは商用オープンソースDWHとなりますので、費用対効果の高さは高くご期待頂けるかと思います。

また製品の運用保守費用を含め、社内環境でご使用のRDBの性能に悩まれている
ご担当者様は一度弊社まで直接ご相談いただければ早急に課題解決を行える可能性が非常に
高いかと思いますので、こちらからご相談下さい。

また、体験版をご希望の場合は、こちらからお問い合わせ頂ければと思います。

☆Have a business insight from lightning data analysis ☆
KSKソリューションズ DWHチーム
本日、恒例のセミナーを実施させて頂きました。まだカラムストア型(列指向)RDBMSの知名度は高くないので、一人でも多くの方にそのパワーを知っていただければと思います。
2011_11_15_14_41_23.jpg

満員御礼ありがとうございます。
次回は1月10日(火)の予定ですので、よろしければこちらからお申込み下さい。
★Please join and enjoy our seminar★
KSK Solutions Infobright team
Infobrightではデータを迅速にロードする為にバルクローダを提供していますが、
本ブログでは、データ挿入方法および各ローダの特性、並びに商用・コミュニティ版
における差異について記述を行いたく思います。

典拠元URL:
Infobright Data Lading Guide (2011/11/15)

■データ挿入方法
1. INSERT構文発行によるデータ挿入(商用版のみ対応)
特徴:データを圧縮しながらのデータ挿入なので、トランザクション形式での
データ挿入は処理速度が遅くなる。

2.MySQLローダ(商用版のみ対応)
特徴:平分データおよびデリミッタが対象となりデータのロード速度は
INSERT構文の発行時と比較した場合は速度が向上する。

Infobrightでは以下コマンドの発行により本ローダの使用が可能になる。
> SET @bh_dataformat='mysql;

3.ETLツールを使用したデータ挿入(商用版およびコミュニティ版に対応)
バイナリ形式のInfobrightローダにも対応し直接データソースにアクセスを行う事が
可能になるが、コネクタの用意が必要になる。

4.Infobrightローダ:テキストデータ形式 (商用版およびコミュニティ版に対応)
平分データの読み込みを行いデータを挿入する。サポートするシンタックスを減少させる
事で上記3項より処理速度の向上が可能だが以下に注意事項※1を列挙します。

※1注意事項
・整形された平分データが必要になる。
・DATE型フィールドでは「yyyy-MM-dd」形式のみ使用が可能である。
・DATETIME型およびTIMESTAMP型フィールドでは「YYYY-MM-DD HH:mm:ss」形式
のみのサポートとなり、時間は24時間ベースでの記述が必要になる。(AM/PM形式には対応していない。)

Infobrightでは以下コマンドの発行により本ローダの使用が可能になる。
> SET @bh_dataformat='txt_variable';

5.Infobrightローダ(バイナリデータ形式)
Infobrightローダ:テキストデータ形式と比較した場合、約2倍の速度で
データのロードを行う事が可能になる。

Infobrightでは以下コマンドの発行により本ローダの使用が可能になる。
> SET @bh_dataformat='binary';

以下データ形式に対応

binary.JPG



今回はデータ投入機能の比較を行いましたが、サービスを運用保守面まで想定した場合、
商用版Infobrightの導入を推奨させていただいております。

またInfobrightは商用オープンソースDWHとなりますので、費用対効果の高さはご期待頂けるかと思います。
DWH構築用ソフトウェアのご検討を頂く材料として、商用版Infobrightの詳細説明が
必要なご担当者様は一度弊社まで直接ご相談いただければ有益な情報提供が可能かと
思いますので、是非一度こちらからご相談下さい。

☆Have a low latency with IEE ☆
KSKソリューションズ DWHチーム
弊社では、オープンソースBIソリューション「Pentaho」、 オープンソースBAソリューション「RapidMiner」を顧客様にご提供させて頂いております。
中でも低価格、低レイテンシで、なおかつ管理コストをかけずに大量データの分析を行いたい、
分析結果を迅速に表示したいと言う顧客様のご要望に対しInfobrightのご紹介をさせて頂いております。

今回のブログではカナダのInfobirght社が公表しております、海外でInfobrightをご導入頂いております海外企業様の事例をご紹介したく思います。

■顧客様名:英Bluefin Group社様(http://www.bluefingroup.co.uk

■顧客様の企業情報
英Bluefin Group様は、世界最大の保険業界企業の一つであるAxaグループの傘下グループで
主に、英国にて個人顧客および法人顧客向けに保険製品の提供を行っております。
同企業様は英国内に2500名の従業員並びに、英国以外では世界80ヶ国にビジネスを
展開しております国際色の強い企業様となります。

同グループを構成している企業様数は14企業様となっております。

■導入背景:
同グループを構成している14企業様はそれぞれ異なるデータストレージ並びに
データウェアハウスを所持しており、左記データウェアハウス群の統合を行う事
並びに、粒度の細かいデータまで分析を行う事が可能なデータストレージ基盤
が必要とされておりました。

■データストレージを導入にあたっての考慮事項
・データ統合を行うに当たり柔軟にストレージの拡張を行える事
・費用対効果が高い事
・プロジェクトの成長に対しストレージ容量の耐用性を持つ事
・試験的にMySQLおよびPostgresDBでのプロジェクトを稼働していたので、テストプロジェクトの
環境に対し親和性の高いソリューションである事

■導入効果:
Infobrightの検証を行い処理速度の向上を確認する事が出来たこと
および、データの圧縮技術により、高価なストレージの購入が必要になる
状況を回避できた事により、以下効果を確認できました。

・不必要な出費を行わなくて済んだ事
・管理者層のメンバーが必要になる詳細レベルのデータまでストレスなく出力可能な事
・すぐには大量データ(50T~)に対応した製品の導入を行う必要がなく不確定要素の多い
投資を行わずに済んだこと。

ウェブ版

PDF版
http://infobright.org/images/com_images/bluefin.pdf

Infobrightは商用オープンソースDWHとなりますので、費用対効果の高さは高くご期待頂けるかと思います。

また製品の運用保守費用を含め、社内環境でご使用のRDBの性能に悩まれている
ご担当者様は一度弊社まで直接ご相談いただければ早急に課題解決を行える可能性が非常に
高いかと思いますので、こちらからご相談下さい。

☆Have a business insight from lightning data analysis ☆
KSKソリューションズ DWHチーム