Database JUNKY

MySQL,MariaDBを中心としたブログです

DWH

これはすごい!mariadb10 でマルチソースレプリケーションでデータベース統合!

MariaDBでマルチソースレプリケーション 私的に待ちに待ったあの機能が追加されました。それは、マルチデータソースレプリケーション、mariadb10.0から実装されるという話は知っておりましたが、ようやく触る機会がきたので試してみようと思います。 余談で…

トレジャーデータを使ってみる(treasure-data) *インストール

最近めっきりブログの更新が遅れてしまったのですが、飽きちゃったわけではなく、すごーく一年間忙しかったから更新できなかっただけです。とは言いつつも、何も試していないのです。ここ一年、ビッグデータ、ビッグデータてつい最近騒がれており。私個人と…

MySQLとInfiniDB でリアルタイムDWHを作る PART1

むかしむかし、僕のブログでこんなことを書きました。 (OSSなDWH InfiniDB の話 ⑤ ~リアルタイムDWH化について) もう一年以上経っちゃいました・・・。この話、もちろん忘れていたわけでもなく、需要があまりなかったので、「ふーん、世間ではそんなにニー…

DWH InfiniDB community edition の制約事項

前回、InfiniDBでフリー版にもかかわらず、制限事項が少なくてうれしいとか書いちゃいましたが、制限事項は一応あります。そんなものをメモがてらに纏めてみました。

OSSなDWH InfiniDB の話 ⑤ ~リアルタイムDWH化について

前回に引き続き、DWH(データウェアハウス)である、InfiniDBの話です。 DWHは、Data Warehouse という意味で、データの倉庫って意味合いです。 なので、利用の方法を考えると、データに即時性があまり必要なく、大量のデータを分析する用途で使うケースが多…

OSSなDWH InfiniDB の話 ④ ~InnoDB エンジンと共存する方法

いまさら気づいたのですが、Infinidb には、標準のセットアップでは、InnoDBが入っておりません。標準でインストールされているストレージエンジンはCSV、MRG_MYISAM、MEMORY、 MyISAM、InfiniDBの5つのエンジンのみになります。DWHがメインの利用方法なの…

OSSなDWH InfiniDB の話 ③ ~データのロード

前回の投稿で、郵便番号テーブル(zip) を作成しました、今後はこのテーブルの中に、 郵便番号データをロードする方法を説明します。まあ、普通にやれば、mysql 同様、LOADでやれば良いのですが、InfiniDBならではのロード方法、バルクローダーについてここ…

OSSなDWH InfiniDB の話 ② ~データベース構築

今回は、mydbidbというデータベースを作成し、郵便番号テーブルを生成するところを説明いたします。 尚、認証の設定につきましては、MySQLと同様の設定になりますので、ここでは割愛させていただきます。

OSSなDWH InfiniDB の話 ① ~インストール

OSSのDWHで、infinidbというものがあり、競合OSSのInfoBright、LucidDB、MonetDBよりも、高いパフォーマンスを出しているとのことで、あ、パフォーマンスにつきましては、以下のURLをごらんください。 http://www.mysqlperformanceblog.com/2010/01/07/star-…

OSSなDWH Infobrightの話 ③ 日本語対応の話

日本語環境(UTF-8)でInfobrightを利用するにはどうすればいいか?すこし掘り下げて説明したいと思います。 /etc/my-ib.cnfの編集 サーバから直接実行するから別にいいという人ってあんましいないと思います。基本、クライアントの端末、例えばWindows等か…