2010-03-01から1ヶ月間の記事一覧

HiveでCompressed Data Storage

基本的には、↓に書いてあるんですが、いくつか罠があるのでメモしときます。 http://wiki.apache.org/hadoop/Hive/CompressedStorage このページには以下のように書いてありますが、 SET io.seqfile.compression.type=BLOCK; -- NONE/RECORD/BLOCK (see belo…

hiveコマンドのバグ

hiveコマンドで hive -e 'quoted query string'とやると、コマンドラインでHiveQLをたたくことができるのですが、 以下のようなエラーになってしまいました。 Unexpected tables while processing |-S|-h|-e|-f これは/usr/bin/hiveスクリプトのバグで、 exe…

Hiveをjdbc経由で使う方法

現在、仕事でHadoopのサブプロジェクトであるHiveをいじってます。 で、今回、JDBC経由で使ってみたので紹介します。Hiveのインストールなどの仕方は以下を参照してください。 http://wiki.apache.org/hadoop/Hive/GettingStarted まず、Hiveサーバを立ち上…

第2回 Hadoop本 輪読会 発表資料

社内でHadoop本の輪読会をやってるんですが、 前回発表だったんで、その資料を公開します。 第2回 Hadoop 輪読会View more presentations from Toshihiro Suzuki. 嘘書いてあったら、ごめんなさいm(_ _;)m Hadoop作者: Tom White,玉川竜司,兼田聖士出版社/…