Feb 3, 2015

DEIM 2015 にて講演，第77会情報処理学会全国大会にて座長をします

›
2015年3月2日 - 3月4日，福島県で開催される， DEIM 2015 の特別セッション「ライジングスター2015」という企画にて招待講演をさせて頂くことになりました．タイトルは「Inside Apache Hadoop: オープンソース開発の様子と研究者としての関わり方」...
Dec 31, 2014

2014年のまとめ

›
2014年のまとめ． CROSS 2014 に個人で分散処理セッションでパネルディスカッション参加．@draftcode さんに会えた(CROSS のとき質問してもらったのだが，後日なべ会で再会した)． 筑波大学にて特別講義． 日本OSS奨励賞受賞． DEIM に初参...
Aug 1, 2014

Coordination Service(ZooKeeper，etcd ，consul) の比較

›
概要 最近，consul，etcd，ZooKeeper といった，いわゆる Coordination Service(この名前は  ZooKeeper  の論文から拝借した)の実装が頻繁に行われている．本記事では，開発が盛んな背景を踏まえた上で，オープンソース実装の Coo...
Mar 25, 2014

日経 SYSTEMS 4月号のテクノロジー最前線と技術評論社改訂版Linux エンジニア養成読本に寄稿しました

›
2014年3月26日発売の日経 SYSTEMS 4月号と，2014年3月18日技術評論社 改訂新版 Linux エンジニア養成読本に寄稿をしました．以下，それぞれの寄稿の概要について述べます． 日経 SYSTEM 2014年4月号に寄稿した Hadoop の記事に...
Feb 21, 2014

日本 OSS 奨励賞を受賞しました

›
日本OSS推進フォーラムより， 第9回日本 OSS 奨励賞を頂きました ．ありがとうございます．受賞理由は以下の通りです: Hadoop開発コミュニティにおいて、リソース制御機構YARNの高信頼性を実現する新機能の開発等に貢献するとともに、品質強化に向けた取り組みにも貢献して...
Mar 18, 2013

RCFile，Parquet，ORCFile

›
この2ヶ月で，Cloudera/Twitter，Hortonworks からそれぞれ別の列指向ファイルフォーマットが公開されました． Parquet  と ORCFile です． この記事では，まず RCFile の復習をして，その後 Parquet と ORCF...
3 comments:
Dec 25, 2012

Node-level aggregation の概要

›
本投稿は Hadoop Advent Calendar 25日目 ( #hadoopAC12jp )です．現在投稿中のパッチである MAPREDUCE-4502 の内容の日本語資料がないのに気づいたので，その説明をします． 現在取り組み中のパッチの内容 Node-l...