2010年6月30日、米Yahoo! は2つのHadoop関連プロダクトをオープンソースとして公開しました。一つめは「Hadoop with Security」で、その名前のとおりHadoopにセキュリティ機構を組み込んだものです。もう一つは「Oozie」という名前で、Hadoop上で動くワークフローエンジンです。
Hadoop with Securityは、今まで外部からのデータアクセスなどセキュリティにおいて弱い面があったHadoopに対し、ケルベロス認証によるセキュリティ機構を組み込んで権限が与えられていないユーザからのアクセスからデータを保護したり、Audit(監査)ロギングのしくみを設けたりしているものです。
どちらもgithub上でソースを公開していますが、Yahoo! Developer NetworkにてHadoop withSecurityを含むVMWareの仮想マシンイメージを公開しています。また、Clouderaにて配布しているディストリビューション(Cloudera’s Distribution forHadoop)の最新バージョンであるCDH3b2ではOozieをサポートしており、今後Hadoop with Securityもサポートする予定です。