Hi 皆さま、

デル株式会社 エンタープライズソリューション& アライアンス部門にてビッグデータ ビジネス開発を担当している

堀田 鋭二郎(通称:Hotty / ほってぃー)と申します。

 

今回は、今年2016年に誕生から10年を迎え、新たな盛り上がりをみせている「Apache Hadoop」 について、デル日本法人からソリューションUpdateのご連絡です。

実は、このHadoop分野においてのデルの取組みは早く、同形態の業界としては初めて、Apache Hadoopへ最適化したソリューションモデルを展開したハードウェア・リーダーシップ企業です。

        

Hadoop自体、元々は以下の3点にメリットがありました。

① Hadoopソフトウェア類が無償で利用できる

② 比較的安価なIAサーバを活用できる

③ ビッグデータにおける低レイテンシー、高スループットの並列分散処理システムを構築・活用できる

 

しかしながら、HadoopはOSS(オープンソース・ソフトウェア)であるために、基本的にはベンダー側サポート対象外であり、技術者はオープンなコミュニティー等を通じて自力でノウハウを学ぶ必要がありました。そのため、Hadoop環境を構築・運用することに対して、Hadoop Clusterを導入し運用継続させるのためのレベルを高く感じる方々もいます。

それらの課題を解決する有力な手段の1つが、商用のHadoopディストリビューションを導入することでもあり、様々なベンダーが、企業向けに機能拡張を提供するとともに、導入支援や技術サポートを提供しています。

今回は、以前からデルとグローバルで共同事前検証、ソリューション展開している商用Hadoopディストリビューション展開のCloudera(クラウデラ)社とのソリューションについてご説明をいたします。

 

① Dell と Cloudera 共同ソリューションまとめ

以下の4つの構成パターンをベースにしたソリューションを体系化し、可能な限りシンプルに、用途に適した分かりやすい構成モデルを提供しています。

特に、リファレンス アーキテクチャー (Reference Architecture) ですが、今年2016年4月中にCloudera社からリリースされた最新Cloudera Enterprise 5.7.0 (CDH 5.7)にも適合した設計導入ガイドラインです。

Cloudera社Cloudera Enterprise 5.7.0 (CDH 5.7)リリースの案内

デルは、Cloudera社がリリースするサブスクリプションのバージョン改定毎に、実際に共同事前検証を施した、リファレンス アーキテクチャーをリリースしています。

 

では、この Dell Apache Hadoop リファレンス アーキテクチャーを活用される方にとってメリットは何でしょうか??

 

それは、Hadoop/Sparkを活用される方にとって「時間と工数が削減できる」点です。

 

具体的にどのように時間と工数を削減できるのでしょうか?

  

お客様、特に日本のお客様においては、ソリューションの導入までに非常に多くのプロセス、多大な時間を費やす傾向があります。ソリューションの検討から、サイジング、設計、PoC、導入、運用、全てが順調に進んでもかなりの時間が必要ですし、その間にトラブルが起こると、トラブルシュートも必要になります。デルが提供するApache Hadoop Solution Reference Architecture は、完全検証済みをコンセプトに、動作の保障されたHWやSWの組み合わせ情報、サイジング情報など様々な情報を提供します。これにより上記プロセス、特にサイジングからPoCにかかる工数手間と時間を大幅に削減することが出来ます。

 

② Dell と Cloudera 共同ソリューション適用領域

PoCとして、Hadoop/Spark環境の機能検証を実施したいと要望される方から、最近流行のSparkを活用したニア リアルタイムのデータ連携・分析基盤を構成したいと要望される方まで適用できるソリューション体系です。

 

以上、デルが提供するHadoop/Spark ソリューション体系の概要説明となります。

次回は、今回掲載したDell | Clouodera Apache Hadoop Solution Reference Architecture Version 5.7 のDocumentをダウンロードいただけるようにし、その記載内容について概説テクニカルレベルにて、ご説明差し上げたいと思います。

 

もちろん、本内容だけでなく、デルが実現するビッグデータ関連の内容について、いますぐに聞きたいーー、という方は、どうぞ遠慮なくご連絡ください。

喜んで!我々からご説明の機会をいただきたいと思います。

【関連ブログ】

Bigdata/IoTの取り組み - Apache Hadoopリファレンスガイド公開  - Dell | Cloudera 共同事前検証ソリューション②

Bigdata/IoTの取り組み – Apache Hadoop Solution の件! - Dell | Cloudera 共同事前検証ソリューション③