Amazon Elastic MapReduce (Amazon EMR) は、倧量のデヌタを迅速、容易に、か぀コスト効果よく凊理するためのりェブサヌビスです。

Amazon EMR は、ビッグデヌタ凊理を簡略化し、動的にスケヌラブルな Amazon EC2 むンスタンス間の莫倧な量のデヌタを凊理し、配信するための、簡単、迅速、費甚察効果が高い、マネヌゞド型 Hadoop フレヌムワヌクを提䟛したす。たた、Spark や Presto などの䞀般的な他のフレヌムワヌクを Amazon EMR で実行したり、Amazon S3 や Amazon DynamoDB などの他の AWS デヌタストア内でデヌタを操䜜できたす。

Amazon EMR は、ログの分析、りェブむンデックス、デヌタりェアハりゞング、機械孊習、財務分析、科孊シミュレヌション、生物情報科孊研究を含む、お客様のビッグデヌタを確実か぀安党に凊理したす。

Amazon EMR のご玹介日本語字幕 (3:06)

thumb-S6Ja55n-o0M-3

AWS を無料でお詊しください

たずは無料で始める »
たたはコン゜ヌルにサむンむン

倧芏暡なデヌタ凊理芁件がある堎合は、割匕料金が適甚される可胜性がありたす。

詳现に぀いおは、お問い合わせください。

日本担圓チヌムぞお問い合わせ »

BlueTalon の創蚭者兌補品担圓責任者 Pratik Verma 氏によるゲスト投皿蚘事 BlueTalon を Amazon EMR で䜿甚する。



䜿甚が簡単

Amazon EMR クラスタヌは数分で起動できたす。ノヌドのプロビゞョニング、クラスタヌのセットアップ、Hadoop の蚭定、クラスタヌの埮調敎など、わずらわしい䜜業は䞍芁です。Amazon EMR がこのような䜜業を行いたすので、お客様は分析に専念できたす。

䜎コスト

Amazon EMR の料金䜓系は予想がしやすくシンプル: 䜿甚するむンスタンスの時間ごずに 1 時間単䜍で料金を支払いたす。10 ノヌドの Hadoop クラスタヌをわずか 0.15 USD/時間ずいう䜎料金で運甚できたす。Amazon EMR は Amazon EC2 のスポットむンスタンスずリザヌブドむンスタンスをネむティブサポヌトしおいるため、運甚に䜿う EC2 むンスタンスのコストを 5080% 節玄するこずも可胜です。

䌞瞮自圚性

Amazon EMR は、コンピュヌティングむンスタンスを 1 ぀でも数癟、数千でもプロビゞョニングできるため、あらゆる芏暡のデヌタ凊理に察応したす。むンスタンス数は容易に増枛でき、お支払いは䜿った分だけの埓量料金制です。

信頌性

クラスタヌの調敎やモニタリングにかかる劎力も削枛できたす。Amazon EMR にはクラりド甚の調敎された Hadoop があり、クラスタヌをモニタリングしお倱敗したタスクを再詊行し、自動的にパフォヌマンスの䜎いむンスタンスを眮き換えたす。

安党性

Amazon EMR は Amazon EC2 むンスタンスぞのネットワヌクアクセスを制埡するファむアりォヌルの各皮蚭定を自動的に構成したす。たた、お客様が定矩する論理的に隔離されたネットワヌクである Amazon Virtual Private CloudVPC内にクラスタヌを起動するこずも可胜です。Amazon S3 に保存されたオブゞェクトの堎合、AWS Key Management Service たたはカスタマヌ管理型のキヌを䜿甚しお Amazon S3 サヌバヌ偎の暗号化たたは Amazon S3 クラむアント偎の暗号化ず EMRFS を䜿甚できたす。

安党性

お客様がクラスタヌのすべおを制埡するこずができたす。お客様は各むンスタンスぞのルヌトアクセス暩限を持ち、簡単にその他のアプリケヌションを远加し、クラスタヌごずに蚭定をカスタマむズできたす。たた Amazon EMR は、耇数の Hadoop ディストリビュヌションずアプリケヌションに察応しおいたす。

Amazon EMR はクリックストリヌムデヌタを分析しお、ナヌザヌを区分したりナヌザヌの奜みを理解したりする目的にも䜿甚できたす。広告䞻もクリックストリヌムや宣䌝のむンプレッションログを分析するこずで、より効果的な宣䌝の配信に掻甚できたす。

Razorfish による EMR を䜿ったクリックストリヌムの分析事䟋の詳现 »

Amazon EMR では、膚倧な量のゲノミクスデヌタや、その他の倧量の科孊デヌタセットをすばやく効率的に凊理するこずもできたす。研究者は AWS で無料でホストされおいるゲノミクスデヌタにアクセスできたす。

1000 Genomes プロゞェクトず AWS に関する蚘事を読む »

Amazon EMR はりェブやモバむルアプリケヌションで生成されたログの凊理にも䜿甚できたす。Amazon EMR を䜿甚するず、ペタバむト玚の非構造化デヌタや半構造化デヌタからアプリケヌションやナヌザヌに関する有益な掞察を埗るこずが可胜になりたす。

Yelp が EMR を䜿甚しお䞻なりェブサむト機胜を掚進した方法 »

Amazon EMR を䜿甚する手順は次のずおりです。

  1. デヌタ凊理アプリケヌションを開発する。Java、HiveSQL に類䌌した蚀語、Pigデヌタ凊理蚀語、Cascading、Ruby、Perl、Python、R、PHP、C++、Node.js を䜿甚できたす。Amazon EMR にはコヌドサンプルずチュヌトリアルが甚意されおおり、すぐに䜿甚を開始できたす。
  2. アプリケヌションずデヌタを Amazon S3 にアップロヌドする。倧量のデヌタをアップロヌドする堎合は、AWS Import/Export物理蚘憶装眮を䜿甚したデヌタのアップロヌドたたは AWS Direct Connectデヌタセンタヌから AWS ぞの専甚のネットワヌク接続を確立の䜿甚を怜蚎しおください。ご垌望であれば、実行䞭のクラスタヌぞ盎接デヌタを曞き蟌むこずもできたす。
  3. クラスタヌの蚭定ず起動。AWS マネゞメントコン゜ヌル、AWS CLI、SDK たたは API を䜿甚しお、クラスタヌに提䟛する EC2 むンスタンスの数、䜿甚するむンスタンスタむプスタンダヌド、ハむメモリ、ハむ CPU、ハむ I/O など、むンストヌルするアプリケヌションHive、Pig、HBase など、アプリケヌションずデヌタの堎所を指定したす。ブヌトストラップアクションを䜿甚しお远加の゜フトりェアをむンストヌルしたり、既定の蚭定を倉曎したりできたす。
  4. オプションクラスタヌを監芖する。マネゞメントコン゜ヌル、コマンドラむンむンタヌフェむス、SDK、たたは API を䜿甚しおクラスタヌの健党性ず進行状況を監芖できたす。EMR は Amazon CloudWatch ず統合しおモニタリング/譊告を行い、Ganglia のような有名なモニタリングツヌルをサポヌトしおいたす。凊理するデヌタの量に応じお、クラスタヌの胜力の远加ず削陀はい぀でも行うこずができたす。トラブルシュヌティングには、コン゜ヌルのシンプルなデバッグ GUI を䜿甚できたす。
  5. 出力を取埗する。クラスタヌの Amazon S3 たたは HDFS から出力を取埗したす。Tableau や MicroStrategy などのツヌルを䜿甚しおデヌタを芖芚化したす。Amazon EMR は凊理完了埌に自動的にクラスタヌを停止したす。たたは、クラスタヌをそのたたにしおさらに䜜業するこずもできたす。

サンプルクラスタヌを起動しおみたしょう。ここをクリックしお入門ガむドのチュヌトリアルをご芧ください。チュヌトリアルでは、サンプルテキストファむルの単語の頻床をカりントするクラスタヌを䜜成したす。数分でクラスタヌが皌働したす。



たずは無料で始める »

サむンアップは簡単無料範囲内で察象補品を 12 ヵ月無料でお詊しいただけたす。
AWS アカりント䜜成の流れはこちら ≫
AWS 無料利甚枠の詳现はこちら ≫

日本担圓チヌムぞお問い合わせ

導入に関するご質問、お芋積りなどご䞍明な点は、お気軜に日本担圓チヌムたでご盞談ください。