Elastic MapReduceでの「Job Flow」の削除について

classic Classic list List threaded Threaded
5 messages Options
Reply | Threaded
Open this post in threaded view
|

Elastic MapReduceでの「Job Flow」の削除について

飯島和夫
はじめまして。
Elastic MapReduce初心者です。

まずは動作概要をつかもうと思い、サンプルアプリにてジョブを作ってみました。
動作終了後、このJob Flowを削除したいと思ったのですが、マネージメントコンソール上の「Terminate」ボタンがグレーアウトしたままで、削除ができません。

ジョブの状態は「COMPLETED」となっており、EC2のマシンも既に削除済みです。
時間差的なものかと思い、数日放置してみましたが、やはり状況が変わらず、Terminateできません。

元からTerminateできないものなのか、他に削除しておかないといけないものがあるのか、ご教授頂けますでしょうか。


不足点等ありましたら、ご指摘下さい。

何卒どうぞよろしくお願い致します。
Reply | Threaded
Open this post in threaded view
|

[JAWS-users 0428] Re: Elastic MapReduceでの「Job Flow」の削除について

CloudBB
飯島さん

AWSコアメンバーの李です。
飯島さん、EMRでは、ジョブフロー起動の方法が2つあります。

・バッチモード
 作業(ジョブ)を実行した後、ジョブフローが消える。もちろん、インススタンスも自動的に終了する。

・インタラクティブモード
 ジョブフローを立ち上げ、繰り返して作業を指示できる。ジョブフローは強制終了する必要がある。

おそらく、飯島さんが起動したジョブフローは、バッチモードでしょう。
バッチモードは、[STARTING→BOOTSTRAPPING→RUNNING→SHTTTING_DOWN→COMPLETED」順で状態が変わって行きます。
COMPLETEDは、ジョブフローの正常終了の状態です。
もちろん、ジョブは実行され、結果はS3に格納されているはずです。
そしてインスタンスはジョブフロー終了と共に消えます。
これは正常な動きです。

もし、本格的に勉強したいなら、解説書があります。
http://www.amazon.co.jp/dp/4844331493

以上、よろしくお願いします。

2012年12月7日 14:09 飯島和夫 <[hidden email]>:
Terminateできないものなのか、他に削除しておか


_______________________________________________
JAWS-users mailing list
[hidden email]
http://jaws-ug.jp/mailman/listinfo/jaws-users
Reply | Threaded
Open this post in threaded view
|

Re: [JAWS-users 0428] Re: Elastic MapReduceでの「Job Flow」の削除について

飯島和夫
李 さん

お世話になります。
ご回答頂きまして大変ありがとうございます。

確かにS3上に結果が出ていることを確認しました。
またジョブフローの停止後に、インスタンスも削除されていることを確認しています。
ありがとうございます。

> そしてインスタンスはジョブフロー終了と共に消えます。
確認で教えていただきたいのですが、上記の内容ですと、ジョブフローは
「COMPLETED」でジョブフローが終了した後、ジョブフロー自体も削除されるということになりますでしょうか。

現在も、「COMPLETED」の状態でジョブフローが残っているのですが、これは正常な動きで、放っておけばいずれ消えるということになりますでしょうか。


> もし、本格的に勉強したいなら、解説書があります。
> http://www.amazon.co.jp/dp/4844331493

こちらは是非とも購入して勉強を進めようと思います。

何卒よろしくお願い致します。


Reply | Threaded
Open this post in threaded view
|

[JAWS-users 0430] Re: Elastic MapReduceでの「Job Flow」の削除について

CloudBB
飯島さん

お疲れ様です。李です。
COMPLATED状態のジョブは、すでに終了しています。
ただ、ステータスだけがログのような形で残って2日間、見えますが、
ほっといたら自然に消えます。
逆に、すぐ見えなくなっても困るかも知れません。
ジョブフローのステータスは、コマンドラインAPIを使うと
30日の間のものをみることができます。

以上、よろしくお願いします。


2012年12月10日 14:30 飯島和夫 <[hidden email]>:
現在も、「COMPLETED」の状態でジョブフローが残っているので


_______________________________________________
JAWS-users mailing list
[hidden email]
http://jaws-ug.jp/mailman/listinfo/jaws-users
Reply | Threaded
Open this post in threaded view
|

Re: [JAWS-users 0430] Re: Elastic MapReduceでの「Job Flow」の削除について

飯島和夫
李 さん
お世話になります。飯島です。

教えて頂き、大変ありがとうございます。

ジョブの終了自体は、先週木曜なのですが、
放っておくと自然に消えるとのことなので、しばらく放っておこうと思います。

> ジョブフローのステータスは、コマンドラインAPIを使うと
> 30日の間のものをみることができます。
Elastic MapreduceのAPIは使ったことがなかったです。勉強になります。

色々と教えて頂き、ありがとうございました。
大変助かりました。