アドバンスリザベーション
概要
アドバンスリザベーションは予めGrid Engineキューのある範囲のリソースを予約しておき、その予約領域を専有して利用できるサービスです。 なお、本サービスは課金サービスであり、使用には事前に利用計画書の提出が必要です。
赤い点線の四角がアドバンスリザベーションで取られたリソース(計算ノードのスロット数✕利用時間) 他の四角がジョブが専有するリソース(計算ノードの利用スロット数✕計算時間)となっています。 領域を予約したユーザーは赤い四角の領域に対してジョブを投入することが出来ます。
(アドバンスリザベーションサービスを使用しているユーザーも、アドバンスリザベーションサービスを使用していないユーザーと同様に、
普通にqsub
コマンドを利用することにより計算資源の予約枠を利用せずにジョブを投入することは可能です。)
課金対象期間について
- 計算資源の予約枠を取得し、予約枠の開始時刻後、予約枠の終了時刻前までに予約枠の削除を行った場合、計算資源の予約枠の開始時刻から予約枠の削除を実施した時刻までが課金対象となります。(通常はこのパターン)
- 予約枠の削除を実施しなかった場合、計算資源の予約枠の開始時刻から予約枠の終了時刻まですべてが課金対象となります。
- 予約枠の終了時間が来るとジョブが実行中であっても強制終了されます。
- 予約枠の中でジョブを実行しなかったとしても予約枠の全てが課金の対象となります。
- 計算資源の予約枠を取得し、予約枠の開始時刻前までに予約枠の削除を実施した場合、計算資源の予約枠は無効となり、課金対象外となります。
アドバンスリザベーションサービス使用手順
アドバンスリザベーションサービスを使用する場合は、以下の手順で実施してください。
- 利用計画表の提出
- 本サービスは課金サービスであり、使用には事前に利用計画表の提出が必要です。手続きの詳細は課金サービスの利用方法をご参照ください。
- 計算資源の予約枠の取得
- 計算資源の予約枠の取得は
QRSUB
コマンドで実施します。
- 計算資源の予約枠の取得は
- 計算資源の予約枠の確認
- 取得した計算資源の予約枠の確認は
qrstat
コマンドで実施します。
- 取得した計算資源の予約枠の確認は
- ジョブの実行
- 計算資源の予約枠の取得後のジョブ実行は、
qsub
コマンドに-ar
オプションでar-id
(予約番号)を指定して実施します。
- 計算資源の予約枠の取得後のジョブ実行は、
- 計算資源の予約枠の削除
- 取得した計算資源の予約枠の削除は
QRDEL
コマン ドで実施します。
- 取得した計算資源の予約枠の削除は
QRSUB
コマンドおよびQRDEL
コマンドは遺伝研スパコン上での課金金額の計算のために作成した、Grid Engineのqrsub
, qrdel
コマンドのラッパープログラムです。
QRSUB
,QRDEL
ともコマンドオプションは、それぞれqrsub
コマンド、qrdel
コマンドのオプションが使用可能です。
各コマンドのオプションについては、Grid Engineユーザーズマニュアル(英語のみ)を参照してください。
計算資源の予約枠の取得方法
予約枠は、スパコンSEに依頼して確保することも出来ますし、コマンドを使ってユーザー自身で確保することも可能です。
実行中のジョブによりリソースに空きがなくQRSUB
で計算資源の予約枠の取得ができないことがあります。
その場合は、確保する日時をさらに未来の日時にずらしていただき、再度QRSUB
コマンドを実施していただくようお願いいたします。
下記の実行例の意味についてはGrid Engineのページもご参照ください。
実行例(1)
medium.qを1ノードで、メモリ量4GB、スロット数3、使用期間2020年4月2日13時15分から2020年5月4日10時00分までの 予約枠を取得する場合 この場合に確保されるメモリ量は12GB(メモリ4GB×3スロット)となり、計算資源 の予約枠を取得する際は その分の空き容量が必要となります。
QRSUB -l medium -l mem_req=4G -l s_vmem=4G -pe def_slot 3 -a 202004021315 -e 202005041000
-l medium
:medium.qを指定-l mem_req=4G -l s_vmem=4G
:メモリ量4Gを指定-pe def_slot 3
:スロット数3を指定(要求スロット数は1ノードで確保される)-a 202004021315
:使用開始時刻2020年4月2日13時15分を指定-e 202005041000
:使用終了時刻2020年5月4日10時00分を指定
実行例(2)
medium.qを複数ノードに跨るmpiジョブ(並列数は2~5)で、使用期間10月10日00時00分から10月20日7時5分までの予約枠を取得する場合 この場合に 確保される最大メモリ量は、40GB(8GB(デフォルト値)×10スロット)となり、計算資源の予約枠を取得する際はその分の空き容量が必要となります。
QRSUB -l medium -pe mpi 2-10 -a 10100000 -e 10200705
-pe mpi 2-5
: mpiジョブで最小並列数2、最大並列数5を指定-a 10100000
: 使用開始時刻10月10日00時00分を指定-e 10200705
: 使用終了時刻10月20日7時5分を指定
*メモリ量は指定されていないので、デフォルト値が指定されたとみなされます。
実行結果
QRSUBコマンドが正常終了した場合は、以下のメッセージが出力され、ar-id(4桁の予約番号)が発行されます。
Your advance reservation XXXX has been granted
ここでXXXXにはar-id(予約番号)が入ります。
QRSUB
コマンドが正常終了しなかった場合は、指定オプションを見直し、再度実行してください。
予約開始時刻、予約終了時刻の指定方法
QRSUB
コマンドの以下の引数で予約開始時刻、終了時刻を指定します。
-a start-time
予約開始時刻を指定します。 start-timeを以下の形式で指定します。- ``-e end-time` 予約終了時刻を指定します。 end-timeを以下の形式で指定します。
時刻は以下の形式で指定できます。
- CCYYMMDDhhmm.SS
- CCYYMMDDhhmm
- YYMMDDhhmm.SS
- YYMMDDhhmm
- MMDDhhmm.SS
- MMDDhhmm -
*CC:西暦の上2桁 YY:西暦の下2桁 MM:月 DD:日 hh:時 mm:分 SS:秒
予約枠取得状況の確認方法
予約枠取得状況の一覧表示
qrstat
実行結果
ar-id name owner state start at end at duration
------------------------------------------------------------------------------------------
0001 test-user w 10/10/2017 00:00:00 10/20/2017 07:05:00 247:05:00
0002 test-user r 01/10/2017 00:00:00 10/20/2017 00:00:00 6792:00:00
-
ar-id:予約番号
-
state:予約枠の状態
- w:エラーなしで待機中、W:警告(エラー付きで待機中)、r:実行中、E:エラー(エラー状態で実行中)
-
start at:予約枠開始時刻
-
end at:予約枠終了時刻
-
duration:予約時間