Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
top500 scheduler
Search
porcaro33
April 22, 2022
Technology
0
720
top500 scheduler
porcaro33
April 22, 2022
Tweet
Share
More Decks by porcaro33
See All by porcaro33
Hello! Parallel Computing Service!
porcaro33
1
250
HPC-Updates@jawshpc#19
porcaro33
0
310
JAWS SONIC 2020 HPC
porcaro33
1
460
jawsbgnr#21 kobayashi
porcaro33
1
760
Introducing_AWS_Batch-JAWS-UG
porcaro33
0
460
GPU_FPGA_Briefing+March+2017
porcaro33
0
420
Other Decks in Technology
See All in Technology
Amazon Athena で JSON・Parquet・Iceberg のデータを検索し、性能を比較してみた
shigeruoda
1
170
AI時代の発信活動 ~技術者として認知してもらうための発信法~ / 20251028 Masaki Okuda
shift_evolve
PRO
1
120
abema-trace-sampling-observability-cost-optimization
tetsuya28
0
350
可観測性は開発環境から、開発環境にもオブザーバビリティ導入のススメ
layerx
PRO
4
1.7k
Open Table Format (OTF) が必要になった背景とその機能 (2025.10.28)
simosako
2
400
Kubernetes self-healing of your workload
hwchiu
1
610
実践マルチモーダル検索!
shibuiwilliam
1
220
書籍『実践 Apache Iceberg』の歩き方
ishikawa_satoru
0
210
AI時代、“平均値”ではいられない
uhyo
8
2.7k
コンパウンド組織のCRE #cre_meetup
layerx
PRO
1
280
CLIPでマルチモーダル画像検索 →とても良い
wm3
0
490
AIの個性を理解し、指揮する
shoota
2
410
Featured
See All Featured
Why You Should Never Use an ORM
jnunemaker
PRO
59
9.6k
KATA
mclloyd
PRO
32
15k
Imperfection Machines: The Place of Print at Facebook
scottboms
269
13k
Gamification - CAS2011
davidbonilla
81
5.5k
Thoughts on Productivity
jonyablonski
71
4.9k
[RailsConf 2023] Rails as a piece of cake
palkan
57
5.9k
What's in a price? How to price your products and services
michaelherold
246
12k
Scaling GitHub
holman
463
140k
Making the Leap to Tech Lead
cromwellryan
135
9.6k
Reflections from 52 weeks, 52 projects
jeffersonlam
355
21k
Large-scale JavaScript Application Architecture
addyosmani
514
110k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
37
2.6k
Transcript
Top500に⾒るスケジューラ事情 JAWS-UG HPC専⾨⽀部 ⼩林広志 @JAWSーHPC #18
Who Am I - Name : Hiroshi Kobayashi - Organization
: [ JAWS-HPC, Cloud_Admin@storage_company, ] - Favorite services : [ AWSCLI, Batch, ParallelCluster, ] - Award : AWS Samurai 2017
What is Top500? • TOP500(トップ500)は、狭義にはHPLベンチマークによるコンピュータの性能の ランキングであり、広義にはそれから派⽣したGreen500やGraph500などのランキ ングも含めて指している場合もある。また、そのランキングを定期的に集計し、評価 するプロジェクト全体を指すこともある。 • TOP500が初めて公開されたのは1993年であり、以降、1年に2回、最新のリスト
が発表されている。⽬的は、ハイパフォーマンスコンピューティングにおける傾向を追 跡・分析するための信頼できる基準を提供することであり、コンピュータの計算科学 応⽤向け性能の評価に適したいくつかのベンチマークの実⾏結果によりランク付けが ⾏われる。リストの作成はマンハイム⼤学、テネシー⼤学、ローレンス・バークレイ⽶ 国⽴研究所の研究者らが⾏っており、毎年6⽉のInternational Supercomputing Conference(ISC)および11⽉のSupercomputing Conference(SC)の開催に合わせて発表されている。 • https://ja.wikipedia.org/wiki/TOP500
スケジューラの情報無し • Top500には、ランク、製造者、利⽤者、国、 性能等の情報のみ • スケジューラの情報無し • 地道なgoogle先⽣との対話 • “super
computer <name>”で検索 • User DocumentやSystem Architecture,論⽂や各種資料を漁る
Top100 Result SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler
6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%
Top100 Result (Cont) • 案の定SLURM優勢、次点PBS • Fujitsu Schedulerは富岳や国内⼤学 • DOE(⽶エネルギー省)はLSFが好き
• NASAはPBSが好き • JAXAは独⾃? • Cobalt? YT? • EDAだとNCとかAltair Acceleratorとかある けど、どんな差があるの︖教えて偉い⼈。 SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler 6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%