Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
top500 scheduler
Search
porcaro33
April 22, 2022
Technology
0
700
top500 scheduler
porcaro33
April 22, 2022
Tweet
Share
More Decks by porcaro33
See All by porcaro33
Hello! Parallel Computing Service!
porcaro33
0
240
HPC-Updates@jawshpc#19
porcaro33
0
310
JAWS SONIC 2020 HPC
porcaro33
1
460
jawsbgnr#21 kobayashi
porcaro33
1
760
Introducing_AWS_Batch-JAWS-UG
porcaro33
0
460
GPU_FPGA_Briefing+March+2017
porcaro33
0
420
Other Decks in Technology
See All in Technology
Oracle Base Database Service:サービス概要のご紹介
oracle4engineer
PRO
2
20k
帳票Vibe Coding
terurou
0
140
EKS Pod Identity における推移的な session tags
z63d
1
200
認知戦の理解と、市民としての対抗策
hogehuga
0
320
人を動かすことについて考える
ichimichi
2
320
歴代のWeb Speed Hackathonの出題から考えるデグレしないパフォーマンス改善
shuta13
6
600
ECS モニタリング手法大整理
yendoooo
1
120
JOAI発表資料 @ 関東kaggler会
joai_committee
1
260
モダンフロントエンド 開発研修
recruitengineers
PRO
2
260
実践アプリケーション設計 ②トランザクションスクリプトへの対応
recruitengineers
PRO
2
140
第4回 関東Kaggler会 [Training LLMs with Limited VRAM]
tascj
12
1.7k
Evolution on AI Agent and Beyond - AGI への道のりと、シンギュラリティの3つのシナリオ
masayamoriofficial
0
170
Featured
See All Featured
Writing Fast Ruby
sferik
628
62k
Site-Speed That Sticks
csswizardry
10
780
Why You Should Never Use an ORM
jnunemaker
PRO
59
9.5k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
33
2.4k
Balancing Empowerment & Direction
lara
2
590
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
It's Worth the Effort
3n
187
28k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
53
2.9k
Intergalactic Javascript Robots from Outer Space
tanoku
272
27k
The Cult of Friendly URLs
andyhume
79
6.5k
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
Transcript
Top500に⾒るスケジューラ事情 JAWS-UG HPC専⾨⽀部 ⼩林広志 @JAWSーHPC #18
Who Am I - Name : Hiroshi Kobayashi - Organization
: [ JAWS-HPC, Cloud_Admin@storage_company, ] - Favorite services : [ AWSCLI, Batch, ParallelCluster, ] - Award : AWS Samurai 2017
What is Top500? • TOP500(トップ500)は、狭義にはHPLベンチマークによるコンピュータの性能の ランキングであり、広義にはそれから派⽣したGreen500やGraph500などのランキ ングも含めて指している場合もある。また、そのランキングを定期的に集計し、評価 するプロジェクト全体を指すこともある。 • TOP500が初めて公開されたのは1993年であり、以降、1年に2回、最新のリスト
が発表されている。⽬的は、ハイパフォーマンスコンピューティングにおける傾向を追 跡・分析するための信頼できる基準を提供することであり、コンピュータの計算科学 応⽤向け性能の評価に適したいくつかのベンチマークの実⾏結果によりランク付けが ⾏われる。リストの作成はマンハイム⼤学、テネシー⼤学、ローレンス・バークレイ⽶ 国⽴研究所の研究者らが⾏っており、毎年6⽉のInternational Supercomputing Conference(ISC)および11⽉のSupercomputing Conference(SC)の開催に合わせて発表されている。 • https://ja.wikipedia.org/wiki/TOP500
スケジューラの情報無し • Top500には、ランク、製造者、利⽤者、国、 性能等の情報のみ • スケジューラの情報無し • 地道なgoogle先⽣との対話 • “super
computer <name>”で検索 • User DocumentやSystem Architecture,論⽂や各種資料を漁る
Top100 Result SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler
6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%
Top100 Result (Cont) • 案の定SLURM優勢、次点PBS • Fujitsu Schedulerは富岳や国内⼤学 • DOE(⽶エネルギー省)はLSFが好き
• NASAはPBSが好き • JAXAは独⾃? • Cobalt? YT? • EDAだとNCとかAltair Acceleratorとかある けど、どんな差があるの︖教えて偉い⼈。 SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler 6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%