top500 scheduler

Transcript

1. Top500に⾒るスケジューラ事情 JAWS-UG HPC専⾨⽀部 ⼩林広志 @JAWSーHPC #18
2. Who Am I - Name : Hiroshi Kobayashi - Organization : [ JAWS-HPC, Cloud_Admin@storage_company, ] - Favorite services : [ AWSCLI, Batch, ParallelCluster, ] - Award : AWS Samurai 2017
3. What is Top500? • TOP500（トップ500）は、狭義にはHPLベンチマークによるコンピュータの性能の ランキングであり、広義にはそれから派⽣したGreen500やGraph500などのランキ ングも含めて指している場合もある。また、そのランキングを定期的に集計し、評価 するプロジェクト全体を指すこともある。 • TOP500が初めて公開されたのは1993年であり、以降、1年に2回、最新のリスト が発表されている。⽬的は、ハイパフォーマンスコンピューティングにおける傾向を追 跡・分析するための信頼できる基準を提供することであり、コンピュータの計算科学 応⽤向け性能の評価に適したいくつかのベンチマークの実⾏結果によりランク付けが ⾏われる。リストの作成はマンハイム⼤学、テネシー⼤学、ローレンス・バークレイ⽶ 国⽴研究所の研究者らが⾏っており、毎年6⽉のInternational Supercomputing Conference（ISC）および11⽉のSupercomputing Conference（SC）の開催に合わせて発表されている。 • https://ja.wikipedia.org/wiki/TOP500
4. スケジューラの情報無し • Top500には、ランク、製造者、利⽤者、国、 性能等の情報のみ • スケジューラの情報無し • 地道なgoogle先⽣との対話 • “super computer <name>”で検索 • User DocumentやSystem Architecture,論⽂や各種資料を漁る
5. Top100 Result SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler 6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%
6. Top100 Result (Cont) • 案の定SLURM優勢、次点PBS • Fujitsu Schedulerは富岳や国内⼤学 • DOE(⽶エネルギー省)はLSFが好き • NASAはPBSが好き • JAXAは独⾃? • Cobalt? YT? • EDAだとNCとかAltair Acceleratorとかある けど、どんな差があるの︖教えて偉い⼈。 SLURM 58.6% PBS 17.2% Fujitsu Batch Job Scheduler 6.9% IBM Spectrum LSF 5.2% Univa Grid Engine 3.4% NEC Network Queuing System2… YT 1.7% Cobalt 1.7% Original Scheduler 1.7%