タイタン (スーパーコンピュータ)

タイタン: Titan)あるいはOLCF-3は、クレイ社によってオークリッジ国立研究所に構築され、様々な科学プロジェクトに用いられたスーパーコンピュータである。タイタンはそれまでオークリッジで用いられていたスーパーコンピュータ、ジャガーをアップグレードしたもので、従来のCPUに加えてGPUを使用している。タイタンはこのようなハイブリッドアーキテクチャとしては初めて10ペタフロップス以上のパフォーマンスを実現した。2011年10月にアップグレードが始まり、2012年10月に安定性試験を開始、2013年初頭に研究者が利用できるようになった。アップグレードの初期費用は6,000万USドルで、主にアメリカ合衆国エネルギー省によって資金が提供された。

タイタン
Titan, 2013 (49912802521).jpg
タイタン(2013年)
稼働期間 2012年10月29日から2019年8月2日まで
スポンサー US DOEおよびNOAA (<10%)
運営者 クレイ
所在地 オークリッジ国立研究所
アーキテクチャ 18,688個のAMD Opteron 6274 16コアCPU
18,688個のNVIDIA Tesla K20X GPU
電源 8.2 MW
OS Cray Linux Environment
寸法 404 m2 (4352 ft2)
メモリ 693.5 TiB (584 TiB CPUと109.5 TiB GPU)
ストレージ 40 PB, 1.4 TB/s IO Lustre
処理速度 17.59 ペタフロップス (LINPACK)
理論値27ペタフロップス
コスト 9700万USドル(2020年における10600万USドル相当)
ランキング TOP500: 4位, 2017年6月[1]
使用目的 科学研究
記録 開発時、TOP500で1位。
GPUによるスーパーコンピュータとして初めて、10ペタフロップス以上を達成。
ウェブサイト www.olcf.ornl.gov/titan/

オークリッジにおいて、タイタンは2019年にサミットに取って代わられた。サミットはIBMによって構築され、より高い性能のGPUを使いノード数を減らしたことや並列ファイルシステム英語版によるファイルデータに対するノードごとのローカル不揮発性キャッシュが特徴である。[2]

タイタンはAMD Opteron CPUとNVIDIA Tesla GPUを組み合わせて使うことで、ジャガーより大幅に計算能力を引き上げつつエネルギー効率を向上させた。理論上は27ペタフロップスを実現するために18,688個のCPUを同数のGPUと組み合わせて使用し、結果的にスーパーコンピュータの速度を格付けするために用いられるLINPACKベンチマークでは17.59ペタフロップスのパフォーマンスを実現した。これは2012年11月時点でTOP500において1位の性能だったが[3]、2013年6月に天河二号によって破られた。

タイタンはあらゆる科学的目的に利用可能だったが、その使用権はプロジェクトの重要性とハイブリッドアーキテクチャを最大限活用できる可能性によって決められた。プログラムはタイタンに依存しないように他のスーパーコンピュータでも実行可能なものを選ばなければならない。主に分子スケールの物理学または気候モデルを扱っている6個のプログラムが最初に選ばれたが、その後には他の25個のプログラムが順番を待っていた。GPUが導入されていることにより、製作者はプログラムの変更を余儀なくされた。GPUCPUよりも多くのスレッドを同時に取り扱うことができることから、一般にこの修正によって並列度は向上した。この変更によってしばしばCPUのみのマシンでもパフォーマンスが向上した。

歴史編集

オークリッジ国立研究所(ORNL)のオークリッジ・リーダーシップ・コンピューティング施設英語版(OLCF)において、20ペタフロップスの性能を持つスーパーコンピュータを作る計画はジャガーが構築された2005年にまでさかのぼる[4]エクサスケール(1000ペタフロップスが1エクサフロップスに相当)マシンを2020年までに運用するORNLの計画の一環として、タイタン自体も2016年におよそ200ペタフロップスのシステムへ置き換えられる[4][5][6]。新しく15,000平方メートル(160,000 ft2)の建物をタイタンのために建てるという当初の計画は、ジャガーの既存の施設を用いるのが望ましいとして却下された[7]。正確なシステムアーキテクチャは2010年まで確定していなかったが、NvidiaがGPUを提供する契約は2009年に締結された[8]。タイタンはプライベートな2010年11月16日のACM/IEEE Supercomputing Conference (SC10)で最初に発表され、タイタンアップグレードの第1段階が始まった2011年10月11日に公に発表された[5][9]

ジャガーは製造されて以降、様々なアップグレードを受けてきた。初めはCray XT3英語版プラットフォームで25テラフロップスを達成した[10]。2008年までに、ジャガーは筐体数を増やし、Cray XT4英語版プラットフォームにアップグレードすることで、263テラフロップスに達した[10]。2009年に、Cray XT5英語版プラットフォームにアップグレードされ、1.4ペタフロップスに達した[10]。最終アップグレードによって、ジャガーの性能は1.76ペタフロップスとなった[11]

タイタンはORNLを通して、主にアメリカ合衆国エネルギー省から資金提供を受けた。この資金はCPUを購入するのには十分であったが、すべてのGPUを購入するには十分でなかったため、アメリカ海洋大気庁(NOAA)が計算時間を見返りとして残りのノードの資金を提供することに合意した[12][13]。ORNL科学計算チーフであるジェフ・ニコルズは、タイタンの費用は約6,000万ドルで、そのうちNOAAの貢献は1,000万ドル未満だが、正確な数値は機密保持契約により秘匿されていると述べた[12][14]。クレイ社との全契約期間では潜在的なアップグレードを除き、9,700万ドルが計上された[14]

1年間にわたる転換は、2011年10月9日に開始された[15][16]。10月から12月の間に、ジャガーの200個の筐体のうち96個は、残りのマシンは使い続けつつ、各筐体が持つ24個のCray XT5英語版 ブレード(各ブレードは4つのノードを持ち、各ノードは2つの6コアCPUを持つ)がCray XK7英語版ブレード(各ブレードは4つのノードを持ち、各ノードは1つの16コアCPUを持つ)にアップグレードされた[15]。12月に、計算が96個のXK7筐体に移され、残りの104個の筐体がXK7ブレードにアップグレードされた[15]。ORNLの外部ESnet英語版接続は、10 Gbit/sから100 Gbit/sにアップグレードされ、システム相互接続(CPUが相互に通信するネットワーク)がアップデートされた[15][17]。ジャガーで使用されているシースターデザイン(Seastar design)は、タイタンで使用されているノードを直接3Dトーラス相互接続英語版ネットワークに接続するジェミニ相互接続(Gemini interconnect)にアップデートされた[18]。ジェミニは内部でワームホールフロー制御英語版を使用している[18]。システムメモリは584 TiBに倍増した[16]。960個のXK7ノード(10筐体)は当時、Nvidia Kepler英語版 GPUが利用できなかったので、Nvidia Fermi英語版ベースのGPUが搭載されており、この960ノードはTitanDevと呼ばれ、テストコード用に使われていた[15][16]。この第1段階のアップグレードにより、ジャガーの最大パフォーマンスは3.3ペタフロップスまで引き上げられた[16]。2012年9月13日以降は、Nvidia K20X GPUが960個のTitanDevノードを含むジャガーのすべてのXK7ブレードに搭載された[15][19][20]。10月に作業が完了し、コンピュータがついにタイタンへ改名された[15]

2013年3月、NvidiaはタイタンのK20X GPUと同じGPUダイを使用しているコンシューマグラフィックカードGTX Titanを発売した[21]。タイタンは2013年の初めに受入試験を受けたが、92%の試験しか完了せず、要求された95%を満たせなかった[15][22]マザーボードPCIeスロットのメスエッジ・コネクタに金が過剰にあり、マザーボードのはんだに亀裂を生じさせていることが問題であると判明した[23]。改修費用はクレイ社が負担し、毎週12から16筐体が改修された[23]。改修中もユーザーはCPUにアクセスすることができた[23]。3月11日に8,972個のGPUにアクセスできるようになった[24]。ORNLは4月8日改修完了を報告し[25]、2013年6月11日に受入試験の完了を報告した[26]

タイタンのハードウェアは「完全な」ソフトウェアを用いれば、理論上最大27ペタフロップスのパフォーマンスを発揮できる[27]。2012年11月12日、LINPACKのパフォーマンスによってスーパーコンピュータを格付けするTOP500において、タイタンはセコイアに取って代わり、17.59ペタフロップスで1位となった[28][29]。タイタンは同じ500台のスーパーコンピュータをエネルギー効率に関して格付けするGreen500でも3位となった[30]。2013年6月には、タイタンはTOP500では天河二号に次いで2位、Green500では29位に転落した[31][32]。タイタンは2013年6月のランキングのためにベンチマークを再実施することはなかった[31]。これは27ペタフロップスを達成したとしても、2位であることに変わりはなかったためである[33]

ハードウェア編集

タイタンは404平方メートル(4,352 ft2)を占めるジャガーの200筐体の内部を入れ替え、ネットワークをアップグレードして使用している[34][35]。ジャガーの電源と冷却システムを再利用することにより、約2,000万ドルを節約することができた[36]。電源は各筐体に480 V三相交流を供給している。これに必要なケーブルは米国標準の208 Vの場合よりも細く、銅を100万ドル節約できる[37]。タイタンは8.2 MW[38]とジャガーよりも1.2 MW多くの電力を必要とするが、浮動小数点数演算に関して約10倍速く動作する[34][37]。停電の際には、炭素繊維フライホイール・バッテリーがネットワークと記憶装置を16秒間まで稼働させ続けることができる[39]。電源喪失の2秒後には、ディーゼル発電機が起動し、約7秒でフルパワーに達する。発電機は電力を永続的に供給することができる[39]。発電機は、再起動が素早くできるようにネットワークと記憶装置に電力を供給し続けることのみを意図して設計されており、プロセッサに電力を供給することはできない[39]

タイタンは18,688ノード(1ブレード当たり4ノード、1筐体当たり24ブレード)を持ち[40]、それぞれが16コアの32 GBのDDR3 ECCメモリを搭載したAMD Opteron 6274 CPUと6 GBのGDDR5 ECCメモリを搭載したNvidia Tesla K20X GPUで構成されている[41]。合計299,008個のプロセッサコアと合計693.6 TiBのCPUおよびGPUのRAMを持っている[37]

タイタンは当初、ジャガーの10 PBのLustre記憶領域を転送速度240 GB/sで使用していたが[37][42]、2013年4月に記憶領域が40 PB、転送速度が1.4 TB/sにアップグレードされた[43]。GPUはCPUよりもはるかに高い並列処理効率を持つため採用された[41]。GPUはCPUよりもクロック速度英語版が遅いものの、各GPUは732 MHzCUDAコアを2,688個持っているため[44]、システム全体ではCPUよりも高速になる[35][45]。 したがって、CPUのコアは従来のスーパーコンピュータのようにデータを直接処理するのではなく、GPUにタスクを割り当てるために使用されている[41]

タイタンはCray Linux Environmentを実行し、ユーザーが直接アクセスするログインノードでは完全なバージョンのLinuxであるが、計算ノードではより軽量で効率的なバージョンとなっている[46]

タイタンのコンポーネントはヒートシンクによって空冷されるが、空気は筐体に送り込まれる前に冷やされる[47]。ファンの騒音は非常に大きいので、機械室で15分以上過ごす人々には聴覚保護が必要である[48]。このシステムは23.2 MW(6600トン)の冷却性能を備えており、水を5.5 °Cまで冷却し、それが順次循環する空気を冷却することによって機能する[47]

研究者はタイタンの出力データをよりよく理解するためにEVEREST (Exploratory Visualization Environment for Research and Technology)を利用することもできる。EVERESTは10×3メートル(33×10 ft)のスクリーンとより小さな第2スクリーンを備えた可視化部屋である。スクリーンは37×33メガピクセル3次元映像を映し出すことができる[49]

プロジェクト編集

2009年、タイタンを管理するオークリッジ・リーダーシップ・コンピューティング施設は、研究の重要性とシステムを十分に生かすことができる能力を基準として、最初にスーパーコンピュータを使うコードを50個のアプリケーションの中から6つの「先駆的な」コードに絞り込んだ[35][50]。タイタンを使う6つの先駆的なプロジェクトは以下の通りである。

  • S3Dは、ディーゼル燃料やバイオ燃料のエンジンの効率を向上させることを目的として、燃焼の分子物理学をモデル化するプロジェクト。2009年にジャガーを用いて、直接噴射ディーゼルエンジンの効率に関係する、自然発火炭化水素の炎の仕組みを初めてシミュレーションで解明した。[50]
  • WL-LSMSは、絶対零度を除く温度における磁性材料中の電子と原子の相互作用をシミュレーションする。このコードの以前のバージョンは、ジャガーで1ペタフロップス以上のパフォーマンスを初めて達成したコードのひとつである。[50]
  • Denovoは、原子炉における効率向上と廃棄物削減を目的として原子核反応をシミュレーションする[35]Denovoの従来のCPUベースマシンにおけるパフォーマンスはタイタン向けに調整した後には2倍になり、タイタンにおいてはジャガーにおける速度の3.5倍を発揮した[50][51]
  • LAMMPSは、量子力学的スケールから相対性理論的スケールまでにわたる粒子をシミュレーションする分子動力学法コードであり、半導体生体物質および重合体の開発における応用の可能性を見出して、材料科学に貢献する[52]
  • CAM-SEは、広域気象モデルであるCommunity Atmosphere Modelと流体および熱力学方程式を解くHigh Order Method Modeling Environmentの2つのコードを組み合わせたものである。CAM-SEによって気候シミュレーションの精度が大きく向上する。[50]
  • Non-Equilibrium Radiation Diffusion (NRDF)は、超新星が放出する非荷電粒子をプロットし、レーザー核融合流体力学医用画像処理、原子炉、エネルギー貯蔵、燃焼にも応用できる可能性がある[50]。そのキメラコードは数百の偏微分方程式を用いて、超新星爆発している星の中にモデル化された各ニュートリノのエネルギー、角度、散乱角および種類を追跡し、数百万の個別の等式を導き出す[53]。このコードは3つの「頭」(それぞれ恒星物質の流体力学、放射輸送核燃焼英語版をシミュレートする)を持つので、 神話上の生物にちなんでキメラと名付けられた[53]
  • Bonsaiは、ツリー法によるN体シミュレーションコードである。2千億個の星を個々に表現して天の川銀河をシミュレートするのに使われ、2014年のゴードン・ベル賞候補になった。このアプリケーションでは、コンピュータの持続速度は24.773ペタフロップスに達した[54]
  • VERAは、ジャガーのConsortium for Advanced Simulation of Light Water Reactors (CASL)で書かれた軽水炉シミュレーションである。技術者はVERA を用いることで、 炉心のあらゆる部分の性能と状態を原子炉の耐用期間を通して監視し、興味深い点を特定することができる[55]VERAは最初の6つのプロジェクトには含まれていないものの、CAARの支援を受けて最適化された後にタイタンで実行することが計画され、TitanDevで試験していた。コンピュータ科学者であるトム・エヴァンスはタイタンのハイブリッドアーキテクチャに適合させようとしたが、以前のCPUベーススーパーコンピュータに比べて難しいことがわかった。彼は18から36か月のプロセスである核燃料サイクル全体を、タイタンを使って1週間でシミュレートすることを目標としていた。[55]

2013年には、31個のコードが、通常1度に4個または5個づつ、タイタンで実行される計画が立てられた[48][56]

コード修正編集

多くのプロジェクトのコードは、タイタンのGPU処理に適合させるために修正しなければならないが、プロジェクトがタイタンだけに依存しないように各コードはCPUベースのシステムでも実行可能でなければならない[50]。 OLCFは適合プロセスを支援するために、Center for Accelerated Application Readiness (CAAR)を設立した。タイタンのアーキテクチャ、コンパイラそしてアプリケーションについて、ユーザーに説明するための開発者ワークショップがNvidia本社で開催されている[57][58]。CAARは、Nvidiaおよびコードベンダーと協力して、GPUのディレクティブをプログラミング言語に統合するためにコンパイラを改良している[57]。これにより研究者は、FortranCC++のような既存のプログラミング言語を使って、コードの中で並列処理を表現し、コンパイラがそれをGPUに指示することができる[57]。計算天体物理学者であるブロンソン・メッサー博士はこの作業について、「GPUは高速だがCPUよりも柔軟性が乏しいことを考えると、アプリケーションにタイタンを最大限活用させるためには、GPUをビジー状態に保つ方法を見つけることも必要である。」と述べている[57]Moab Cluster Suite英語版はノードに渡すジョブに優先順位をつけ、使用率を高く保つために用いられており、テストしたソフトウェアの効率は70%から約95%に向上した[59][60]。CPUベースマシンで性能が2倍になったDenovoのように、一部のプロジェクトではコード修正により非GPUマシンでも性能が向上している[50]

GPUで実行するために必要なコード修正の量はプロジェクトによって異なる。NRDFを開発しているメッサ―博士によれば、彼のコードの一部分は比較的単純な計算が繰り返し並列に処理されてるため、この部分だけをGPUで実行している[61]NRDFFortranをGPUで用いるためにCUDAで拡張したCUDA Fortranで書かれている[61]。核燃焼はGPUアーキテクチャで最も簡単にシミュレーションできるため、キメラの3番目の「頭」が最初にGPUで実行された。他のコードは後で修正することが計画された[53]。ジャガーでは、このプロジェクトは14か15核種をモデル化したが、メッサ―博士は最大200核種をシミュレーションすることで、経験的観測と比較してはるかに高い精度が得られると期待している[53]

関連項目編集

出典編集

[脚注の使い方]
  1. ^ "TOP500 list refreshed, US edged out of third place", TOP500, 19 June 2017 (page visited on 19 June 2017).
  2. ^ Summit FAQs”. ornl.gov. Oak Ridge National Laboratory (2014年11月14日). 2014年11月15日閲覧。
  3. ^ スパコン「TOP500」、米「Titan」が首位に
  4. ^ a b Discussing the ORNL Titan Supercomputer with ORNL's Jack Wells.”. The Exascale Report (2012年11月). 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月19日閲覧。
  5. ^ a b Bland, Buddy (2010年11月16日). “Where do we go from here?”. Oak Ridge National Laboratory. 2012年3月3日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  6. ^ Goldman, David (2012年10月29日). “Top U.S. supercomputer guns for fastest in world”. CNN. 2013年3月2日時点のオリジナルよりアーカイブ。2013年3月31日閲覧。
  7. ^ Munger, Frank (2011年3月7日). “Oak Ridge lab to add titanic supercomputer”. Knox News. 2012年7月4日時点のオリジナルよりアーカイブ。2012年12月19日閲覧。
  8. ^ Morgan, Timothy Prickett (2009年10月1日). “Oak Ridge goes gaga for Nvidia GPUs”. The Register英語版. 2012年11月9日時点のオリジナルよりアーカイブ。2012年12月19日閲覧。
  9. ^ Levy, Dawn (2011年10月11日). “ORNL awards contract to Cray for Titan supercomputer”. Oak Ridge National Laboratory. 2013年2月26日時点のオリジナルよりアーカイブ。2012年12月19日閲覧。
  10. ^ a b c Jaguar: Oak ridge National Laboratory”. TOP500. 2013年3月17日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  11. ^ TOP500 List November 2011”. TOP500. 2013年1月21日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  12. ^ a b Munger, Frank (2012年11月26日). “The ORNL and NOAA relationship”. Knox News. 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月20日閲覧。
  13. ^ Munger, Frank (2012年11月18日). “The cost of Titan”. Knox News. 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月20日閲覧。
  14. ^ a b Feldman, Michael (2011年10月11日). “GPUs Will Morph ORNL's Jaguar Into 20-Petaflop Titan”. HPC Wire. 2012年7月27日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  15. ^ a b c d e f g h Titan Project Timeline”. Oak Ridge Leadership Computing Facility. 2012年6月18日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  16. ^ a b c d ORNL Review Vol. 45”. Oak Ridge National Laboratory (2012年). 2013年3月4日時点のオリジナルよりアーカイブ。2012年11月2日閲覧。
  17. ^ Superfast Titan, Superfast Network”. Oak Ridge Leadership Computing Facility (2012年12月17日). 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  18. ^ a b The Gemini Network”. Cray Inc. (2010年). 2015年4月29日閲覧。
  19. ^ Poeter, Damon (2011年10月11日). “Cray's Titan Supercomputer for ORNL Could Be World's Fastest”. PC Magazine英語版. 2012年6月5日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  20. ^ Jones, Gregory Scott (2012年9月17日). “Final Upgrade Underway”. Oak Ridge Leadership Computing Facility. 2013年3月26日時点のオリジナルよりアーカイブ。2012年11月16日閲覧。
  21. ^ Smith, Ryan (2013年2月21日). “Nvidia's GeForce GTX Titan Review, Part 2: Titan's Performance Unveiled”. Anandtech英語版. 2013年2月23日時点のオリジナルよりアーカイブ。2013年3月26日閲覧。
  22. ^ Munger, Frank (2013年2月20日). “No. 1 Titan not yet living up to potential”. Knox News. 2013年3月26日時点のオリジナルよりアーカイブ。2013年3月26日閲覧。
  23. ^ a b c Huotari, John (2013年3月13日). “Cray re-soldering Titan's connectors, supercomputer testing could be done in April”. Oak Ridge Today. 2013年3月26日時点のオリジナルよりアーカイブ。2013年3月26日閲覧。
  24. ^ Jones, Scott (2013年3月26日). “Titan Users Now Have Access to GPUs”. Oak Ridge Leadership Computing Facility. 2013年3月13日時点のオリジナルよりアーカイブ。2013年3月26日閲覧。
  25. ^ Huotari, John. “Titan repairs complete, ORNL preparing for second round of supercomputer testing”. Oak Ridge Today. 2013年4月8日閲覧。
  26. ^ Munger, Frank. “Titan passes acceptance test, seals ORNL's supercomputer deal with Cray”. Knox News. 2013年7月2日閲覧。
  27. ^ Jones, Gregory Scott (2012年11月12日). “ORNL Supercomputer Named World's Most Powerful”. Oak Ridge National Laboratory. 2013年2月22日時点のオリジナルよりアーカイブ。2012年12月14日閲覧。
  28. ^ Oak Ridge Claims No. 1 Position on Latest TOP500 List with Titan”. TOP500 (2012年11月12日). 2013年1月21日時点のオリジナルよりアーカイブ。2012年11月15日閲覧。
  29. ^ US Titan supercomputer clocked as world's fastest”. BBC (2012年11月12日). 2013年2月3日時点のオリジナルよりアーカイブ。2012年11月12日閲覧。
  30. ^ Williams, Leo (2012年11月14日). “Titan is Also a Green Powerhouse”. Oak Ridge Leadership Computing Facility. 2013年2月16日時点のオリジナルよりアーカイブ。2012年11月15日閲覧。
  31. ^ a b June 2013”. TOP500. 2013年7月2日閲覧。
  32. ^ The Green500 List - June 2013”. Green500. 2013年7月2日閲覧。
  33. ^ Munger, Frank. “Titan didn't re-test for TOP500, keeping last year's benchmark; ORNL's Jeff Nichols explains why”. Knox News. 2013年7月2日閲覧。
  34. ^ a b Tibken, Shara (2012年10月29日). “Titan supercomputer debuts for open scientific research”. CNET. 2012年12月15日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  35. ^ a b c d Introducing Titan”. Oak Ridge Leadership Computing Facility. 2013年2月22日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  36. ^ Munger, Frank (2012年10月29日). “Titan's ready to roll; ORNL supercomputer may become world's No. 1”. Knox News. 2013年3月26日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  37. ^ a b c d Lal Shimpi, Anand (2012年10月31日). “Inside the Titan Supercomputer”. Anandtech. p. 1. 2013年1月25日時点のオリジナルよりアーカイブ。2012年11月2日閲覧。
  38. ^ Heterogeneous Systems Re-Claim Green500 List Dominance”. Green500 (2012年11月14日). 2013年2月5日時点のオリジナルよりアーカイブ。2012年11月15日閲覧。
  39. ^ a b c Oak Ridge National Laboratory Tour – Backup Power (Youtube)”. Anandtech (2012年10月30日). 2012年11月2日閲覧。
  40. ^ Morgan, Timothy Prickett (2011年10月11日). “Oak Ridge changes Jaguar's spots from CPUs to GPUs”. The Register英語版. 2012年10月15日時点のオリジナルよりアーカイブ。2012年12月21日閲覧。
  41. ^ a b c ORNL Debuts Titan Supercomputer”. Oak Ridge Leadership Computing Facility. 2013年2月26日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  42. ^ Lal Shimpi, Anand (2012年10月31日). “Titan's storage array”. Anandtech. 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  43. ^ Santos, Alexis. “Titan supercomputer to be loaded with 'world's fastest' storage system”. Engadget. 2013年4月16日閲覧。
  44. ^ Smith, Ryan (2012年11月12日). “NVIDIA Launches Tesla K20 & K20X: GK110 Arrives At Last”. Anandtech. 2013年1月24日時点のオリジナルよりアーカイブ。2012年12月21日閲覧。
  45. ^ Feldman, Michael (2012年10月29日). “Titan Sets High Water Mark for GPU Supercomputing”. HPC Wire. 2013年3月26日時点のオリジナルよりアーカイブ。2012年10月30日閲覧。
  46. ^ Titan System Overview”. Oak Ridge Leadership Computing Facility. 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月21日閲覧。
  47. ^ a b Oak Ridge National Laboratory Tour – Cooling Requirements (Youtube)”. Anandtech (2012年10月30日). 2012年11月2日閲覧。
  48. ^ a b Pavlus, John (2012年10月29日). “Building Titan: The 'world's fastest' supercomputer”. BBC. 2013年1月30日時点のオリジナルよりアーカイブ。2013年1月8日閲覧。
  49. ^ Munger, Frank (2013年1月1日). “ORNL visualization lab gets $2.5M makeover, adds 3D”. Knox News. 2013年3月26日時点のオリジナルよりアーカイブ。2019年3月30日閲覧。
  50. ^ a b c d e f g h TITAN: Built for Science”. Oak Ridge Leadership Computing Facility. 2013年2月26日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  51. ^ Nuclear Energy – Supercomputer speeds path forward”. Consortium for Advanced Simulation of LWRs. 2013年2月14日時点のオリジナルよりアーカイブ。2012年12月14日閲覧。
  52. ^ Zybin, Sergey. “LAMMPS Molecular Dynamics Simulator”. Sandia National Laboratories. 2013年2月16日時点のオリジナルよりアーカイブ。2012年10月29日閲覧。
  53. ^ a b c d Messer, Bronson (2012年10月30日). “Using Titan to Model Supernovae (Youtube)”. Anandtech. 2012年11月15日閲覧。
  54. ^ Bédorf, Jeroen; Gaburov, Evghenii; Fujii, Michiko S.; Nitadori, Keigo; Ishiyama, Tomoaki; Portegies Zwart, Simon (2014). “24.77 Pflops on a Gravitational Tree-Code to Simulate the Milky Way Galaxy with 18600 GPUs”. Proceedings of the International Conference for High Performance Computing (IEEE): 54–65. arXiv:1412.0659. Bibcode2014hpcn.conf...54B. doi:10.1109/SC.2014.10. ISBN 978-1-4799-5500-8. 
  55. ^ a b Pearce, Jim. “VERA analyzes nuclear reactor designs in unprecedented detail”. Oak Ridge National Laboratory. 2013年2月15日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  56. ^ 2013 INCITE Awards”. US Department of Energy. 2013年3月26日時点のオリジナルよりアーカイブ。2013年1月17日閲覧。
  57. ^ a b c d Williams, Leo. “Preparing users for Titan”. Oak Ridge National Laboratory. 2013年3月1日時点のオリジナルよりアーカイブ。2012年11月19日閲覧。
  58. ^ Rumsey, Jeremy (2012年12月17日). “Titan Trainers Take Road Trip”. Oak Ridge Leadership Computing Facility. 2013年3月26日時点のオリジナルよりアーカイブ。2012年12月18日閲覧。
  59. ^ Supercomputing Leaders Choose Adaptive Computing to Complement Latest HPC Systems”. Business Wire (2013年1月30日). 2013年3月26日時点のオリジナルよりアーカイブ。2013年1月31日閲覧。
  60. ^ DuBois, Shelley (2013年1月30日). “The next revolution in cloud computing”. Fortune Magazine. 2013年3月26日時点のオリジナルよりアーカイブ。2013年1月31日閲覧。
  61. ^ a b Lal Shimpi, Anand (2012年10月31日). “Inside the Titan Supercomputer”. Anandtech. p. 3. 2013年3月26日時点のオリジナルよりアーカイブ。2012年11月15日閲覧。

外部リンク編集

記録
先代:
IBM セコイア(米国)
16.325 ペタFLOPS
世界で最も高速なコンピュータ
2012年11月 – 2013年6月
記録:17.59 ペタFLOPS
次代:
天河二号(中国)
33.9 ペタFLOPS