分123452019年11月,スパコン(スーパーコンピュータ)のトップカンファレンスであるSC19で,小形のAI専用スパコンがデビューをはたしました。「⁠CS-1」と名付けられたそのマシンは,ウェハースケール,つまり30cmシリコンウェハーを一枚まるごと使った巨大なCPUをもち,その広大な領域に埋め込まれた40万ものコアに,ターゲットのニューラル・ネットワークをそっくり全部マッピングして並列動作させます。Systemsというスタートアップ・カンパニーです。筆者はいくつものスタートアップ,とくにハードウェア・システムを開発する企業を見てきました。Cerebrasについても二年ほど前から何度か訪問して開発状況などを見てきましたが,これほど野心的なスタートアップは滅多にありません。このCerebrasの技術についてはすでに多くの記事が,それも私の尊敬する方々によって出されています(注1⁠)⁠。そこで本稿では,その技術ではなく起業の経緯などに焦点を当てた,つまりこのモンスターマシンを生んだ企業のスタートアップストーリーをお届けします。注1)たとえば安藤氏の記事「高速ディープラーニングが可能なWSEをCerebrasはどうやって実現したのか」など。CS-1繰り返しになりますが,控えめに言ってもCS-1はとてつもないモンスターです。本記事はCerebrasの技術についてはあまり書かず,スタートアップストーリーや彼らの大きなビジョンを伝えることが目的なのですが,さりとて何も技術に関する情報がないと各エピソードの重みがわかりません。そこでまずはじめに,簡単にCS-1のおおまかな設計について解説します。以下のCerebrasの各Blogがとても良くできているので,それを適宜引用して説明します。Engineまず第一に,CS-1を特異なものにしているのはもちろんその心臓部,つまり30cm(12inch)ウェハーをまるごと使ったCPU(写真1)です。Engineと呼んでいます。そのサイズは215mm×215mm。ここに専用のプロセッサが40万コア含まれており,全体のトランジスタ数は1.2兆にも達します。プロセスはTSMCの16nmです。ウェハーは円形ですが,写真2に示したように周辺部分を切り落としてこの形にしています。通常のCPUなどでは,ウェハーの中の小さな長方形1つずつのサイズに切り分けて,それぞれが1つのチップの中に収まります。WSEは12×7つまり84チップを合わせて1つにしたようなものです。各チップ内部のコアは写真3のような2次元メッシュ構造のネットワークによって相互接続されています。チップ間も前述の写真2の青い線,つまりチップ間の隙間を乗り越えた配線層を通じてつながれており,結果的にWSE全体で巨大な2次元メッシュネットワークを構成しています。WSEはこの四角に切り落とした左右の側面からデータの入出力が行われます。ところで通常,各チップは切り離して利用されます。そのため,このチップ間の隙間「スクライブ・ライン」上に金属による配線層を形成させることもありません,というかそんなことはできないように半導体の製造工程はできあがっています。これは製造工程そのものに手を入れる,半導体製造企業(今回はTSMC社)側の技術開発を必要とする,結構大変なアプローチです。ネットワークと分散処理技術に興味を持つ。本業である研究・教育とは別に,中学生の頃から幅広くコンピュータ技術の発展を追いかけ,注目すべき技術やムーブメントについて一般読者向けの記事として書くことを趣味としている。最近は米国を中心とした著名な技術者への取材記事が多い。2019」を開催しました。DAY1・DAY2の様子を注目セッションとともにお伝えします。LINEのエンジニア3名がイベントに先駆けて見どころを紹介します。コードの安全性・安定性を高める開発サイクル~テスト管理の効率を上げ,脆弱性診断を自動で行う~本連載では,連載「業務を改善する情報共有の仕掛け」を受けつつ,安全性・安定性を加えた開発サイクルについて考えていきます。若者世代から圧倒的な人気を誇るライブ配信&動画投稿コミュニティアプリ「MixChannel」(ミクチャ)の裏側(レコメンドシステムやサーバサイド開発など)について解説していきます。その他の連載CSS3アニメーションでつくるインターフェイス表現CSS3によるアニメーション表現を紹介していきます。その中でも,幅広い読者に応用してもらえるだろうインターフェイスを主なお題とします。MySQL道普請便り本連載では,MySQLを使ったアプリ開発・運用に関するノウハウをご紹介していきます。RecipeUbuntuの強力なデスクトップ機能を活用するための,いろいろなレシピをお届けします。JavaScriptセキュリティの基礎知識JavaScriptに関するセキュリティ上の問題はどこで発生し,どうすれば防ぐことができるのか?について解説していきます。〜システムをきちんと運用するための基礎知識システムは「作って終わり」ではなく,運用の中でさまざまな問題が発生します。問題の発生に備えて事前にどのような対応をしておくべきなのか,問題発生時に何をしなければならないのか,ポイントを解説していきます。きたみりゅうじの聞かせて珍プレーソフトウェア開発の現場で体験したトホホな失敗,思わずうなる珍プレーをきたみりゅうじ氏が四コママンガで紹介。Linuxのメンテナンスの傍ら,Linuxやオープンソースソフトと日々を過ごす著者が,その魅力とつきあい方を,エッセイ風味でお届けします。PRESS特別編集部員,さわやか笑顔のスーパーハカーはまちちゃんとネット大好き14歳わかばちゃんが,毎号,読者の皆さんから寄せられたおたよりを紹介します。皆さんの日頃の悩みにも答えちゃいますよ。]メールでのお知らせメールで次の案内をお送りしております。メールの配信を希望する方は,利用したい項目をチェックしてメールアドレスを入力し,[登録]ボタンをクリックしてください。UPDATES[ほぼ週間に1回]新刊メールマガジン[ほぼ週間に1回]電脳会議の各号案内[ほぼ1ヵ月半に1回]※変更する場合や停止する場合は,登録情報変更ページをご覧ください。※登録いただいたメールアドレスには,そのお知らせ以外,配信いたしません。Ltd.ページ内容の全部あるいは一部を無断で利用することを禁止します。個別にライセンスが設定されている記事等はそのライセンスに従います。