Distill CLI：Amazon CTOのWerner Vogels氏がRustを使ったメディア要約ツールを発表

原文リンク(2024-07-01)

AmazonのCTOであるWerner Vogels氏は最近、Rustで書かれた個人プロジェクトであるDistill CLIを発表した。このオープンソースツールは、Amazon TranscribeとAmazon Bedrockを活用し、コマンドラインから直接音声録音の要約を生成する。

オープンソースツールのAmazon Bedrock Audio Summarizerをベースにしたこの新しいCLIは、Amazon S3、AWS Lambda、Amazon Transcribe、Amazon Bedrock、プロジェクトのインフラを管理するAWS CDKを使用して、メディアファイルの書き起こしや要約を自動化する方法を提供する。Vogels氏がこのプロジェクトに初めて言及したのは、今年初めにDistillを紹介したブログ記事「Hacking Our Way to Better Team Meetings」だった。

DistlllのCLI出力例。出典:All Things Distributedブログ

このRustアプリケーションは、日々のミーティングから重要な詳細を要約して抽出するもので、Vogels氏とAmazonの彼のチームによって開発された。彼はこう書いている。

私は常に、自分自身のメモの取り方を洗練させるのに役立つツールや戦略（コーネル・メソッドなど）を探しています。そして、一般的にペンと紙を好むが（記憶と統合に役立つことが示されているから）、テクノロジーが蓄積された能力を高めるのに役立つことは否定できません。これは、積極的に参加することと同時にメモを取ることが相反する可能性のある会議などの状況では特に当てはまります。

Distillの最初のバージョン。出典:All Things Distributedブログ

Vogels氏は、AIを使ってバーチャルなチーム会議の文字起こし、要約することを目的としたこのプロジェクトの初期段階からの選択について、詳細を語っている。

Lambda関数の1つをRustで書き直したところ、コールドスタートが12倍速くなり、メモリフットプリントが73％減少しました。いつの間にか、自分のユースケースでプロセス全体をより効率的にする他の方法を考え始めていました。

彼は、オリジナルの概念実証ではメディアファイル、トランスクリプト、サマリーをS3に保存していたが、リリースされたDistill CLIではトランスクリプトとサマリーをメモリに保持し、S3への書き込み回数を減らしていることを強調している。シンプルなUIはステータスの更新が提供され、失敗があればユーザーに通知するため、コマンドラインを離れることなくメディアのアップロードや要約プロセスの監視を行うことができる。

Distill CLIは、要約をターミナルに出力したり、Word文書、テキストファイル、マークダウン、Slackメッセージとしての出力をサポートしている。このツールは、Amazon Transcribeがサポートするあらゆる言語の音声ファイルを処理できる。

Distill CLIはチームの必要性から生まれたものだが、Vogels氏は、彼のゴールは新しい言語に挑戦することだったと認めている。これは、試行錯誤が学習と好奇心の維持に効果的な方法であることを証明している。

私は前にも言いましたが、仕事をしなければなりません。そうでなければ、ただのくだらない話です。より多くのビルダーが大規模で難しい問題を解決するためにRustを選択するようになり、自分の手を汚す時が来たと感じました。

彼は、Rustが挑戦的であることを認めている。

最初は多くの摩擦があり、IDE に飛び込んで構築を開始したいだけの時は難しい場合があります。しかし、いったんその先に進めば、速度を上げる大きな可能性があります。システム、サービス、アプリケーションを構築するコストは、それを運用するコストに比べれば大したことはありません。

Pyle Cloud Technologiesの共同設立者兼CEOであるBenjamen Pyle氏は次のようにコメントしている。

AmazonがRustをサポートし、奨励し、投資しているのを見て本当に嬉しいと思っている。素晴らしい言語であり、多くのユースケースに適している。CLIツール、組み込みシステム、ウェブAPI、そしてサーバーレスワークロードまで、あらゆるものに適している。

ユーザーのerikhopf氏がHacker Newsで補足している。

私はRustでの学習と、摩擦の多い地雷原であるAmazonでドキュメントの執筆との比較が特に気に入っています。

Distill CLIは、Apache 2.0ライセンスの下、GitHubで公開されている。