オープンソースの 依存関係 は どこで 終わりを 迎え、 なぜ 終わるのでしょうか? npmの fakerモジュール には 何が 起きたのでしょうか? 同じ ことが 再び起こる 可能性は あるのでしょうか? オープンソースソフトウェアの ライブラリが どのように 人気を 博し、そして ライフサイクルの 終わりを 迎えるのかを 一緒に 見ていきましょう。 開発者や 運用エンジニア向けの 教訓も 紹介します。
JavaScriptと PHPの エコシステムで 起きた、 いくつかの 突然の ソフトウェアサプライチェーン の 混乱に ついて お話しします。 気候や 環境への 懸念、 政治や 人道的な 活動を めぐる 法的 紛争が、 その 原因と なった 事例です。
今回の 事例に 共通する テーマは、 オープンソースの 持続 可能性、 気候 変動、 オープンソースソフトウェアの 自由を めぐるさまざまな 問題を きっかけに 生まれた、 オープンソースの 抗議活動と しての ソフトウェア (プロテストウェア)です。
npmの プロテストウェアに 関する もう 一つの 興味深い 事例は、 node-ipc npmパッケージの メンテナーが、 政治危機を 受けて行動を 起こした ことです。
JavaScriptライブラリのleft-padとnpmメンテナーのAzer Koçulu これは、 ある 企業に よる オープンソース開発者への 法的 措置が、 JavaScriptエコシステムに おける 数千もの プロジェクト (Node.jsや Babelなど)を 機能不全に 陥らせた 経緯を 示す 事例です。
left-pad npmパッケージ の メンテナーである Azer Koçuluは、 Kikと いう 別の npmモジュールも メンテナンスしていました。 どうやら、 同名の インスタントメッセージアプリが あった ため、 Kikモジュールが 企業の 弁護士の 目に 留まったようです。 弁護士から 連絡を 受け、 npmから 要請されても、 Azerは パッケージ名の 変更を 拒みました。
訴訟を 起こすと 脅され (また npm組織が 双方の 合意を 取り付けられなかったこともあり)、 Azerは 抗議の 意思表示と して、 250を 超える npmパッケージを npmレジストリから 非公開に しました。
残念ながら、 その 中には left-padも 含まれていました。 left-padとは 何でしょうか? left-padは、 left-pad@1.0.0を 例に すると、 文字列を スペースで 埋める ための わずか 17行の コードからなる 小さな ライブラリです。 しかし、 文字列を 左側から 埋めるだけでも、 いくつかの エッジケースへの 対応が 必要です。 最新バージョンの 1.3.0は、 201 8年4月9日に 次のように 公開されました。
left-padは 月間250 万回以上 ダウンロードされる ほど 人気が ありました。 その ため、 left-padが 取り下げられると、 Node.jsや Babelなど、 これに 依存する プロジェクトが 機能しなくなりました (詳細は こちら: http://left-pad.io/ )。
npmコミュニティでは、 依存パッケージが 取り下げられた ことに よる 影響が、 npmレジストリに おける 前例と なりました。 誰かが このような ことを するとは、 誰も 思っていなかったのです。
こうして、 ある 開発者が たった 17行の コードで JavaScriptエコシステムを 壊した、と いう 話が 知られるようになりました。
JavaScriptで文字列を左側から埋めるには? Stringプロトタイプには padStart()と padEnd()メソッドが あり、 2つの 引数を 取ります。 埋める 文字数と、 埋める ために 使う 文字列です。 戻り値は、 埋め込み後の 新しい 文字列です。 この APIは Node.js 8以降で 利用でき、 現在は すべての 最新ブラウザーで サポートされています。
以下は、 JavaScriptで 文字列を 左側から 埋める コード例です。
この 新しい ECMAScript仕様が 追加されたのは、 より 豊かな 言語APIを めぐる 議論を 生んだ npmの left-padパッケージの おかげだと 考える 人は 少なく ありません。
PHP、Laravelなどのプロジェクトで偽データを生成するFakerライブラリ 環境への 負荷を 減らせるなら、 成功した プロジェクトを 手放せるでしょうか? 次に 紹介するのは、 地球環境の 改善に つながるなら 自らの 成功を 脇に 置く 覚悟を 持った メンテナーの 話です。
Françoisを 紹介しましょう。 201 1年、 François Zaninottoは Faker を 公開しました。 これは、 データベースへの 初期データ投入や テストに 役立つ、 偽データを 作成する ための PHPライブラリです。
Fakerは 成長を 続け、 Pythonなど 他の 言語向けの SDKも 登場し、 70以上の ロケールを サポートする 人気ライブラリと なりました。 しかし、 Fakerは 単一の 巨大な ライブラリです。 テストで ユーザー名を 偽装する ために 一部の データセットだけ 必要な 場合でも、 3MB分の データセット全体を ダウンロードする 必要が あります。
とはいえ、 実際に 使う ロケールは 1つだけと いう 人が ほとんどです。 ライブラリの サイズは どれほどだったのでしょうか? Fakerの サイズは 約3MBでした。 開発ツール用の ライブラリと して 小さいとは 言えませんが、 非常に 大きいわけでもありません (E2Eテスト用の Chromeなどを 考えてみてください)。 ところが 201 9年までに、 Fakerは 生涯ダウンロード数が 1億2,100万回を 超える ほどの 人気を 集めていました。
少し 考えてみてください。 ライブラリの サイズを 気に した ことは どれくらい ありますか (明らかな フロントエンドの パフォーマンス最適化を 除いて)? 長年に わたり、 Fakerは おそらく 11トンを 超える CO2換算排出量を 生み出してきました。
Françoisは その ことを 良心の 呵責と して 抱えたくなかった ため、 この プロジェクトは 現在 終了しています。 しかし、 Françoisは 誰かに 引き継ぐ ことも できたのではないでしょうか? Françoisは、 以前 開発した ORMの PHPライブラリ Properlで 苦い 経験を していました。 彼に とって うまく いかなかったのです。
PHPライブラリの Fakerに ついては、 これで おしまいです。 GitHub上の プロジェクトリポジトリは アーカイブされ、 新しい リリースも プルリクエストも ありません。 とはいえ、 オープンソースでは プロジェクトの ソースコードを フォークできます。 開発者たちは、 Fakerを 新しい メンテナーとともに 新たな 組織へ 移す ことを 提案しました。 しかし、 それでは GitHub Starsの 数を 削除するなどして、 プロジェクトが 築いてきた オープンソースと しての 評判を 失うことになります。 その ため、 この 案は 実現しませんでした。
Françoisは、 新しい メンテナーや 開発者に 向けて 最後に こう 書き残しました。 「興味が あれば、 まず Fakerを フォークしてみてください。 Fakerより ずっと 良い ものに なるでしょう。 ただし、 数年後には きっと 後悔するでしょう ;)」
npmのFakerライブラリ この Faker.jsライブラリ も、 テストで 使える 大量の ランダムデータを 生成するのに 役立ちますが、 その 経緯は 先ほどの PHP版とは 大きく 異なります。
「もう 無償では 働かない」と、 Marak Squiresは 202 0年11月、 自身の リポジトリに 投稿した GitHub Issueで 述べました。
オープンソースソフトウェアの メンテナンスは、 大きな 負担です。 コードを 書く ことから、 ドキュメント作成を 含む 定期的な プロジェクトの 保守、 リリースの 公開、 変更履歴ファイルの 更新、 新しい 開発者や コントリビューターを 歓迎する 環境づくり、 質問への 回答、 報告された 問題の 調査、 プルリクエストの レビューまで、 作業は 多岐に わたります。 健全な オープンソースプロジェクトを 維持する ために 必要な 作業の 一部を 挙げただけでも、 これだけあります。
私たち開発者の 多くも、 営利企業も、 多くの オープンソースソフトウェアを 利用しています。 しかし、 何かを 還元できているでしょうか?
Marakは オープンソース開発者の 一人であり、 いくつかの オープンソースプロジェクトの メンテナーです。 ある 時点で 月間1,200 万回以上 ダウンロードされた、 人気の npmパッケージfaker.jsを メンテナンスしています。 ただし、 先ほどの PHPライブラリFakerの 話と 混同しないでください。 別々の プロジェクトであり、 メンテナーも 経緯も 異なります。
Marakの 仕事は、 Fortune 500企業の 開発者を 支援し、 最終的には 企業の 成長にも 貢献していました。 しかし、 多くの メンテナーと 同じく、 彼自身が 得る ものは あまり ありませんでした。 メンテナーの 仕事には、 資金も 評価も ほとんど 与えられていません。
202 0年11月、 Marakは オープンソースの 持続 可能性、 あるいは その 欠如に ついて、 意思を 示すことにしました。 メンテナーは GitHubリポジトリに Issueを 立て、 今後は 無償で 作業を しないと 表明しました。
この GitHub Issue に 寄せられた 絵文字の 反応を 見る 限り、 Marakの 主張は コミュニティに 広く 受け入れられ、 共感を 得ていました。 Marakの 声は 届きましたが、 その 行動は 目立った 長期的な 印象を 残しませんでした。
202 2年1月5日、 メンテナーは セマンティックバージョニングで 6.6.6と なる 新バージョンの Faker.js npmパッケージを 公開しました。 これに より、 faker@6.6.6は npmレジストリから ダウンロードできる 有効な バージョンと なりました。
新しい 6.6.6では、 Faker.js npmパッケージの 元の ソースコードが すべて 削除されていました。 この 新しい メジャーバージョンを インストールすると、 機能が 壊れてしまいます。
新たに 公開した faker@6.6.6での 声明に 合わせ、 Faker.jsの GitHubリポジトリ にも コミットを 強制的に プッシュし、 ソースコード全体を 削除しました。
壊れた npmパッケージは、 利用者に どれほどの 影響を 与えるのでしょうか? それを 評価するには、 npmパッケージの バージョン管理と、 npmパッケージマネージャーの 一般的な 動作を 理解する 必要が あります。
簡単に 言うと、 プロジェクトですでに fakerを 使っている 場合、 ロックファイルで 依存関係を 固定しているかどうかに かかわらず、 npmパッケージマネージャーは 通常、 マイナー または パッチ バージョンの 範囲で 最新バージョンを 取得します。 ただし、 現在 使っている Faker.jsの メジャーバージョン内にとどまる ため、 「安全圏」は 保たれます。 これは、 faker@5.5.3が 最後の 安全な メジャーバージョンであり、 壊れた メジャーバージョン faker@6.6.6を 使うには、 明示的な アップグレードが 必要だからです。 エンドユーザーに 自動的に 提供される ことは、 通常ありません。
では、 この メンテナーは 意思表示を した ものの、 実際に 困った 人は いなかったのでしょうか? 話は 続きます。 Marakは、 月間約1億ダウンロードに 影響する Denial of Serviceの 脆弱性を colors npmパッケージに 仕込みました 。
オープンソースライブラリを責任を持って使うためのポイント 以下では、 npmパッケージに おける プロテストウェアや メンテナンスされていない ソフトウェアに よる セキュリティ上の 影響を 避ける ために、 オープンソースソフトウェアを 管理する 実践的な 方法を 4つ 紹介します。
1. オープンソースライブラリのインフラを効率的に管理する オープンソースライブラリ の 利用 可能性に 依存する 開発者と して、 何が できるでしょうか? レジストリから パッケージを 再インストールするのは 非効率で 時間が かかり、 再現性の ない 結果を 招く 可能性も あります。
npmや PyPIなどの 公開レジストリから パッケージや オープンソースライブラリが 消えたり、 使われなくなったりする 事態に 備えるには、 オープンソースの Verdaccio プロジェクトのような、 ローカルの プライベートプロキシや キャッシュプロキシの 利用を おすすめします。 Verdaccioの メンテナーである Juan Picadoに インタビューしました 。 インタビューを 読んで、 オープンソースライブラリの 管理に ついて さらに 詳しく ご覧ください。
2. オープンソースライブラリを吟味する 新しい オープンソースパッケージを 採用する ときや、 既存の パッケージの 代替を 検討する ときは、 プロジェクトの コミュニティ、 これまでの メンテナンス実績と 現在の 活動状況、 セキュリティ体制を 時間を かけて 評価しましょう。 プロジェクトの 品質、 テストの 有無、 利用可能な ドキュメントなども 重要な 要素です。
npmパッケージの 品質を 評価する 際に 役立つ ツールの 一つが、 無料で 便利な リソースである Snyk Advisor です。 オープンソースパッケージの さまざまな 側面を 定量的に 評価できます。 たとえば、 Snyk Advisorは nodemon npmパッケージ の 健全性スコアを 提供しています。
3. ロックファイルで依存関係を固定する ロックファイルを 使い、 確認済みの バージョンに 依存関係を 固定する ことは、 決定論的な インストールを 実現する 優れた 方法です。 これは JavaScriptエコシステム全般で 有効であり、 CIなどで 予期せぬ 事態を 防ぐ ために 広く 知られている 手法です。
ロックファイルを 使い始めたばかりで、 仕組みが よく わからない 場合は、 依存関係 管理の 仕様と 動作を 理解する ために、 package-lock.jsonとは を 読む ことを おすすめします。
4. 推移的依存関係を固定する 状況に よっては、 node_modules ツリーに 追加される 推移的依存関係の バージョンを 制御できないことがあります。 これは、 それらの 依存関係が 他の メンテナーが 宣言した 依存関係の 一部と して 含まれている ためです。
とはいえ、 npmや yarn、 pnpmなどの パッケージマネージャーには、 package.jsonファイルで 許容する バージョン範囲を 指定して、 ネストされた 依存関係の バージョンを 上書きする 方法が 用意されています。
その 影響を 受け、 非常に 重要な 意味を 持った 例を 紹介します。 peacenotwarモジュールの 改ざんと、 npmパッケージnode-ipcに よる プロテストウェア が 発生した 際の ことです。
最後に オープンソースソフトウェアの セキュリティと アクティビズムは、 私に とって 大切な テーマです。 この ブログ記事は、 202 2年5月に バレンシアで 開催された Cloud Native SecurityConでの 講演を もとにしています。 ご興味が あれば、 こちらから 録画を ご覧いただけます。
Play Video: The Unexpected Demise of Open Source Libraries - Liran Tal, Synk
また、 Gitリポジトリを Snykに 接続し、 自動セキュリティ修正や 依存関係の バージョンアップを 受け取る ことで、 オープンソースの 依存関係の セキュリティに プロアクティブに 取り組む ことを 強く おすすめします。
CTFを 始めよう オンデマンドの バーチャル入門ワークショップを 視聴して、 CTFの 課題の 解き方を 学びましょう。