急激な成長を遂げる非営利プロジェクトにおいて、Mapboxのような商用マップAPIは、無料枠を使い切った後に1,000回のマップ読み込みごとに5ドルを請求されるなど、法外な費用がかかるようになることがあります。Protomapsエコシステムは、単一のファイルとして配信されるタイル形式であるPMTilesを活用することでこの問題に対処し、開発者が標準的なストレージバケットやCDN上でマップデータをセルフホストすることを可能にします。

PMTilesの仕組み

PMTilesは、WebブラウザやアプリケーションがHTTP Rangeリクエストを介して、巨大なマップファイルの特定のチャンクを要求できるように機能します。このアプローチにより、数千もの個別のタイルファイルを管理するための複雑なバックエンドインフラを必要としないようになります。

RangeリクエストのキャッシュをネイティブにサポートするCDNの場合、デプロイは単一のPMTilesファイルをストレージバケットにアップロードするだけで完了します。Cloudflareのようにネイティブサポートしていないプラットフォームでは、エッジ関数を使用して標準的なx/y/z URLパスを必要なRangeリクエストに変換することができます。

「Protomapsエコシステムの一部であるPMTilesは、単一のファイルとして配信され、Rangeリクエストを通じてアクセス可能なタイル形式であるため、極めてポータブルでデプロイが容易です。」

— Protomaps: Self-hosting map tiles has gotten cheap and easy — Bruce Röttgers

コストとデプロイのロジスティクス

139GBの世界地図を高いレプリケーションを備えたBunny.netのようなCDNにデプロイすることで、ストレージ費用を月額約5ドルに抑えることができます。実用的なシナリオでは、ノートパソコンでヨーロッパの地図を読み込む際に送信されるデータはわずか5MBであり、コストは1セントの数分の一となります。

世界地図ホスティングの推定コスト: Mapbox (1kロードあたり) $5; Bunny.net (月間ストレージ) $5; Bunny.net (1kロードあたり) $0.05
世界地図ホスティングの推定コストbruceroettgers.eu

HN Digestによる図表。bruceroettgers.euの報告数値に基づく。数値はソースの表記通り。

これらの巨大なファイルのアップロードを管理するために、著者は`rclone`を使用してデータをS3互換のストレージゾーンにストリーミングすることを推奨しています。これにより、標準的なHTTP APIを介してアップロードする際に頻繁に発生する15分間のタイムアウト問題を回避できます。

ストレージバケットにファイルをアップロードする方法を示すコードリストのスクリーンショット。
著者は、大きなマップファイルをS3互換ストレージにストリーミングするためのrcloneの使用例をコードで提供しています。bruceroettgers.eu

この画像は、タイムアウト問題を避けるために推奨される、大きなファイルのアップロードを処理するための具体的なコマンドライン手法を説明しています。

実装とセキュリティ

Webアプリケーションへの統合は、MapLibre GLなどのライブラリと併せて`pmtiles` npmパッケージを使用することで実現されます。このセットアップにより、セルフホストインフラの利点を維持しながらマップを埋め込むことができます。

「請求の衝撃」や不正なスクレイピングから保護するために、著者はネットワーク制限を設定し、リクエストの最初の10MB以降のダウンロード速度を10kB/sに制限することを提案しています。これにより、通常のユーザーには遅延を感じさせず、ユーザーが一括でマップファイル全体をダウンロードすることを防ぎます。

Hacker Newsの読者の反応

  • 体験談: あるコメント投稿者は、クラウドストレージを使用したシステムでの経験を共有し、HTTP Rangeリクエストの予測不可能なレイテンシと不十分なキャッシュにより、専用のタイルサーバーを使用するよりもパフォーマンスが低下したと指摘しました。 コメント ↗
  • 代替案: プライバシーとアクセス制御のために同様のインフラを管理しているコメント投稿者は、異なるタイルプロバイダーとやり取りする方法としてntmapsライブラリを使用することを提案しました。 コメント ↗

Hacker Newsのスレッドで出た意見の要約です。事実として検証されたものではありません。 議論の全文を読む ↗