Osegi
ソフトウェア·2 分で読めます

Takeout X-Ray、500MBのチャット履歴をサーバーなしで解析

Takeout X-Rayは、TelegramやChatGPT、Spotifyなどの巨大なエクスポートをブラウザ内だけで解析する無料Webアプリ。データは外部に送られません。

A browser window showing charts built from a chat and listening history archive, with a lock icon suggesting all data stays on the device.
画像: Хабр

自分のTelegramの過去ログで「Spotify Wrapped」のようなまとめが見たい。開発者の出発点はそこでした。ただし、数GBの私的なやり取りを他人のサーバーに送る気はない。そうして生まれたのが、解析をすべてブラウザ内で行う静的Webアプリ「Takeout X-Ray」です。

Takeout X-Rayとは何か

v2.0では12のサービス、13種類のエクスポート形式に対応します。Telegram、WhatsApp、Discord、X(Twitter)、Spotify、YouTube、TikTok、Chrome、ChatGPT、Claude.ai、さらにAIエージェントのClaude Code CLIとAntigravityのローカルログです。中核はDuckDB-Wasm。データベースエンジンをWebAssemblyにして、ブラウザの中で動かしています。処理は専用のWeb Workerで行うため、重いアーカイブでも画面は固まりません。公開デモには合成データが入っており、ソースはGitHubにあります。

500MBのJSONでもタブが落ちない理由

普通はファイルを丸ごと読み込んでJSON.parseにかけます。しかし開発者によれば、実際のTelegramやGoogle Takeoutの出力は300〜700MB超になることがあり、そのままではメモリ不足でタブが落ちます。そこでデータを流れとして読み、メッセージやツイートを1件読み終えるたびに平らな形式へ変換してDuckDBに渡し、元のデータはすぐ破棄します。書き込みは5,000行ずつのバッチです。

.zipの場合は、まず末尾の目次(central directory)だけを読みます。数MBのテキストの横に数GBの動画や画像があっても、それらは読み込みません。1つのTakeoutにChromeとYouTubeが混在していれば、どちらを解析するか選ぶ画面が出ます。

実データの癖

ChatGPTのconversations.jsonでは、メッセージが単純な配列ではなくグラフ構造で入っています。「Regenerate response」を押しても古い枝は消えず、脇に残ります。パーサーは現在の枝だけをたどり、残りの数からAIの回答を何回再生成したかも割り出せます。Xのアーカイブも純粋なJSONではなく、tweets.jsの先頭にwindow.YTD.tweets.part0 = というJavaScriptの接頭辞が付いています。

アプリは厳格なCSPのもとで動き、起動後に外部へのネットワーク通信は行いません。

注目のアプリ

SUMO:数字パズル

正しいマスを選んで足し算、目標の数に。覚えるのは簡単、極めるのは難しい。無料、全年齢向け。

Dialo:話して学ぶ語学アプリ

AIの会話パートナーと話すだけ。一文ごとに添削され、あなたの言語で解説が返ってきます。9言語、A1からC2まで。

タグ:takeout x-rayduckdb-wasmprivacytelegramchatgptopen source

同じ日のニュース

すべて見る →

関連カテゴリ: ソフトウェア

すべて見る →