依存クレートゼロ (Rust 標準ライブラリ std だけ) の、認証不要な HTTP/HTTPS プロキシです。
バイナリを 1 つ置いて起動するだけで使えます。
cargo build --release # ビルド (約 1.4 MB のバイナリが 1 つ)
./target/release/rust-http-proxy --lite -p 8080 # 起動 (最速の素通し設定)
curl -x localhost:8080 http://example.com/ # 動作確認ブラウザに設定するなら、自動設定スクリプトの URL http://<ホスト>:8080/proxy.pac を
プロキシ設定の「自動プロキシ設定 URL」に入れるだけです (このプロキシが落ちていれば DIRECT に落ちます)。
cargo install --git https://github.com/takano32/rust-http-proxy でも入ります
(ビルドはメモリ約 90 MB で通ります。下の「ビルド・テスト」を参照)。
キャッシュ・ダッシュボード・統計まで使うなら --lite を外します。
SERVER_PORT=8080 ./target/release/rust-http-proxy
# http://localhost:8080/dashboard … グラフとホスト別統計
# http://localhost:8080/status … JSON、/metrics … Prometheus 形式8 コア / 6.6 GiB (aarch64、big.LITTLE)、loopback で測った値です。
どう測ったか: scripts/cpu-per-request.sh が全部やります。プロキシを big (cpu4-7)・ベンチを LITTLE (cpu0-3) に
taskset で固定し、--lite + PROXY_LOG_LEVEL=warn、応答本文 1 KiB、10 秒 × 3 回以上の中央値
(「CONNECT トンネル 1 本」だけプロキシ cpu4-5 / ベンチ cpu6-7)。この機械は固定の仕方で結果が最大 2 倍動くので、
比べるときは必ず同じ固定の仕方で測ってください。数字は 2026-09-08 の実測で、TODO.md の §2 と同じものです
(出典: T10.11 / T11.4)。括弧の (NN%) はプロキシが使った 1 コアぶんの割合 (割り当ては 4 コア = 400%)。
これが 100% に遠い行はプロキシが律速していない = その req/s はプロキシの上限ではありません。
| 項目 | release (cargo build --release) |
dist (配布用) |
|---|---|---|
| forward, 8 並列 | 38,619 req/s, p50 0.177 ms (157%) | 39,368 req/s, p50 0.175 ms (154%) |
| forward, 8 並列 (キャッシュ HIT) | 76,964 req/s, p50 0.085 ms (169%) | 77,501 req/s, p50 0.085 ms (165%) |
| forward, 64 並列 | 31,819 req/s, p50 1.79 ms, p99 6.5 ms (184%) | 31,443 req/s, p50 1.75 ms, p99 7.3 ms (181%) |
| 1 接続 1 要求 (keep-alive 無し) | 14,105 req/s, p50 0.308 ms (145%) | 13,995 req/s, p50 0.307 ms (141%) |
| CONNECT 確立 (TIME_WAIT 律速 → 下) | 7,951 tunnels/s, p50 0.186 ms (111%) | 7,297 /s, p50 0.186 ms (100%) |
| CONNECT トンネル 1 本 (ベンチ律速 → 下の注) | 3,960 MiB/s (73%) | 3,950 MiB/s (72%) |
| CPU/要求 (forward / HIT / 64 並列) | 41.4 / 22.0 / 58.1 us | 39.6 / 21.4 / 58.0 us |
| CPU (1 接続 1 要求 / CONNECT 確立 / トンネル) | 103.3 us/接続 / 140.0 us/本 / 185.5 us/MiB | 101.3 / 138.5 / 183.3 |
| 1 要求あたりのシステムコール | 5.02 (recvfrom 3 + sendto 2) |
5.02 |
| 同時 5,000 トンネル (アイドル) | 68 スレッド (山 260) / RSS 29.9 MB | 68 (260) / 28.7 MB |
| 暇な keep-alive 接続 2,000 本 | 25 スレッド / RSS 25.2 MB | 28 スレッド / 25.4 MB |
| 起動直後のスレッド | --lite で 4 本、既定で 7 本 |
同左 |
| バイナリ | 1,381,872 B | 1,054,184 B |
release は cargo build --release で作るもの、dist は配布用 (fat LTO、cargo build --profile dist) です。
違いは下の「プロファイルの設定」を見てください。
ベンチ自身の上限 (--only direct = プロキシを通さないオリジン直結) は LITTLE に固定して 55,112 req/s、
固定しなければ 263,821 req/s です。forward・HIT・64 並列・1 接続 1 要求はいずれもベンチが先に頭打ちになるので、
表の req/s はプロキシの上限ではありません。CONNECT 確立はカーネルの TIME_WAIT が律速で
(tcp_max_tw_buckets = 32768 を 10 秒で使い切る)、同じ設定でも tunnels/s は ±25% 暴れます
(比べてよいのは CPU/本。こちらは ±4%)。
着手前 (2026-09-07 の Python ベンチ) は forward 8 並列 188 req/s / p50 42.0 ms、CONNECT 確立 3,506 tunnels/s、
バイナリ 857 KB でした (forward は 205 倍)。当時の値と、コアを固定せずに測っていた頃の値は
TODO.md の §2 と付録 A に残してあります。
上の表はこの機械の big コアの値です。置いた先 (小さなコンテナ、別の CPU) で 1 要求が何 us かは、
実トラフィックからは読めません (0.015 req/s では 5 秒の窓に 0〜1 本しか入らないため)。
PROXY_SELF_BENCH=on で起動すると、待ち受けを開いた直後に loopback だけで
forward 8 並列と CONNECT 8 並列を打ち、同じ指標 (CPU/要求 と CPU/本) を /status の self_bench に残します。
外へは 1 バイトも出しません (相手はこのプロセスの中に立てた 1 KiB のオリジンと、すぐ閉じる sink)。
PROXY_SELF_BENCH=on ./rust-http-proxy # 起動ログに 1 行出て、3 秒で終わる
curl -s localhost:8080/status | grep -o '"self_bench":{[^}]*}'
# {"at":1789558422,"forward_us":42.6,"connect_us":140.0,"cores":4,"requests":20000,
# "connects":2000,"secs":3,"note":"stopped early at the caps (20000 requests, 2000 CONNECTs)"}手元 (既定プロファイル・ログ warn・cpu4-7 に固定) では、この forward_us は 37〜43 us に出ます
(上の表の forward 8 並列 41.4 us と同じ桁)。ただし scripts/cpu-per-request.sh --only forward を
同じ日に回した値より 17〜26% 低めに出ます。低いのは、自己ベンチが自分の要求を統計に載せない
(= ホスト別・接続元別の鍵を取らない) ぶんと、打ち手が同じプロセスの中にいてループバックの往復が
キャッシュに乗るためです。比べるときは「自己ベンチどうし」で比べてください: 置いた先の
forward_us を手元の forward_us で割れば、「そのコンテナの CPU は手元の big コアの何倍遅いか」が
1 つの数字になります (同じコードの同じ経路を同じ測り方で測っているので、この比は読めます)。
読むときの注意:
- 本数に上限があります (forward 20,000 要求 / CONNECT 2,000 本)。速い機械では 3 秒より早く、
先に当たった方で終わります (そのとき
noteにstopped early at the capsと出ます)。 上限があるのは、上限なしだと 1.5 秒で CONNECT を 22,000 本張ってしまい、カーネルに TIME_WAIT が 44,000 本残るためです。secsは回す秒数の上限で、実際にかかった時間ではありません。 - 自己ベンチのぶんは統計に 1 件も入りません:
/statusのtotal_requests/bytes_forwarded、/hosts、/clients、/recent(閉じた接続の個票)、/connections、/historyのどれにも載せません (載せると、静かなプロキシでは起動直後の 3 秒が 1 日ぶんの統計を塗りつぶしてしまいます)。 残るのは/statusのself_benchと/eventsの 1 行だけです。 - 測る 3 秒だけログ水準を
warnに下げます (既定のinfoのままだとアクセスログが数万行出て、 1 行 7.2 us が CPU/要求 に乗ってしまうため)。終わったら元の水準に戻します。 PROXY_ALLOW_LOCAL=off(既定) のままで構いません。自己ベンチが使う 2 つのポート宛てだけを 3 秒間だけ判定から外します (穴はそれ以外に開きません)。- 既定は
offで、そのときは起動時の分岐 1 つ以外何も走りません。置いた先では 再デプロイの直後に 1 回だけonにして数字を取り、offに戻す使い方を想定しています。
上の表は loopback = 「同じ機械の中でどこまで速いか」です。利用者が実際に待つ時間は
別に測っています (Pterodactyl のコンテナに置いた 1 台。要求の 99% が CONNECT、2026-10-20 の tokyo は 0.21 req/s)。
2026-10-08 に本番を nagoya.sorahost.net:50697 から tokyo.sorahost.net:60357 へ切り替えました。下の「いまの数字」は tokyo、そのあとの段落と比較の表は切り替え前の nagoya のものです。
道具は /status /history?res=3600 /metrics と scripts/status-diff.py / scripts/probe-deployed.sh で、
ホスト別の平均は 2 枚の差分で読みます (/status の hosts[] は状態ファイルに残って再起動をまたいで
通算されるので、そのまま読むと直す前の値が何日も混ざります)。
1 回で全部取るなら scripts/collect-deployed.sh HOST:PORT [DIR] (T14.4)。/snapshot を
DIR/<UTC 時刻>-snapshot.json (既定はリポジトリの status/。.gitignore 済み) に保存し、要点
(scripts/snapshot-summary.py)・ホスト別 (status-diff.py。前回の雪像があれば差分)・
ダッシュボードの読み方 (check-dashboard.js)・手元から見た待ち (probe-deployed.sh) を
続けて回して Markdown 1 枚を標準出力に出します (同じものを雪像の隣の <時刻>-collect.md にも残し、
雪像に入らない /daily /healthz /slo /config /profile?res=60 も <時刻>-<口>.json で隣に置きます。
/profile?res=60 は 1 枚 (256 KiB) だと 24 時間のうち約 5 時間しか入らないので、--full が無くても next_offset が null になるまで offset= で追い、samples を 1 つに繋いで truncated を false にしたものを置きます。枚数の上限は MAX_PAGES。
雪像の recent と hosts も、256 KiB で切れていれば既定で offset= で追い、雪像の同じ部に行を足して置き直します (T22.5。形は /snapshot のままなので、下の道具はどれもそのまま全部を読みます。2026-10-17 の tokyo では 1 枚に recent 2,000 件中 576 件 (33 分ぶん)・hosts 1,001 件中 574 件しか入りませんでした)。上限は部ごとに MAX_PAGES 枚と、続きを引く時間の合計 FOLLOW_SECS (既定 60 秒) で、越えたら止めて要約にそう書きます (truncated と next_offset は残りを指したまま)。FULL=0 か --no-follow で前のとおり追いません。
さらに、下の anonymize-snapshot.py で名前・IP・UA だけを置き換えた匿名化した写し <時刻>-snapshot.anon.json と、同じ表で通した <時刻>-daily.anon.json <時刻>-profile_res_60.anon.json も隣に置きます (T17.16。ANON=0 で置きません)。テストへ持ち込むときはこの写しを scripts/testdata/ へ移します)。status-diff.py は /snapshot の JSON を
そのまま読めるので、保存したファイルを 2 つ渡せばいつでも差分が取れます:
scripts/collect-deployed.sh tokyo.sorahost.net:60357 status/tokyo > today.md # 1 日 1 回 (保存先はホストごとに分ける)
PROBE=0 scripts/collect-deployed.sh tokyo.sorahost.net:60357 status/tokyo # 本物の要求を送らずに取る
scripts/collect-deployed.sh --from-server tokyo.sorahost.net:60357 status/tokyo # 回し忘れた日を取り寄せる
scripts/collect-deployed.sh --full tokyo.sorahost.net:60357 status/tokyo # 切れた部の続きも `offset=` で追う
scripts/collect-deployed.sh --no-follow tokyo.sorahost.net:60357 status/tokyo # 切れた `recent`・`hosts` を追わない (T22.5 より前の既定)
scripts/status-diff.py status/*-snapshot.json # 最初と最後で差分
scripts/status-diff.py status/*-snapshot.json --group domain # eTLD+1 でまとめる回し忘れても個票は残ります: プロキシ自身が 1 日 1 回 (UTC 0 時) /snapshot を
$HOME/.rust-http-proxy/snapshots/<日付>.json に書いているので (既定 30 日ぶん。下記
PROXY_SNAPSHOT_DAYS と /snapshots)、--from-server を付けると /snapshots の一覧のうち
手元に無い日付だけを取り寄せて DIR/<日付>T000000Z-snapshot.json に置きます
(中身は /snapshot そのものなので、status-diff.py も snapshot-diff.py も
weekly-report.py もそのまま読めます)。
要点 (snapshot-summary.py) の頭には「無言の再起動」の 1 行が付きます (T23.2): /events の start の直前が shutdown でない起動 (落とされたか、止め方が違う) を時刻・前の起動の長さ・版つきで数え、0 件なら「0 件 (直前が shutdown の起動 N 件)」、/events の部が無い雪像では「判定できず」と書きます
(2026-10-20 の tokyo は 2026-10-17 22:14:52Z の 1 回で、前の起動は 19.2 時間。10-15 の雪像は 0 件)。同じ判定は --criteria phase23 の判定表にも 1 行で入ります (行を足すのは T23.1。判定の関数は要点と同じ scripts/snapshot_criteria.py の silent_restarts())。
要点 (snapshot-summary.py) の最後には 2 つの表が付きます (T17.0c): /events の anomaly を種類別に「起動からの件/時」
(cleared: は数えず、状態ファイルから読み戻した起動より前の出来事は外します) と、接続元の見張り — 新しく現れた接続元
(--prev があれば前の /clients に居ないもの、無ければ first_seen が起動より後)・IP リテラル宛ての要求・443 / 80 以外への
CONNECT (/clients の起動からの通算と、/recent の窓の中の数)・/events の new_client・/readers に居て /clients に居ない
接続元 (プロキシを使わず GET / などで内部の口だけを引いた走査)。認証なしのプロキシで実際に起きる危険は乱用なので、その手がかりを
1 か所に集めています。IP とホスト名はそのまま出ます。
保存先はリポジトリの外にしてください (個票には接続元 IP と宛先ホストが並びます)。
エラーを「使われ方」から切り離して数え直すには scripts/error-mix.py SNAP.json … (T23.0)。
雪像の recent を 1 行 = 1 試行として、(1) いまの物差し (history["3600"] の errors_by_cause の合計 ÷ connects)、
(2) 名前解決に成功した試行を分母にした率 (reason == "error:dns" を分母から外す)、(3) 接続元×宛先の
連続した失敗を 1 件にまとめた率 (間隔の閾 N = 60 / 300 秒。間で成功したら別の一続き)、(4) 宛先ごとの
試行・成功・DNS 失敗・timeout・refused の上位 20 を並べます。どの表にも窓 (recent の min(at)〜max(at)、
件数、errors の count/kept) を添えます。recent は 2,000 件の環状なので窓は 1 日より短いことがあり
(2026-10-20 の雪像では 7.9 時間)、部が無い雪像は「判定できず」と書いて 0 とは書きません。
2 枚の雪像から「何が変わったか」を全部読むのは scripts/snapshot-diff.py A B (T14.17)。
再起動をまたいでいるかを uptime_secs と version で見て、/history をその再起動時刻で切り、
バーストの無い時間帯 (1 時間 300 本未満の標本) どうしで CONNECT 確立の p50 / p95 と
名前解決のミス率を並べます (--criteria phase22 のときだけ、前と後で別々に「300 本と、その期間の
1 時間の本数の中央値の 3 倍の大きい方」以上をバーストとします。T22.1) (/status の通算は再起動で 0 に戻るので、そのまま引き算すると
「いつからの値か」が混ざります)。続けてホスト別・接続元別 (新しく現れた接続元)・
名前解決の warm と引き直し・出来事・エラーの原因別・バーストを出し、--criteria phase14 を
足すと完了の定義に対する判定表 (満たした / 届かず / 判定できず) が最後に付きます。
出力は Markdown なので TODO.md にそのまま貼れます。
0.18.0 までの版は、/history の確立の区間 (と /status の recent_quantiles.connect) に、繋がらずに 502 を返した接続の「失敗するまでの時間」も入っています。黒穴の宛先を繰り返し叩く端末が居ると p95 がその時間になります (2026-10-08 の雪像は p95 2,066 ms)。T20.4 からは、エラーで終わった 1 件は確立 / 初バイト / wait の区間にも直近の標本にも入りません (connects は繋がった本数。失敗は errors / errors_by_cause / /errors / ホスト別の行に残ります。「API」の /history の説明)。前後の雪像が T20.4 をまたぐと connects と確立の分位点の数え方が違うので、その 1 回は下の「成功した接続だけ」の行で比べてください。「平常時の前後」の表には後の雪像の /recent から成功した接続だけの確立時間 (本数・p50・p95。同じ雪像で 398 本・7 / 66 ms) も 1 行並べ、後の期間のエラーが接続の 5% を超えるときは表の下で断ります (T20.1。--criteria が phase14 / phase15 / phase17 / phase18 のときは出しません — この 4 つの出力は過去の判定を出し直せるように変えない決まりです)。判定の部は scripts/snapshot_criteria.py に割ってあります (入口は snapshot-diff.py のまま。そのテストは scripts/test_snapshot_criteria.py)。
scripts/snapshot-diff.py status/2026-09-1{2,6}*-snapshot.json --criteria phase14
scripts/snapshot-diff.py a.json b.json --aaaa aaaa.json --out json # 機械で読む形
scripts/snapshot-diff.py a.json b.json --group domain # eTLD+1 でまとめる
# phase15 の判定。`/daily` は雪像に入っていないので、同時刻に取ったものを渡すと日ごとのミスの幅が並ぶ
scripts/snapshot-diff.py a.json b.json --criteria phase15 --daily b-daily.json
# phase17 の 8 行 (phase15 の 4 行 + conn 役の CPU/要求・`dns_warm_max` と `warm_evicted`・
# `/events` の anomaly の種類別 件/時 (起動から、`cleared:` は数えない)・cgroup の起動からの CPU)。
# `/profile?res=60` も雪像に入らないので渡す (無ければ雪像の `/profile` の部で「参考」)
scripts/snapshot-diff.py a.json b.json --criteria phase17 --daily b-daily.json \
--profile b-profile_res_60.json # 前も比べるなら --profile-before FILE
# phase18 の 10 行 (phase17 の 8 行 + `heap_used + mmap` の 0 時間の雪像からの増えが 5 MB 未満・
# `ipv6.request_probes` が 0)。0 時間の雪像 (再デプロイの直後の 1 枚) は `--zero` で渡す (無ければ「判定できず」)。
# `--daily-snapshots DIR` は、DIR の日次の雪像 (`<日付>T000000Z-snapshot.json`) のうち b と同じ版のものを
# 撮った時刻の順に並べた表 (起動からの時間・`rss`・`heap_used`・`heap_free`・`mmap`・`rings_used.total`・
# `ipv6.attempts`) を判定表の下に付ける
scripts/snapshot-diff.py a.json b.json --criteria phase18 --daily b-daily.json \
--profile b-profile_res_60.json --profile-before a-profile_res_60.json \
--zero zero.json --daily-snapshots status
# phase20 (T20.1) は phase18 と同じ並びの 10 行で、材料も同じ。物差しを 2 つ直してある:
# `heap_used + mmap` の増えは `cache_memory` (メモリのキャッシュ。上限まで使ってよい) を引いてから比べ、
# `discord.com` のミス率・`timeout`・`dns_warm` の最大と `warm_evicted` の 3 行は「表示だけ」(閾を置かず、集計に数えない)
scripts/snapshot-diff.py a.json b.json --criteria phase20 --daily b-daily.json \
--profile b-profile_res_60.json --profile-before a-profile_res_60.json \
--zero zero.json --daily-snapshots status
# phase21 (T21.2) は phase20 と同じ並びの 10 行で、材料も同じ。T20.99 で届かなかった 3 行の読み方を直してある:
# 平常時のミスは「表示だけ」(日ごとの幅と `misses_by_kind` の `cold` / `expired` … の内訳を並べる)、
# conn 役の CPU/要求 は前か後の `/profile` が 12 時間 (`res=60` で 720 標本) に満たなければ「参考」(集計に数えない)、
# `ipv6.request_probes` は最後に探ったのが `--zero` の取得から 3 時間以内なら「満たした」(起動直後は canary が IPv6 をまだ見ていない)
scripts/snapshot-diff.py a.json b.json --criteria phase21 --daily b-daily.json \
--profile b-profile_res_60.json --profile-before a-profile_res_60.json \
--zero zero.json --daily-snapshots status
# phase22 (T22.1) は phase21 の 10 行 + 22a の 4 行で、材料も同じ。足した 4 行は
# `dns_slow` が窓のミスの合計 1,000 ms 未満の窓で立った件数 (0 で満たした。新しい閾 = 合計 1,000 ms 以上 (T22.2) での件/時は表示だけ)、
# keep-warm の既定を戻す 2 つの条件 (`stale_retries` が `stale_hits` の 1% 以上・`refused`/`unreachable`/`timeout` の
# **接続 1 本あたり**が前の 1.5 倍以上で「届かず」。件/時は表示だけ。T22.4)、T22.4 の目安 (引き直しの回/時が前の半分以下・
# `expired` + `warm_stale` の増えが 1 日 10 回以内)。phase21 の `/events` の行 (`dns_slow` ≤ 0.1 件/時) は phase22 では表示だけ
# (件/時の閾は使われ方で落ちるので、`dns_slow` の判定は上の行に任せる)。
# 裏の引き直しの行は warm 0 (keep-warm を止めた既定) だと warm の平均で割れないので、理由と通算の 1 時間あたりを並べる。
# **平常時の切り方もこの定義だけ違う**: 1 時間の本数が 300 本と、その期間の中央値の 3 倍の大きい方以上をバーストとする
# (量の多い tokyo で 300 本だと 29 標本のうち 23 がバーストになった。量の少ない期間は 300 本の切り方のまま)。
# §2 の表の頭に前と後の閾を書き、`--out json` の `history` に `median_k` `medians` `limits` が足される
scripts/snapshot-diff.py a.json b.json --criteria phase22 --daily b-daily.json \
--profile b-profile_res_60.json --profile-before a-profile_res_60.json \
--zero zero.json --daily-snapshots status
# phase23 (T23.1) は phase22 の 14 行を土台に、エラーの行の**分母**と heap の行の書き方だけを直した 16 行。
# 接続のエラー (`refused`・`unreachable`・`timeout`) は `/recent` の connect の 1 行を 1 試行とし、
# **名前解決に失敗した行 (`error:dns`) を分母から外した**「名前解決に成功した試行あたり」で見る
# (前の期間の 1.5 倍以上なら「届かず」。件/時と、分母が `connects` だった phase22 の行は表示だけ)。
# `/recent` は 2,000 件の環状なので、**窓と試行の本数が実測の欄に出る** (前と後で長さが違う)。
# 平常時のミスの行は、同じ雪像の `/recent` から「試行あたり」と「名前解決に成功した試行あたり」も並べる
# (死んだ名前の総当たりという使われ方の数字なので表示だけ)。heap の行は、`--zero` の雪像と起動が
# 違うときに `/events` の `start` の時刻を添える (黙って「判定できず」にしない。2026-10-17 22:14:52Z の
# 無言の再起動がこれで読める)。最後の行は無言の再起動 (`/events` の `start` の直前に `shutdown` が無い起動)
# が 0 回 (T23.2)。`collect-deployed.sh` の既定は phase23
scripts/snapshot-diff.py a.json b.json --criteria phase23 --daily b-daily.json \
--profile b-profile_res_60.json --profile-before a-profile_res_60.json \
--zero zero.json --daily-snapshots status
# `/snapshot` より前の形 (`/status` と `/history` を 1 本ずつ取ったファイル群) からも組めます
scripts/snapshot-diff.py --from-files status/2026-09-12T2018Z \
--from-files status/2026-09-16T0106Z--group domain は「dlsite 全体で何件か」を読むためのまとめ方です (T14.54)。/hosts は
img.dlsite.jp と www.dlsite.jp を別の行で持つので、相手ごとの合計が読めません。
--group domain は eTLD+1 が同じホスト同士を 1 行にまとめます (img.dlsite.jp +
www.dlsite.jp → dlsite.jp。www.dlsite.com は eTLD+1 が違うので別の行です)。
snapshot-diff.py にも status-diff.py にも同じ --group domain があります。
- eTLD+1 は
scripts/proxydata.pyのetld1()による近似です。Public Suffix List (約 9,000 行) は持たず、ラベルが 2 つ以上の公開接尾辞の短い表 (co.jp/ne.jp/ac.jp/go.jp/or.jp/co.uk/com.au…) に当たれば 3 ラベル (www.dmm.co.jp→dmm.co.jp)、当たらなければ末尾 2 ラベル (a.b.example.io→example.io) にします。事業者が 1 段下を配る形 (github.ioのような) は分けられません — 外れたら表に 1 行足してください - まとめるのは同じ種類どうしです (CONNECT と forward は混ぜません)。要求数・バイト・
エラー・名前解決・確立の合計 ms は和、
avg_msは計測数 (timed) で重みづけ、 p50 / p95 は足せないので 2 つ以上まとまった行では出しません (maxは最大)。AAAAは全部同じときだけその値です - IP リテラル宛て・
localhost・表からあふれたotherはまとめずにそのまま出ます
collect-deployed.sh は前回の雪像を見つけるとこれを呼び、要約のいちばん最後に判定表を置きます
(CRITERIA=off で止められます。判定表の相手は BEFORE=<雪像> で、0 時間の雪像は ZERO=<雪像> で渡せます。下の「運用」の 4)。道具の単体テストは python3 -m unittest discover -s scripts
(架空の雪像 scripts/testdata/snapshot-a.json / snapshot-b.json と、下の匿名化した実データで回ります)。
1 週間ぶんをまとめて読むのは scripts/weekly-report.py (T14.40)。snapshot-diff.py が
「2 枚の間に何が変わったか」を見るのに対して、こちらは溜まった雪像を日で切って 1 週間を 1 枚にします。
入力は雪像の置き場 (status/) でも、*-snapshot.json を並べても、
/daily (T14.20) の JSON でも、$HOME/.rust-http-proxy.daily.jsonl そのものでも構いません
(混ぜてよい。7 日ぶん無ければあるぶんで出して、何枚・何日ぶんだったかを頭に書きます)。
出るのは表 8 つ — 要求数 / CONNECT 確立 p50・p95 / 名前解決のミス率 / エラー (原因別) / 山 /
接続元の出入り / 遅かったホスト上位 / 新しく見たホスト:
scripts/weekly-report.py status/ -o week.md # 置き場ごと渡す
scripts/weekly-report.py status/*-snapshot.json --days 7 --top 10
curl -s 'http://PROXY/daily?n=7' > daily.json && scripts/weekly-report.py daily.json
scripts/weekly-report.py status/ --out json # 表の元の辞書をそのまま数字の求め方は snapshot-diff.py と同じです: /history?res=3600 を UTC の日で切って
同じ aggregate() に通すので、同じ期間を切れば同じ値が出ます (分位点の補間は
crates/metrics/src/history.rs の quantile_ms、「平常時」= 1 時間 300 本未満の標本を使うのも同じ)。
日ごとの表には出どころ (/history?res=3600 か /daily) が入ります。
/hosts と /clients は .rrd の通算なのでいちばん古い雪像といちばん新しい雪像の差で読み、
雪像が 1 枚しか無いときは「引き算できない」と断って通算のまま並べます。
「山」は /bursts (T14.6) があれば写真の枚数と最大、無ければ /history の active_max で代えます。
出力は「デプロイ先の現在地」を締める文書と、次の Phase の入力にするためのものです。
実データを匿名化してテストへ持ち込むのは scripts/anonymize-snapshot.py (T14.35)。雪像には
個人の閲覧先が並ぶのでそのままではリポジトリに入れられませんが、ホスト名 (host-0001.g0007.example)・
接続元 IP (198.51.100.x)・名前解決の答え (203.0.113.x)・User-Agent (ua-01。agents の一覧も、
いまの版の agent (単数) も、/events の new_client: の説明の終わりの agent "…" も同じ表)・
/log の行と /events の説明の中の名前と IP だけを置き換えれば、本物の分布のまま持ち込めます。
置き換えは決定的 (同じ入力からは同じ出力) なので、匿名化したあとの 2 枚でそのまま差分が取れます。
ホスト名の gNNNN はまとめの単位 (eTLD+1) の番号で、img.dlsite.jp と www.dlsite.jp は
同じ番号 (= 匿名化後も同じ eTLD+1 gNNNN.example) に落ちます。上の --group domain の粒度が
匿名化したあとも読めるようにするためです (T14.54)。古い形 (host-0001.example) の
匿名化済みファイルはそのまま通ります (2 回かけても名前は変わりません)。
数字は 1 つも変わりません (件数・ms・区間・閉じた理由・時刻・version・path)。connect:// の
scheme と port、表の上限を越えた分の行 (other) はそのままです。
scripts/anonymize-snapshot.py status/2026-09-16T0106Z-snapshot.json \
-o scripts/testdata/deployed-2026-09-16.anon.json
# `/snapshot` より前の形 (1 本ずつ取ったファイル群) からも組めます (`-metrics` 等は飛ばします)
scripts/anonymize-snapshot.py status/2026-09-16T0106Z-* -o anon.json
scripts/snapshot-diff.py old.anon.json new.anon.json # 匿名化したあとでも差分は取れる
# 雪像に入らない口 (`/daily` `/profile?res=60`) も雪像と同じ表で (既定の出力は隣の `<名前>.anon.json`。T17.16)
scripts/anonymize-snapshot.py status/2026-09-26T114602Z-snapshot.json -o new.anon.json \
--side status/2026-09-26T114602Z-daily.json --side status/2026-09-26T114602Z-profile_res_60.json=p60.anon.json同梱の scripts/testdata/deployed-2026-09-16.anon.json (778 KiB) がその出力で、デプロイ先の
2026-09-16 の雪像そのままです (ホスト 817 件・名前解決 90 件・res=60 は 1,440 標本)。
node scripts/check-dashboard.js と python3 -m unittest discover -s scripts がこれを読み、
/history?res=3600 を起動時刻で切った平常時から T14.0 の表と同じ数字 (名前解決 0.55 回/接続、
CONNECT 確立 p50 8.3 / p95 80.7 ms、ミス 1 回 11.5 ms) が出ることを見ています。
2 枚目の scripts/testdata/deployed-2026-09-26.anon.json (2.3 MiB。隣に -daily.anon.json と -profile_res_60.anon.json) は
2026-09-26 の雪像 (版 0.1.0+2e57626、起動から 47.2 時間) で、2026-09-16 の版に無かった recent / profile / events /
hosts_series と T16.0 の 3 列が入っています。2026-09-16 → 2026-09-26 で --criteria phase15 / phase17 の判定表が出て、
T16.99 の数字 (conn 役 0.0013 コア、dns_warm_max 15、warm_evicted 0、dns_slow 0.61 件/時) が出ることを見ています
(T17.16。名前は番号が前後で合わないので、discord.com を見張る行は「判定できず」になります)。
いまの数字は 2026-10-20、tokyo (tokyo.sorahost.net:60357) に Phase 22 (v0.22.6) をデプロイして 64.3 時間の実測です。出どころは雪像 1 枚
(scripts/collect-deployed.sh tokyo.sorahost.net:60357 status/tokyo が取った status/tokyo/2026-10-20T143453Z-snapshot.json)。版は 0.22.6+000681e です。
この間 (2026-10-17 22:14:52Z の起動から。その前の 03:02:22Z の起動は 19.2 時間で終わっている) に使われ方がまた変わり、宛先は 523 → 723 名前、中身はメールサーバー (pop / imap の 995・993・143) の総当たりになりました。エラー 6,609 件のほぼ全部が同じ接続元 10.255.0.1 のこの使い方から出ています。下の表は再起動からの全期間 (62 時間ぶんの 63 標本 41,379 本) で数えています。
TODO.md の §2「デプロイ先の現在地 (2026-10-20)」と同じ数字です。雪像はリポジトリに入れません (利用者の閲覧先ホストと接続元 IP が並びます)。
右の列は同じ tokyo の 1 枚前 (Phase 21、2026-10-17、29.7 時間) です。
| 項目 | tokyo (Phase 22、64.3 時間) | 前: tokyo (Phase 21) |
|---|---|---|
| CONNECT 確立 | avg 70.4 / p50 18.2 / p95 366.1 ms (区間の 56.2% が 10〜25 ms、13.6% が 100〜250 ms、8.5% が 250〜500 ms) | avg 29.0 / p50 14.9 / p95 170.1 ms |
| CONNECT 確立 (直近 1,024 本) | p50 13.2 / p90 249.3 / p99 306.0 ms | p50 12.9 / p90 20.3 / p99 264 ms |
利用者が待つ wait |
p50 18.4 / p95 384.2 ms (直近 1 日の 14,918 本) | p50 15.1 / p95 174.4 ms |
| 名前解決のミス | 0.051 回/接続、ミス 1 回 233.6 ms、接続 1 本あたり 11.9 ms (宛先 723 名前) | 0.026 回/接続、ミス 1 回 72.7 ms、1 本あたり 1.9 ms (523 名前) |
| 期限切れの答え (T21.3) | ミス 210 回、すぐ使った回 20,606・失敗して引き直した回 0 (T22.4 で keep-warm を止めた) | ミス 64 回、すぐ使った回 1,252・0 |
| 裏の引き直し | 384.8 回/時、名前ごとの最大 8.9 回/時 | 1,993 回/時、最大 78.2 |
| CPU の絞り (0.5 コアの枠) | 0 / 522,598 周期、cgroup の通算 0.0016 コア | 0 / 245,471 周期、0.0016 コア |
| エラー | 6,609 件 (timeout 4,212 は pop / imap の死んだ宛先。/errors の 964 件は全部 1 つの接続元) |
151 件 |
| メモリ | RSS 42.2 MB、heap_used + mmap は 20.0 MB (0 時間の 18.0 から +2.0 だが、起動が違うので判定できない) |
RSS 57.7 MB、+3.6 MB |
| IPv6 の探り | ipv6.request_probes 0 回 |
0 回 |
- 確立 p50 14.9 → 18.2 ms、p95 170 → 366 ms は宛先のせいです。区間の 13.6% が 100〜250 ms、8.5% が 250〜500 ms で、名前解決も 1.9 → 11.9 ms/接続になりました (
coldのミス 1,484 回の大半が存在しないメールの名前)。プロキシの取り分は前の Phase で 0 のままです。 - T22.4 (keep-warm を止める) はそのままにしました (2026-10-20)。戻す条件の 1 つ「接続のエラーが接続 1 本あたり前の 1.5 倍」には数字が当たりましたが (7.80 倍)、中身は 1 本の接続元が死んだメールサーバーを 1 件 10 秒ずつ待っている分で、
dns_slowは合計 1,000 ms 未満の窓 0 件、stale_retries0 / 20,606 です。 - 接続元が全部
10.255.0.1に見えます (手前の NAT の内側の番地)。tokyo では接続元ごとの見張りは効きません。 - 2026-10-08 に nagoya から tokyo へ切り替えました (
TODO.mdの付録 A「デプロイ先の切り替え」)。nagoya の数字と tokyo の 1・2 枚目は付録 A に残してあります。
直す前 (2026-09-10) との比較は日付ごとの表に残してあります (TODO.md の付録 A「デプロイ先の現在地の
古い版」。2026-09-10 / 2026-09-12 / 2026-09-16 / 2026-09-18 / 2026-09-24 / 2026-09-26 / 2026-10-01 / 2026-10-08 の 8 枚 (nagoya) と 2026-10-15・2026-10-17 の 2 枚 (tokyo) を 1 文字も変えずに移しました。2026-09-18 の 1 枚には
Phase 14 の名前解決 0.55 → 0.144 回/接続と、p50 6 ms に届かなかった理由、2026-09-24 の 1 枚には Phase 15 の discord.com 0.441 → 0.01 があります)。山場は 5 つで、
CONNECT 確立 (AAAA のあるホスト) 257 → 9 ms (2026-09-12)、接続元から見た応答の p50 327.8 → 8.0 ms (同)、
RSS 215.9 → 21.1 MB (先行確保 201.3 → 0、2026-09-16)、GET / 502 → 200 (2026-09-12)、
原因の分からなかったエラー 12 件が原因別と個票つきになったこと (2026-09-16) です。
250 ms が消えたのは Happy Eyeballs の順番を変えたからです。AAAA (IPv6) を持つホストへは IPv6 を先に試し、 返らなければ 250 ms (RFC 8305 の Connection Attempt Delay) 待ってから IPv4 に移ります。IPv6 が黙って落ちる この環境では、AAAA のあるホスト全部でこの 250 ms を毎回払っていました。今はホストごとに最後に勝った族を覚え、 IPv6 が起動から 1 度も勝たずに 3 回続けて負けたら初めて見るホストも IPv4 から試します (「特徴」の IPv4 / IPv6 の項。IPv6 が生き返ったかは canary が 1 分に 1 回見ていて、繋がれば自動で戻ります。 canary が IPv6 を見ていないときは 600 秒に 1 回、利用者の要求で IPv6 を先頭に戻して試します)。
残っている待ちは遠いホストの RTT だけです。上のとおり確立の中央値は 1 往復そのもので、プロキシ側では縮みません。
Phase 14 の頃の 1 枚にあった尾 (p90 53.5 / p95 78.0 ms) は、2026-10-01 の 1 枚では平常時の wait で p90 9.9 / p95 18.0 ms でした
(Phase 15 から CPU の絞りは 0 のまま。TODO.md の T15.5。尾の残りは遠い相手への connect で、行き先の構成で上下します)。
名前解決は、nagoya では待ちの主役ではありませんでした (接続 1 本あたり 6.4 → 1.6 ms)。tokyo では接続 1 本あたり 4.2 ms でしたが、T21.3 で 1.9 ms になりました (期限切れの答えの引き直しを待たなくなったため。残りは初めて引く名前)。
上の 250 ms は loopback では再現しません。 ベンチは宛先を IP リテラルで書くので、プロキシから見た
候補が 1 つしかなく、Happy Eyeballs (候補が 2 つ以上のときだけ通る道) に一度も入らないからです。
scripts/deployed-like.sh は root なしで「IPv6 が黙って落ちる」小さな環境を作り、その中でベンチを回します。
scripts/deployed-like.sh -- scripts/cpu-per-request.sh --only connect-multi --seconds 5
scripts/cpu-per-request.sh --deployed-like --only connect-multi --seconds 5 # 同じもの作るものは 4 つで、どれもデプロイ先 (Pterodactyl コンテナ) に合わせてあります。
- ネット名前空間 (lo だけ)。外へは出られないので、オリジンはベンチの内蔵のものだけです
- IPv6 の既定経路を
dev loに置く。出ていった SYN は lo を回って戻り、自分宛てではないので黙って 捨てられ、connectは約 1 秒ハングしてから失敗します (デプロイ先の実測と同じ姿)。blackholeの経路ではこうなりません — この機械ではconnectがその場でEINVALを返すので、 プロキシは待たずに IPv4 へ移り、250 ms が出ません /etc/hostsにmulti.testの 2 行 (2001:db8::1= 上の黒穴、127.0.0.1= 生きている)。 プロキシのgetaddrinfoが AAAA と A の 2 候補を返しますulimit -n 1024と cgroup 256 MiB (systemd-run --user --scope。デプロイ先のmax_conns240 は このulimitから決まります)
--only connect-multi はこの multi.test 宛てに CONNECT を張り続け、1 本目の確立時間と、そのあとの
p50 / p95 / max を出します。Happy Eyeballs に記憶を持たせる前後で比べると:
| プロキシ | 1 本目 (8 スレッドの中央値) | p50 | p95 | 確立/秒 |
|---|---|---|---|---|
記憶を持つ前 (41e918f) |
257.6 ms | 251.7 ms | 257.0 ms | 32 /s |
| いま | 261.7 ms | 0.57 ms | 1.60 ms | 7,479 /s |
2026-09-16、--conc 8 --seconds 5。記憶を持つ前は毎回 250 ms を払い、いまは同時に走り出した
8 本だけ払います (2 本目からはホストごとの記憶が効く)。終わりに /status の ipv6 を印字します
(いまのバイナリは {"attempts":16,"wins":0,"losses":16,"v4_first":true} = IPv6 は 1 度も勝たず、
IPv4 を先頭にする学習が効いた状態)。--conc は 3 以上にしてください (2 本目からは記憶が効いて
IPv6 を試さないので、「3 回続けて負けたら IPv4 を先頭」は同時に走り出した本数ぶんからしか立ちません)。
名前空間が作れない機械では「使えない」と印字して終了コード 2 で終わります
(--only connect-multi を名前空間の外で回したときも同じく 2)。
バーストのときに「上限に当たったら暇なトンネルを 1 本閉じる」(PROXY_MAX_CONNS の行) と
「山の写真」(/bursts) が本当に効くかは、バーストが来るまで分かりません。/recent には
閉じた接続 1 本ごとの「いつ・どこへ・どれだけ・どれだけ生きたか」があるので、同じ時間間隔・
同じ本数で手元の内蔵オリジンへ張り直せば、バーストの形だけ再現できます。
scripts/deployed-like.sh --nofile 4096 --hosts-from scripts/testdata/replay-burst.json -- \
./target/release/bench --proxy 127.0.0.1:18080 --only replay \
--replay-file scripts/testdata/replay-burst.json \
--rtt-file scripts/testdata/replay-hosts.json --speed 10--replay-fileが読むのは/recentの応答・/snapshot・/connectionsの JSON です (/connectionsはまだ閉じていない接続なので寿命が無く、age_secsを「開いてからの秒」と 「これから生きる秒」の両方に使い、bytesは全部下りに寄せます)- 宛先はホスト名をそのまま CONNECT の target に載せ、ポートだけ内蔵オリジンのものに
置き換えます。名前解決は
scripts/deployed-like.sh --hosts-from <個票>が名前空間の中の/etc/hostsに127.0.0.1の A を並べて引き受けます (AAAA は足しません — IPv6 の 黒穴を見るのはmulti.testの役目で、混ぜるとバーストではなく Happy Eyeballs を測ることに なります)。足した名前は名前空間の中にしか出ません opened_at(at) の間隔と寿命と上り / 下りのバイトを真似ます。--speed 10で 10 倍速 (間隔も寿命も 1/10)。--replay-secs Nで途中で打ち切れます- RTT は
--rtt-file(/hostsの JSON) のrtt_ms.avgを内蔵オリジンの応答遅延として 真似ます (個票が/snapshotなら中のhostsを自動で見ます。無ければ 0 ms) - 終わりに本数・掛かった時間・CONNECT 確立の p50 / p95 / max・失敗の数と、プロキシの
/statusのevicted_idle/rejected_overloadと/burstsの枚数を印字します (引く先は--admin HOST:PORT、既定は--proxyと同じ) - 再生するのは CONNECT だけです (
kindがhttpの個票は数えて飛ばします)。上りは 合図の 16 バイトが必ず流れるので、上り 16 B 未満の個票はそのぶんだけ多く流れます
同梱の scripts/testdata/replay-burst.json は架空の個票 (ホスト名は example.invalid) で、
デプロイ先で見た山 (同時 218 / 上限 240) の形を 260 本で作ってあります。PROXY_MAX_CONNS=240
のプロキシに対して 10 倍速で再生すると:
| 見るもの | 実測 (2026-09-16) |
|---|---|
| 張れたトンネル / 失敗 | 260 / 0 |
| プロキシに閉じられた本数 (上限に当たった追い出し) | 20 |
| CONNECT 確立 p50 / p95 / max | 0.754 / 10.541 / 28.423 ms |
/status の evicted_idle / rejected_overload |
20 / 0 |
/bursts の写真 |
1 枚 (active 240 / threshold 120 / parked 235 / relaying 5 / 宛先 4 種) |
rejected_overload が 0 のまま 20 本ぶん席を作れているので、山が上限を越えても 503 を返さずに
受けられていることが手元で確かめられます。
この行だけはベンチ側が律速しています。 プロキシは splice(2) で 1 バイトもコピーしませんが、
ベンチは送る側 (blaster) と受ける側 (reader) で 1 回ずつコピーするので、ベンチのスレッドの方が先に頭打ちになります。
そのため MiB/s は「ベンチをどのコアに置いたか」で 2.6 倍動きます
(2026-09-08、同じ release バイナリ、--only tunnel --conc 1 を 10 秒 × 3 回の中央値。
上の表の 3,960 MiB/s は同じレシピを別の回に測ったもので、この経路のぶれは ±15% あります):
| 置き方 | スループット | プロキシの CPU | プロキシが使ったコア |
|---|---|---|---|
| プロキシ cpu4-5 / ベンチ cpu6-7 (現在の既定) | 3,956 MiB/s | 182.7 us/MiB (user 10.9) | 1 コアの 72% |
| プロキシ cpu4-7 / ベンチ cpu0-3 (LITTLE) | 1,534 MiB/s | 223.2 us/MiB (user 14.4) | 1 コアの 34% |
プロキシ側は 1 コアを 72% しか使っておらず、飽和しているのはベンチのスレッド (1 本が 100%) の方です。
この経路の主指標は CPU/MiB で、scripts/cpu-per-request.sh --only tunnel --conc 1 が
CPU/MiB と「プロキシが 1 コアの何 % を使ったか」を一緒に出します。
- 認証不要(No Auth): 事前設定なしで誰でも即座に利用可能
- 依存クレートゼロ: 外部クレート依存がないため、ビルド負荷が最小限で高速にビルド可能
- 超軽量バイナリ:
cargo build --releaseで約 1.4 MB、配布用のdistプロファイル (fat LTO) なら約 1.0 MB - HTTP / HTTPS (CONNECTトンネリング) 対応
- 同時ミスの合流 (collapsed forwarding): 同じ URL を複数のクライアントが同時に要求しても、オリジンへ行くのは
最初の 1 本だけ。残りはその保存完了を待ってキャッシュから受け取る (
cache=COALESCED)。保存されなかった場合は 各自で取りに行く。保存されないと分かった URL では次から合流を通さない (待っても保存されないので待ち損。Cache-Control: no-storeのオリジンへ 8 並列で同じ URL を叩くと 30,000 → 36,500 req/s)。 覚えるのはブルームフィルタで、PROXY_CACHE_TTL_SECSと同じ周期で入れ替えて忘れる (オリジンがCache-Controlを変えたら、次の周期から合流に戻る)。入れ替えた回数は/statusのcache.not_stored_rotationsと/metricsのsorahost_cache_not_stored_rotations_totalに出ます - keep-alive と接続プール: クライアント接続は HTTP/1.1 の持続接続 (アイドル 15 秒。
1 本の接続で 1,000 要求を捌いたら閉じます —
crates/configのDEFAULT_MAX_REQUESTS_PER_CONN。 環境変数では変えられません。1,000 要求目の応答にはConnection: closeが付くので、 クライアントは「この応答で終わり」と分かってから閉じられます (入れ違いで次の要求を送って 取りこぼすことがありません)。.envの読み直しは「次の接続から効く」ので、ずっと繋ぎっぱなしのクライアントでも 遅くとも 1,000 要求後には新しい設定に入れ替わります)、オリジンへの接続は ホストごとにプールして再利用 (既定 64 本・全体 256 本まで、アイドル 60 秒まで保持、再利用前に 1 回のrecv(MSG_PEEK|MSG_DONTWAIT)で生存確認)。 再利用できた割合は/statusのorigin_connections.pool_hit_ratioに出ます。本文は必ず解読してから自前で枠付けし直す (Content-Length / 再 chunk / close) ので、HTTP/1.0 のオリジンやクライアントが混ざっても正しく持続する - Range / HEAD: キャッシュ済みの完全な表現から
206 Partial Content(単一範囲、If-Range対応、範囲外は416) やHEAD応答を切り出す。未キャッシュの Range 要求はそのまま転送 - HTTPS のオリジンもキャッシュ (CA 不要): クライアントが
GET /https/example.com/path(プロキシをオリジンとして叩く) かGET https://example.com/pathで頼めば、プロキシがシステムの OpenSSL で HTTPS 取得し、平文 HTTP で返して保存する。 応答のLocationは/https/...形式に書き換えるのでリダイレクトもプロキシに留まる。CONNECT トンネルは従来どおり素通し - IPv4 / IPv6 デュアルスタック:
[::]と0.0.0.0の両方で待ち受け (IPv6 が無ければ IPv4 のみ)、 オリジンへは A / AAAA を引いて IPv6 優先の Happy Eyeballs (RFC 8305) で速い方に接続、http://[2001:db8::1]:8080/などの IPv6 リテラルにも対応。PROXY_IPV6=offで IPv4 のみにできる。 IPv6 が黙って落ちる環境 (経路はあるのに繋がらない) では自動で IPv4 を先にする: ホストごとに 最後に接続できた族を覚え、IPv6 が起動から 1 度も勝たずに 3 回続けて負けたら初めて見るホストも IPv4 から試す (RFC 8305 §8)。IPv6 が生き返ったかは canary の IPv6 側の 1 本 (1 分に 1 回、利用者を待たせない) が見ていて、 繋がれば自動で戻る。canary が IPv6 を見ていないとき (PROXY_CANARY=off、PROXY_CANARY_IPV6=off、--liteとPROXY_STATS_PERSIST=off、 canary の宛先に AAAA が無い) は、今までどおり 600 秒に 1 回だけ利用者の要求で IPv6 を先頭に戻して試す (T17.7)。 試行そのものはやめないので、IPv4 が死んでいるホストは IPv6 で拾える。 勝敗は/statusのipv6と/metricsのsorahost_ipv6_*に出る。/statusのipv6.probe_byは いま IPv6 を探っているのが誰か ("canary"= canary が直近 600 秒に IPv6 を 1 本試した、"request"= 利用者の要求で探る)。probe_byは「いま」だけなので、利用者の要求で実際に探った回数はipv6.request_probes(IPv4 優先の間に IPv6 を先頭に戻した回数。通算)、 最後の時刻はipv6.request_probe_at(epoch 秒、無ければ 0) で読む (T18.1)。attemptsは「IPv6 の候補を起動した回数」で、 IPv4 を先頭に置いた接続が Happy Eyeballs の間隔 (既定 250 ms) を過ぎて IPv6 の候補を追い掛けで出した回でも増えるので、探りの数ではない。確実に IPv6 を避けたいならoff。 待ち受けの受け入れ待ち行列は既定min(1024, somaxconn)(PROXY_LISTEN_BACKLOG)。Rust の既定の 128 だと、 ブラウザが 1 ページで開く数十本の CONNECT で溢れて SYN が捨てられ、クライアントの再送で 1 秒待たされます - RFC 7230 / RFC 9110 準拠:
- Hop-by-hop ヘッダーの自動除去
ViaヘッダーおよびX-Forwarded-Forヘッダーの付与・伝搬。Viaの印は1.1 rust-http-proxy/<起動ごとの 8 桁 16 進>で、自分の印が付いた要求を受けたら508 Loop Detected(印が起動ごとなので、rust-http-proxy を 2 段に並べた正当な構成は誤検出しません)
- ACL / ホストフィルタリング:
PROXY_ALLOW_HOSTS/PROXY_DENY_HOSTSによる許可・拒否リスト(ワイルドカード対応)と 403 Forbidden 制御PROXY_ALLOW_CLIENTSによる接続元の許可リスト (10.0.0.0/8のような CIDR 可)。 一覧に無い相手は accept 直後に閉じます (内部エンドポイントも含めて。既定は全許可)PROXY_MAX_CONNS_PER_CLIENTによる接続元ごとの同時接続の上限 (既定0= 無効)。 1 人がPROXY_MAX_CONNSを使い切るのを防ぐ公平さの上限で、超えた接続は 503。 自分宛て (/statusなど) は上限の外で受けるので、上限に当たっている相手からでも監視は取れます
- 2 段キャッシュ (メモリ + ディスク) — 固まらない限界まで使う:
- 既定は 自動モード: 「これだけは空けておく」安全マージンを毎秒の観測から動的に決め、 残りをすべてキャッシュに充てる。他プロセスが資源を使えばその分だけ自動で縮退
- 先行確保は使われるまでしない: 保存が 1 件も無い間はバラストを取らず、保存が始まったら実使用量の 2 倍までを先に押さえる (
PROXY_CACHE_RESERVE。従来の「予算いっぱいを最初から」はeager) - 固まらない安全策: cgroup 制限 /
SERVER_MEMORYを上限として尊重、PSI (メモリ圧迫) や ENOSPC を検知したら即座に返却して以後のマージンを広げる、tmpfs 上のディレクトリは検知して警告 - RFC 9111 の再検証: 期限切れでも ETag / Last-Modified 付きのエントリは残し、
If-None-Match/If-Modified-Sinceで再検証 (304 なら本文転送なし)。オリジン障害時は stale を配信 - 大きなオブジェクトもストリーミング: 本文を RAM に溜めず、ディスクへ流しながら配信。ディスク層は 1 オブジェクト 4 GiB まで
- L1: メモリ LRU、L2: ディスク LRU (256 分割ディレクトリ、再起動後もインデックスを復元)
Cache-Control/s-maxage/max-age/Expires/Last-Modifiedからの経験則 /no-store/private/Set-Cookie/Varyを尊重- ヒット時は
X-Cache/Ageヘッダーを付与。クライアントの条件付き要求にはキャッシュから 304 を返す
- 詳細なアクセスログ:
- 既定 (INFO) で 1 リクエスト 1 行のアクセスログ (キャッシュ HIT/MISS/REVALIDATED/STALE 付き) を標準出力へ
PROXY_LOG_LEVELでerror/warn/info/debug/traceを切り替え
.envの自動再読込:$HOME/.envの保存を inotify で検知し、ACL・タイムアウト・ログレベルを再起動なしで反映- DNS キャッシュ: 名前解決の結果を 60 秒保持し、CONNECT ごとの解決をなくす。解決失敗時は古い結果で凌ぐ。
直近 60 秒に使われた名前は期限の 3/4 (45 秒) で裏で引き直すので、使い続けているホストは
期限切れのミス (
getaddrinfoの待ち) を払いません。引き直しは専用のスレッド 1 本 (dns-refresh、 最初の引き直しで起きる) が順にやり、要求の経路は待ちません。そのぶん古い答えで繋ぐ窓が 最長 TTL の 1/4 (15 秒) できますが、その間に IP が変わっていても次の候補へ行くだけです (Happy Eyeballs)。解決に失敗した名前は 60 秒覚えて引き直しません。 さらに keep-warm (既定は止めてある。T22.4。PROXY_DNS_WARM_SECS=3600で動く): 直近 3,600 秒 (PROXY_DNS_WARM_SECS) に 2 回以上使われた名前 (warm) は、 使われていなくても 45 秒 (3/4 TTL) ごとに裏で引き直し続けるので、TTL より長い間隔で来る ホスト (数分おきの push 通知など) もミスになりません。同時に warm でいられるのは 32 件まで (最後の使用が古いものから外れ、最後の使用から 3,600 秒過ぎたら止まります)。 さらに serve-stale (RFC 8767。T21.3): 期限が切れていても、引いてから 21,600 秒 (PROXY_DNS_STALE_SECS、0 で止める) 未満の答えは待たずにそのまま使い、裏で 1 回だけ引き直します。 間遠な名前 (1 時間以上あけて使う名前) の期限切れのミスを利用者に待たせないためです。 古い答えで繋げなかったとき (refused/unreachable/timeout) は、その場で 1 回だけ引き直し、 番地が変わっていれば 1 回だけ繋ぎ直します (CONNECT と forward の両方。番地が同じなら繋ぎ直さず元のエラー)。/statusのdns.stale_hitsが古い答えで繋ぎに行った回数 (ミスには数えません)、dns.stale_retriesが 古い答えで繋げずに引き直した回数です (そのとき同期で引いた回はmisses_by_kind.expiredにも入ります)。stale_servedは別物で、引き直しが失敗したときに古い答え (1 時間以内) で凌いだ回数です。 この規則を変えたらミスと引き直しがどう動くかは、scripts/dns-replay.py SNAP.jsonが雪像 1 枚 (/recentの到着列と/hosts_seriesの助走) で見積もります (T17.5。いまの規則の値を同じ区間の/historyと並べ、promoteの条件を差し替えた案と比べる。--jsonで機械で読む形)。--serve-stale SECS(何度でも) で serve-stale の窓ごとのexpiredと引き直しの数も並べます (T21.3)。--gridは serve-stale 21,600 秒を基準に、warm の枠 16 / 64・窓 900 秒・warm をやめる・warm_promoteの予定を答えの齢から出す、 を並べ、expired+warm_staleのミスの 1 日あたりの増え・引き直しの回/時・名前ごとの最大を出します (T22.4。区間の前から居た名前を warm でない / warm の 2 通りで置く)。--grid --seriesは/hosts_series(上位 16 名前) だけで回す参考です。 名前解決は 1 要求 1 回: ローカル宛て (SSRF) の判定で引いた答えをそのまま接続に使うので、 キャッシュを切っていても判定と接続が別の答えを見ることはない。 答えが変わった回数 (changes): 引き直し (keep-warm と期限切れの再解決) は元々 1 つ前の答えを手元に持っているので、変わったかどうかを数えるだけで「その名前の アドレスがどれくらいの頻度で動くか」(CDN のローテーション頻度) が分かります。名前ごとは/dnsのchanges、合計は/statusのdns.changesです。読み方はchanges ÷ (misses + refreshes)= 引き直し 1 回あたりに答えが変わる割合で、 TTL 60 秒が長すぎるか短すぎるかの材料になります。0 に近ければ答えは固定 = TTL を延ばして 引き直しを減らせる (getaddrinfoの回数が減る)、1 に近ければ毎回違う = TTL を延ばすと 古いアドレスへ繋ぐ窓がそのぶん延びる、と読みます。順番が入れ替わっただけは数えません (getaddrinfoは同じ答えを違う順で返すことがあるため) - 入場制御 & ネガティブキャッシュ: 層が埋まったら 2 回目に見た URL だけ保存。404 / 410 は既定 60 秒だけ保持
- ドメインのブロックリスト: hosts 形式のファイルや URL (1 日 1 回自動更新) から読み、広告・トラッカーを CONNECT の段階で 403 にする
- 統計と履歴の永続化: 固定サイズ (8 MiB) の状態ファイルに、履歴 3 解像度 (5 秒 × 1 時間、1 分 × 1 日、
1 時間 × 30 日) を環状に、ホスト別・接続元別の上位 1000 を固定スロットに書く。ファイルは伸びず、再起動後も表とグラフが残る。
形式に版があり、いまは版 3 (
SHPRRD03)。版 2 のファイルは起動時に 1 回だけ版 3 の形へ詰め直すので、 版を上げても通算の統計 (要求数・ホスト・履歴) は消えない (下記「状態ファイルの版」)。 停止シグナル (SIGTERM / SIGINT) では表を書き出してから終了する (3 秒以内、2 回目のシグナルで即終了)。 あわせて 1 日 1 行の要約を$HOME/.rust-http-proxy.daily.jsonlに永久に残す (下記/daily) - 日次の snapshot: 1 日 1 回 (UTC 0 時)、その時点の
/snapshotをまるごと$HOME/.rust-http-proxy/snapshots/<YYYY-MM-DD>.jsonに残す (既定 30 日ぶん、31 個目で最古を消す。 1 ファイル 4 MiB まで)。外から取りに行かなくても、見に行ったときに 30 日ぶんの個票がある。 読む口は/snapshots(一覧) と/snapshots/<date>(下記PROXY_SNAPSHOT_DAYS) - 個票の永続化: 上の状態ファイルの隣にもう 1 つ、固定サイズ (4 MiB) の個票のファイル
(
$HOME/.rust-http-proxy.recent) を置き、/recent(閉じた接続) ・/errors・/bursts(山の写真) ・/events(出来事) ・/logを再起動をまたいで残す。書くのは履歴スレッドの 5 秒の周期だけ (接続を受ける経路は今までどおりメモリのリングに 書くだけで、1 命令も増えない) と、停止シグナルの最後の 1 回。これも伸びず、版が違うファイルは読み捨てて作り直す。 統計の.rrdとファイルを分けてあるのは、版を別々に上げられるようにするため (個票の形を変えても統計は触らない) - 状態ファイルの版 (
.rrd): 先頭 8 バイトが版の印で、いまはSHPRRD03(版 3)。大きさは 8,388,608 B 固定 (領域の合計は 4,274,176 B、残りは次に項目が増えたときの余白)。1 レコードは 履歴の標本が 1,024 B (いま使っているのは 504 B)、ホスト別・接続元別が 640 B (同 568 B) で、 項目は**「固定の順 + 予備」**。末尾に足す限り版は上がりません (古いファイルはその位置が ゼロ埋めなので 0 として読み戻ります)。/statusのstate_fileにversionとconverted_fromが出ます- 版 2 (
SHPRRD02) のファイルは、起動時に 1 回だけ版 3 の形へ詰め直します (領域ごとに読み、レコードの末尾をゼロで伸ばして書き戻すだけ。通算の統計は 1 件も消えません)。 そのときstate_file.converted_fromが2になり (詰め直していなければnull)、起動のログに所要が出ます (手元の実測 65〜97 ms、満杯のファイルで 66 ms。要求を受ける経路の費用は 0) - 退避 (
.rrd.v2など) は残さずその場で書き換えます。版の印は最後に書くので、詰め直しの途中で 落ちたファイルは次の起動で「壊れている」と見なして作り直します (中途半端に混ざった版は残りません) - 版 1 以前・短いファイル・先頭が壊れたファイルは、今までどおり読み捨てて作り直します (統計は運用の参考値なので、そこまで面倒は見ません)
- 版 2 (
- 接続元別の統計: 接続元 IP ごとの要求数・転送量・拒否数・応答時間を
/status/metricsとダッシュボードに出す。 個票/clientsには「初めて見た時刻・User-Agent・宛先の種類・使ったポート・IP リテラル宛て」も出る (認証なしの公開プロキシなので、見知らぬ接続元が誰のどのプログラムかを読むため) /proxy.pac: ブラウザの自動設定スクリプト。自分自身・ローカル・PROXY_PAC_DIRECTのホストは DIRECT、 それ以外はこのプロキシ経由 (落ちていれば DIRECT)。ブラウザにhttp://<host>:<port>/proxy.pacを設定するだけ- ヘルスチェック & メトリクス & 操作:
-
/(エンドポイントの一覧。ブラウザでプロキシの URL を開いた人への案内。--liteでも出ます) -
応答の形の版
schema: JSON を返す口はどれも先頭に"schema":1を持ちます (読む道具が「この JSON はどの版か」を推測しなくて済むように。版の履歴は下記「動作確認 (curl)」の節) -
/config(効いている設定とその出どころ。下記「環境変数」の節) -
/dashboard(ブラウザ用のコントロールパネル: 要求/転送レート・命中率・CONNECT 確立 p50 (直近 1,024 本の実測) と p95・ 今日の SLO (PROXY_SLOの 4 つの閾を満たした 5 秒の割合。T14.50)・ 名前解決ミス / 秒 とエラー / 秒・スレッド / fd・メモリ/ディスクのグラフ、ホスト別統計、 最近のエラー (直近 20。まとめた行 (T20.3) は最初〜最後の時刻と×N。T21.5) と いまの接続 (上位 50。列に「速さ」=rate_bps= 直近 5 秒のバイト/秒。T14.39) の表 (どちらも 5 秒ごと)、 URL の照会と削除、全消去)、/status,/history(JSON)、/metrics(Prometheus 形式) -
/inspect(「調査」ページ: 起きたことを時間軸で読む。T14.8 / T14.44):/dashboardが「いま」の画面なのに対して、 閉じた接続の個票を時間軸で読む別のページです (/dashboard/inspectも同じもの)。 「今日」(/daily) と「今週」(/dailyの 7 行 +/snapshots) と「出来事と異常」(/events) も このページにあります — 日次・週次・異常を見に行く場所が 1 つで済むように (T14.44) -
/probe.html(「端末から測る」ページ。T14.33): プロキシ側の計測は「プロキシに届いてから」しか 見えないので、利用者のブラウザから/statusの往復と、プロキシ経由で小さな URL を取る時間を測り、/clientsの自分の行 (T14.7) とrtt_ms(T14.5) に並べて読むページです (測った値はサーバーへ送りません。--liteでも開けます) -
/healthz(本当の健康診断):{"ok":bool,"checks":{...}}の軽い JSON (1 KiB 弱) で、fatalな検査が 1 つでも偽なら503 Service Unavailableを返します (Pterodactyl やモニタが 200 / 503 で判断できるように。以前は/statusの写しで、いつでも 200 でした)。検査は 7 つ:listening(待ち受けが生きている = この応答が届いている)、fds(開いている記述子がmax_fdsの 90% 未満)、connections(いまの接続数がPROXY_MAX_CONNS未満。この/healthz自身の 1 本は除きます — 上限に当たっている最中でも T13.2 の「上限 + 4 本」の枠でこの応答は届くため)、state_file(状態ファイルの書込エラーが直近 5 分で増えていない)、listen_overflows(受け入れ待ち行列が直近 5 分で溢れていない。ネットワーク名前空間ごとの数なので、 同じ名前空間に他の待ち受けがあるとそちらの溢れも数えます。コンテナなら実質このプロキシのぶんです)、resolver(名前解決の最後のミスが 2 秒未満 = リゾルバが死んでいない)、cpu(cgroup の CPU の上限で直近 5 分に絞られた期間が 50% 未満。"throttled_5m"/"periods_5m"/"percent"も出ます。T15.0 (6)。起動から 5 分に満たない間はnull— 5 分の窓は「いちばん新しい標本から 300 秒ぶん」を足すだけなので、溜まる前は数秒ぶんの 割合しか出ません。異常の規則と同じ物差しで黙ります)。cpuだけはfatalではありません ("fatal":falseが出ます): 偽になると本文のokは 偽になりますが、状態は 200 のままです。絞られているのは「遅いが動いている」状態で、 パネルが 503 で再起動をかける作りだと再起動の輪に入るためです (503 にするかは運用の決めごと)。"fatal"は偽のときだけ出ます (無い =fatal)。 この環境で調べられないものはnullで、okの判定に入れません (Linux 以外・/proc/netの無いコンテナ・状態ファイル無し・まだ名前解決をしていない・ 履歴スレッドが動いていない--lite/PROXY_STATS_PERSIST=off)。問い合わせ (?sort=など) は読みません -
capabilities(この環境で何が読めるか):/statusと/configのcapabilitiesに{"proc_syscall":true,"tcp_info":true,"cgroup_cpu":true,"cgroup_pressure":true,"ipv6_route":true,"resolver_ms":9,"home_writable":true,"checked_at":1758...,"proc_schedstat":true}。 統計のnullが「無かった」のか「読めなかった」のかを先に答えるためのもので、proc_syscallは/proc/self/task/<tid>/syscall(スレッドの状態)、tcp_infoは待ち受けソケットへのgetsockopt(SOL_TCP, TCP_INFO)(カーネルの RTT と再送)、cgroup_cpu/cgroup_pressureは自分の cgroup のcpu.stat/cpu.pressure(CPU の絞りと PSI)、ipv6_routeは/proc/net/ipv6_routeの既定経路、resolver_msはexample.comを 1 回引くのにかかった ms (締め切り 2 秒、失敗はnull)、home_writableは$HOMEに書けるか (状態ファイルの置き場)、proc_schedstatは/proc/self/task/<tid>/schedstat(走れるのに走れなかった時間。/profileのrun_delay_us) を見ます。schedstatはCONFIG_SCHEDSTATSを入れていないカーネルでは ファイルごと無いので、そこではfalse=/profileのrun_delay_usがnullになります。 判定は起動時 1 回と 1 時間ごとで (.envの監視スレッドのついで。要求の経路では何もしません)、checked_atがその時刻です。Linux 以外では/procも cgroup も無いのでfalseになります -
個票 (集計では読めない「誰が・いつ・なぜ」。T13.4):
/errors?n=100で直近のエラー (時刻・connect/forward/canary・宛先・原因・名前解決 ms・接続 ms・返した状態コード・接続元。 500 件の環状、プロセスのメモリだけ)。 同じ失敗の繰り返しは 1 行にまとめます (T20.3): 新しい方から 8 行の中にkind・target・cause・status・clientが全部同じ行があれば、行を足さずにその行のrepeats(回数。初めは 1) を増やし、last_at(最後の 1 回の時刻) とdns_ms/connect_ms(最後の 1 回の値) を書き換えます。atは最初の 1 回の時刻のままで、並びも行ができた順 (新しい順) のままです。repeatsとlast_atは各行の末尾にあり、まとめていない行はrepeats1・last_atはatと同じです (0.18.0までの版にはこの 2 つが無いので、1 回として読んでください)。recorded(起動からの通算) はまとめた回も 1 ずつ増え、keptとcountは行の数です。同じ宛先への同じ失敗が何千回続いても 1 行で済むので、その間に起きた別の失敗が環から押し出されません (0.18.0までは 500 行が 1 種類で埋まりました)。repeatsは状態ファイルに残しません:.recentに書くのは行ができたときの 1 回だけなので、再起動のあとはrepeats1・last_atはat(最初の 1 回の時刻) に戻ります (原因別の通算は/historyのerrors_by_cause)。/explainのエラーの個票と/snapshotのerrorsも同じ行です。scripts/snapshot-summary.pyとscripts/snapshot-diff.pyは個票の件数をrepeatsを足して数え (まとめた行があるときは1,002 件 (3 行)のように行数を並べます)、まとめた行に×N (最後 <時刻>)を付けます。snapshot-diff.pyは、前の雪像より前にできた行でもlast_atが窓の中なら数えます (回数は行ごとにしか無いので、その行の窓より前の回も一緒に数えます)。 403 で拒否した要求もここに入ります (原因はacl/blocklist/connect_port/local、状態コード 403)。 403 は 5xx ではないので/statusのerrors_by_cause(8 つの原因) には乗らず、 集計ではhosts[]のblockedに数えるだけです。誰が何を拒否されたかはこの個票でだけ読めます。 読めずに断った要求もここに入ります (T14.28。原因はbad_request:<reason>の 6 種 =bad_request:request_line(要求行が空白で 2 つに割れない / 長すぎて 414) /bad_request:header_too_large(ヘッダーが長すぎて 431) /bad_request:method(メソッドが HTTP の token として読めない) /bad_request:no_host(オリジン形式なのにHostが無い) /bad_request:bad_uri(絶対 URI やマッピング形式にホストが無い) /bad_request:body_framing(Content-LengthとTransfer-Encoding: chunkedが両方ある = 要求の密輸)。 状態コードは実際に返したものなので400/414/431のどれかで、 宛先 (target) は空です — 要求行そのものは個票に入れません (壊れた要求行にも URL や ヘッダーが載っているため。入るのは接続元 IP と時刻と理由だけ)。数だけなら/statusのrejected_requestsで理由別に読めます)、/connectionsでいま開いている接続の一覧 (接続 id・接続元・宛先 (CONNECT はトンネルの相手、 keep-alive の HTTP は最初の要求の宛先。どちらも接続あたり 1 回しか書きません。 形はどちらもhost:portで、ポートを書かない要求 (http://example.com/) には ホスト別統計の鍵 (scheme://host:port) と同じ規則でスキームの既定 (http なら 80) を補います)・connect/http・ 状態relaying/parked/reading/serving/queued・開始からの秒・転送バイト・記述子の数・ いまの転送速度rate_bps(直近 5 秒のバイト/秒。下のrate_bps_totalを参照)。--liteでは空)。 さらにトンネル 1 本ごとの証拠 (T15.0 (4)。「回っているのか・待っているのか」を 1 行で見分けるための 5 つ):tid— いま受け持っているスレッドの番号 (gettid)。/profileのthreads_topのtidと同じ番号なので、 CPU を食っているスレッドと、そのスレッドが抱えている接続を突き合わせられます。0(= 欄が出ない) は 「預かり所にいる / 分からない」。預かり所から戻ると別のワーカーが受け持つので、そのたびに書き直しますhalf_closed(client/origin) とhalf_closed_secs— 先に EOF を出した側と、そこから経った秒。 閉じた理由 (client_eof/server_eof) と同じ出どころなので、閉じる前から「どちらが先に手を引いたか」が読めますspins— 中継の輪が「pollに起こされたのに 1 バイトも進まなかった」回数の通算。 寿命に対して桁違いに大きければ空回りです (T15.5 で直した形は、これが秒あたり数万で増え続けました)。 直したあとは「pollが返した起床は必ず 1 回の読み書きにつながる」ので、ここは伸びませんrevents({"client":"HUP|ERR","origin":""}) — 前の周のpollが返した旗 (IN/OUT/ERR/HUP/NVAL)。HUPやERRが立ったままspinsが伸びていれば、誰も面倒を見ていない記述子があるということです。 預かり所から戻った直後の 1 回は旗を持ちません (旗は中継の輪が持つので、戻るたびに空から始まります)idle_secs— 1 バイトも動いていない秒 (5 秒ごとに history スレッドが数えます)。CONNECT の行だけで、httpの行には出しません (累計バイトを置くのはトンネルだけのため)。 累計バイトを書くのは中継が待ちに入る回だけなので、EAGAINに落ちずに進み続ける飽和したトンネルでは 全速で流れていてもここが伸びます (rate_bpsも同じ性質です)。spinsとrate_bpsと併せて読んでください
既定のままの欄は出しません (
tid0 /spins0 / 旗なし / 半閉じなし /idle_secs0)。読む側は「無ければ既定値」と 読んでください。/recentのmsが 0 の段を出さないのと同じ作法で、理由は応答の大きさです — この口は 「256 KiB に 1,000 本入る」ことを守っており、1 行あたりの余りは 5 B しかありません。 ただしその 1,000 本は「証拠つきの行が少数である 1,000 本」です: 実測で既定の 1 行は 255 B、tidと旗が出る行は 301 B (全部がそれなら 860 本)、5 つとも出る行は 442 B (同 588 本) で、そこを越えるとtruncatedがtrueになりshown本までしか出ません (ページ送りoffset=が入るまでの既知の穴です)。このほか、
/dns?sort=age|host|misses&limit=300で名前解決の表の中身 (ホスト・アドレス・解決からの秒・残り TTL・ 最後に使ってからの秒・勝った族・負のキャッシュなら理由・裏で引き直し中か・warm か (warm) と 次に裏で引き直すまでの秒 (next_refresh_secs)・OS に問い合わせた回数・ 引き直しで答えが変わった回数 (changes)・warm の間に引かれた回数 (warm_requests。refreshesと比べると「引き直し 1 回で何本の要求を救ったか」が読めます。 ただし warm なのにミスした回 (misses_by_kind.warm_stale) も入るので、 実際に救えた数はwarm_requests − misses_by_kind.warm_staleです)・ ミスの内訳 (misses_by_kind=cold/expired/warm_stale/negative。 和はその行のmissesと一致します))、/log?n=200で warn 以上の直近の行 (1,000 行の環状、1 行 256 B まで。infoのアクセスログは写しません — 熱い経路を重くしないため。コンソールが流れて消える環境向け。 個票のファイルには 1 行 219 B まで残します)、/hosts?sort=requests|errors|dns|slow&limit=200&offset=0(最大 1,000) で.rrdにある全ホストを/statusのhosts[]と同じ形で (/statusの上位 50 は変えません。scripts/status-diff.pyがこの JSON もそのまま読みます。offset=はsort=で並べたあとの列を何本飛ばすかで、応答のnext_offsetが次の頁のoffsetです (続きが無ければnull)。1,000 件 × 408 B = 398 KiB は 1 枚 256 KiB に入らず 639 件で切れていました。T15.0 (11))、/clients?sort=requests|recent|targets|literal&limit=200(最大 1,000) で全接続元の個票 (T14.7)。/statusのclients[]と同じ欄に加えてfirst_seen(初めて見た時刻。0はこの起動より前から居る)、agents(見たUser-Agent最大 4 種・先頭 128 バイト。拾うのは接続の最初の要求だけ) とagents_dropped、distinct_targets(宛先ホストの種類。最大 256 で頭打ちになり、そのときはdistinct_targets_cappedがtrue)、ports(使ったポートと要求数、最大 8 種) とports_other、literal_targets(IP リテラル宛ての要求数 = 名前を引かずに繋いでいる数)、nonstandard_ports(443 / 80 以外への要求数)、rejected(PROXY_MAX_CONNS_PER_CLIENTに当たって断った本数。T14.13) が出ます。"persisted": falseは「これらの新しい欄は状態ファイルに残らない (再起動で消える)」の意味です (.rrdの 1 スロットは名前 128 B + 55 項目 = 568 B を使っていて、agentsだけで 4 × 128 B 要るため。 版 3 で余白が 68 B に広がってもここには入りません)。 T14.5 の RTT の 4 欄 (32 B) と T14.26 の向き別のバイト 2 欄 (16 B) はスロットの余白に入ったので残ります (552 → 568 B。版 3 (8 MiB 化) で余白は 4 → 68 B、数字の欄ならあと 8 つ足せます) -
内部エンドポイントの読み手
/readers(T14.53): 上の/clientsが「プロキシとして通した相手」なのに対して、 こちらは「この口 (/status/clients/recent…) を読んでいる相手」です。認証なしの公開ポートでは 誰でも個票が読めるので、走査なのか自分の監視なのかを見分けるために、接続元ごとにcount(引いた回数)・last_at(最後に引いた時刻、epoch 秒)・last_path(最後に引いたパス) だけを 別の小さな表 (最大 256 接続元、溢れたら最後に引いたのがいちばん古い行から捨てる) に持ちます。/statusには上位 20 (countの多い順、同数は最後に引いた新しい順 → 名前順) がreadersに出て、/readersは全部 (256 KiB まで。count/shown/truncated/max_readers/max_pathつき)。last_pathは先頭 64 バイトで、?以降は落とします (記録に問い合わせ文字列を入れない Phase 14 の決まり)。 知らないパス (404) も数えます — 走査を見つけるのがこの表の仕事なので、200 だけ数えても意味がありません。 プロキシとしての要求 (CONNECT / forward) は 1 件も入りません (T14.7 のclients[]はその逆で、 自分宛てだけの接続を数えません。2 つの表は混ざらないので、clients[]に居ない接続元がreadersに 居れば「プロキシは使わずに個票だけ読んでいる相手」です)。表はメモリだけで、状態ファイルには残りません ("persisted": false)。費用は内部エンドポイントの経路の鍵 1 回だけで、要求の経路には 1 命令も足していません。 数えるのは応答を組む前なので、読んだ応答にはその要求自身が入っています (/statusを 3 回引いた 3 回目の応答がcount: 3。測る行為が状態を変えるので、/readersを引けばその 1 回も数に入ります) -
閉じた接続の個票 (T14.4):
/recent?n=200&offset=0&since=<epoch>&client=<ip>&sort=time|slow|bytes(既定 200、最大 2,000)。/connectionsが「いま」しか見せないのに対し、こちらは「起きたこと」です。1 件 = 接続 id・開いた時刻 (at、epoch 秒)・ 接続元 (client)・宛先 (target。CONNECT も http もhost:port)・種類 (kind=connect/http)・ 寿命 (secs)・要求数 (reqs、http だけ)・ 上り / 下り別のバイト (up/down)・閉じた理由 (reason)・最後の応答の状態コード (status、http だけ)・ 預かり所にいた合計秒と回数 (parked_secs/parks)・段階の ms (ms=dns/connect。first_byteは 0 でなければ)・ カーネルの RTT と再送 (rtt_msとretrans。どちらも{"client":…,"origin":…}でclient= 利用者 → プロキシ、origin= プロキシ → 宛先。T14.5)・ SNI (sni。CONNECT の最初のバイトから覗いた名前。覗いていなければnull。T14.38)・ 中継の詰まりの向き (stall_ms={"client":…,"origin":…}。T14.42)・ 空回りの回数 (spins。中継の輪が「起こされたのに 1 バイトも進まなかった」回数の通算。寿命に対して桁違いに 大きければ空回りです。T15.0 (4)) と 半閉じ (half_closed=client/origin/null、half_closed_ms= 半閉じから反対側が閉じる (= この接続が終わる) までの ms。半閉じしていなければどちらもnull。/connectionsのhalf_closedと同じ出どころなので、閉じる前に見た行とそのまま突き合わせられます)。/connectionsと違って、この 3 つは 0 でもnullでも必ず出します (件数で切る口なので、 「欄が無い」= 古い版と区別させるため)。 理由はclient_eof(クライアントが先に EOF) /server_eof(宛先が先に EOF) /idle_timeout(トンネルの無通信打ち切り) /keepalive_timeout(次の要求を待ちきれなかった) /evicted(上限に当たって席を作るために閉じた。PROXY_MAX_CONNS) /limit(1 接続あたりの要求数の上限) /client_dead(クライアントが黙って消えた。TCP keepalive が尽きてETIMEDOUT。PROXY_TCP_KEEPALIVE。T14.52) /error:<原因>(原因は/statusのerrors_by_causeと同じ 8 つ) /shutdown(その他のプロキシ側の都合) の 9 種類。client_deadの読み方: 端末がスリープしたり回線が切れたりすると FIN も RST も来ないので、そのトンネルはPROXY_TUNNEL_IDLE_SECS(300 秒) の期限切れまで残り、keepalive が無ければidle_timeoutとして数えられます。 つまりidle_timeoutのうち「本当に暇だった」ぶんと「相手が消えていた」ぶんを切り分けるのがこの理由です。 さらにstall_ms.client(上の「中継の詰まりの向き」) と並べると、消えた相手 (client_dead) と 遅いだけの相手 (client_eofだがstall_ms.clientが大きい) が区別できます。書くのは接続の終了で 1 回だけで、要求ごとにも中継のバイトごとにも 何も書きません。2,000 件の環状 (ありふれた 1 件 414 B。T15.0 (4) のspinsと半閉じ 2 つで 363 B から +51 B)。?since=は「開いた時刻がこれ以降」、?client=は接続元の完全一致、?sort=slowは確立 (ms.connect) の遅い順、?sort=bytesは転送の多い順。 自分宛て (/status/dashboard…) だけで終わった接続は残しません — 監視が 5 秒おきに引くとリングがそれで埋まるためです (数は/statusにあります)。?offset=で全部読む (T15.0 (11)): 2,000 件は 1 件 424 B で応答の上限 256 KiB の 3.2 倍あり、1 枚では 615 件しか返りません ("truncated": true)。offset=はいまの並び (sort=のあと。既定は閉じた新しい順) を 何本飛ばすかで、応答のnext_offsetが次の頁のoffsetです (続きが無ければnull)。idやatは頁を跨ぐ目印には使えません:idは accept 順、atは開いた時刻で、どちらも「閉じた順」の並びとは 一致しないためです (長生きのトンネルは若いidで最後に閉じます)。取っている間に新しく接続が閉じると並びが 1 つずれて 同じ行が 2 つの頁に出ることはあります (欠けることはありません)。行にidがあるので読む側で落としてください。?client=の絞りは頁より先に効くので、1 人ぶんを追うときは今までどおり?client=だけで環の最古まで届きます。ms.connectとms.client_readの読み方 (2026-09-18 に直しました。T15.0 (1)): 接続の段は「確立までの全体 − 名前解決」 で出していますが、PROXY_ALLOW_LOCAL=false(既定) では宛先が社内アドレスでないかを確かめる入口の判定が、確立の時計より前に 名前を引きます。この日までは時計に入っていないその費用まで引いていたので、名前解決を払った個票のconnectが 0 に潰れ (デプロイ先の実測: ミスした 54 本のうち 40 本が 0 ms。そのカーネル RTT の中央値は 11.4 ms)、同じぶんがclient_readに 二重に乗っていました。いまは自分の窓の内側で払ったぶんだけを引き、client_readからは除きます。 見出しの確立 p50 (/statusのrecent_quantiles.connect、/historyのconnect、/slo) は 1 ms も変わりません (時計そのものは動かしていないため)。なお forward (http) で既にあるオリジン接続を使い回した要求だけは、入口の判定が払った 名前解決がどの段にも出ません (dnsもconnectも 0 のまま、client_readに乗ったまま)。直っているのは 新しくオリジンへ繋いだ要求です -
カーネルの RTT と再送 (T14.5): Linux では接続が閉じるときに
getsockopt(SOL_TCP, TCP_INFO)を読み、 平滑化 RTT (tcpi_rtt) と再送の通算 (tcpi_total_retrans) を残します。「30 ms は RTT か、それとも プロキシの待ちか」が初めて切り分けられ、利用者側の回線の質 (再送) も数字になります。 読むのは接続の終わりだけです: CONNECT トンネルは終わりに両側 (getsockopt2 回)、 keep-alive の HTTP 接続は終わりにクライアント側 (1 回)、オリジンへのプールの接続は 捨てるとき (期限切れか相手が閉じていたとき) にオリジン側。要求ごとには 1 度も読みません。 出るのは 3 か所:/recentの 1 件 (rtt_ms/retransの両側)、/hostsと/statusのhosts[](オリジン側) とclients[](クライアント側) のrtt_ms(avg/min/samples) とretrans、/metricsのsorahost_rtt_seconds_sum/_count({side="client"|"origin"}の 2 系列だけ。 ホスト別は出しません — 系列が増えすぎるため)。Linux 以外と--liteでは読まないのでnull/ 0 です (/recentのrtt_msはその側がnull、hosts[]/clients[]は"rtt_ms":null)。clients[]のrtt_ms/retransの母数 (2026-09-18 に直しました。T15.0 (12)): この行に入れるのは プロキシとして使われた接続だけです。それまでは閉じた接続を無条件に入れていたので、/statusを 5 秒おきに引く監視が居るだけで、プロキシとしても使っている IP のsamplesだけがrequestsと 関係なく積み上がっていました (デプロイ先の実測:requests27 に対してsamples68。この欄は.rrdに 残るので再起動をまたいで残ります)。いまは同じ行のrequestsと同じ母数 = 「プロキシとして通した接続」で、 自分宛て (/status/clients…) だけで終わった接続は 1 本も入りません (その相手はreadersの側です)。 接続 1 本ごとの RTT が要るときは/recentのrtt_msを読んでください (そちらは今までどおり全部の接続に出ます) -
CONNECT の SNI (T14.38): CONNECT のあとクライアントが最初に送るのは TLS の ClientHello で、その中の SNI (
server_name) に本当の宛先の名前があります。200 Connection Establishedを書いたあと、最初の中継の前に 1 回だけrecv(MSG_PEEK)(1,024 バイト) で覗き、/recentの 1 件にsniとして残します。バイトは消費しないので そのあとのspliceは今までどおりで、費用はトンネル 1 本につきシステムコール 1 回だけです (要求ごとにも中継のバイトごとにも 0)。読み方は 2 つあります:- IP リテラル宛ての CONNECT (
/clientsのliteral_targets) では、targetが93.184.216.34:443でもsniが本当の宛先です。宛先を名前で書かないクライアントが 何を見に行っているかは、これでしか分かりません targetのホストとsniが食い違う本数が/statusのsni_mismatches(全体) と/hostsのsni_mismatch(ホスト別) です。食い違う理由は (a) 宛先を IP で書いている (上の 1 つめ。これがいちばん多い)、(b) 設定を間違えたクライアント (別のホストへ CONNECT している)、(c) domain fronting (CONNECT の宛先と TLS の宛先をわざと変える) の 3 つで、どれかはこの数字だけでは決まりません (/recentの 1 件を読んでください)。 どちらもメモリだけなので再起動で 0 に戻ります 覗くのは 443 宛ての CONNECT だけです (それ以外は TLS とは限らないため。PROXY_PEEK_SNI=on:<port>で別のポートも 443 扱いにできます)。--liteとPROXY_PEEK_SNI=offでは 1 度も覗きません。ClientHello が壊れていても・1,024 バイトに 収まらなくても・TLS でなくてもsniはnullになるだけで、中継はそのまま続きます
- IP リテラル宛ての CONNECT (
-
確立時の SYN の再送 (T14.46): Linux ではオリジンへ繋がった直後に 1 回だけ
getsockopt(SOL_TCP, TCP_INFO)を読み、tcpi_total_retransを/recentの 1 件にsyn_retransとして残します。確立した直後はまだデータを 1 バイトも送っていないので、 この値は SYN (3-way handshake) の再送回数そのものです。- 読み方: Linux の既定 (
tcp_syn_retries) では最初の SYN の 1 秒後・3 秒後・7 秒後…と 送り直すので、syn_retransが 1 なら確立に約 1 秒、2 なら約 3 秒よけいにかかっています。ms.connectが 1,000 ms 台・3,000 ms 台に飛んでいる個票はここが 1 以上のはずで、 「相手が遅い」のではなく SYN が途中で落ちた (相手の受け入れ待ち行列が溢れた・ 経路で落ちた) ことが分かります kernel.tcp.syn_retrans(T14.12) との違い: あちらは/proc/net/netstatの値で ネットワーク名前空間まるごとの累計なので、同じ機械の他のプロセスのぶんも入ります。 こちらは接続 1 本ごとなので、「どの宛先へのどの接続が再送したか」まで分かります (溢れているのがこちらの待ち受けか相手の待ち受けかは、この 2 つを突き合わせて切り分けます)- 合計は
/statusの末尾のsyn_retrans_total、ホスト別は/hosts(と/statusのhosts[]) のsyn_retransです (clients[]には出しません — 接続元別には 「繋ぎに行く先」が無いため)。どちらもメモリだけなので再起動で 0 に戻ります - 費用は CONNECT 1 本につき
getsockopt1 回だけです。forward は プールが接続を張るときだけ通るので、使い回した要求では 1 度も読みません (要求ごとの増加は 0)。Linux 以外では常に 0 です
- 読み方: Linux の既定 (
-
中継の詰まりの向き (T14.42): 転送が遅いとき、遅いのは「クライアントの回線 (下り)」か 「オリジン」か「利用者の上り」か。トンネルの中継は
spliceがEAGAINで止まるとpollで書けるのを待つので、その待ち時間を書けなかった側ごとに足せば切り分けられます。/recentの 1 件のstall_msがそのトンネル 1 本の合計 (ms) です:stall_ms.clientが大きい = プロキシがクライアントへ書けなかった = 利用者の下り回線か端末が遅い (読むのが追いつかない)。プロキシもオリジンも遅くありませんstall_ms.originが大きい = プロキシがオリジンへ書けなかった = オリジンが遅いか、利用者の上りが速すぎてオリジンが飲みきれない- 両方 0 か小さい = どちらの向きも詰まっていない (遅いとすれば確立か名前解決で、
ms.dns/ms.connectを見ます)
その窓の合計は
/historyのtransferの末尾 2 列 (stall_client_ms_sum/stall_origin_ms_sum) です。時計を読むのはpollで書けるのを待ちに入る回だけで、 64 KiB ごとでもspliceごとでもありません。詰まらない中継 (書けば必ず入る相手) ではPOLLOUTを立てる枝に 1 度も入らないので、時計を 1 回も読みません。--liteでも同じ数え方ですが、--liteは個票の枠を作らないので出す場所がありません。 Linux 以外 (io::copyを 2 スレッドで回す従来版) は待ちの向きが分からないので常に 0 です -
山の写真 (T14.6):
/bursts?n=50は、同時接続数がPROXY_MAX_CONNS × PROXY_BURST_PERCENT(既定 50%) を下から上に越えた瞬間に自動で撮った/connectionsの要約です。 上限に当たったときの動き (暇なトンネルを 1 本閉じる。PROXY_MAX_CONNS) が効いているかは 「山が来たとき」にしか見えませんが、来たときに/connectionsを見ている人はいないので、 越えた瞬間を機械に撮らせておきます。1 枚 = 撮った時刻 (at)・通し番号 (seq)・そのときの本数 (active、旗が立った瞬間はtrigger_active)・上限と閾 (max_conns/threshold)・ 接続元ごとの本数 (clients、多い順に 16 件 +clients_other)・宛先の上位 10 (targets+targets_other)・ 状態別 (states=serving/reading/parked/queued/relaying)・種類別 (kinds)・evicted_idleとrejected_overloadの累計・スレッド数と記述子 (threads/fds/max_fds)。 同じ山では 1 枚だけで、同時接続数が閾の 80% を下回るまで次の 1 枚は撮りません。 50 枚の環状 (1 枚 4 KiB 以下)。撮るのは履歴スレッド (5 秒周期) で、接続を受けたスレッドは 閾を越えた瞬間に旗を 1 つ立てるだけなので、accept の経路には比較が 1 回増えるだけです。--liteとPROXY_BURST_PERCENT=0では撮りません。撮るのは履歴スレッドなのでPROXY_STATS_PERSIST=off(履歴スレッドを起こさない設定) でも撮りません。 山が来るのを待たずに手元で確かめるには、/recentの個票を同じ間隔・同じ本数で張り直すbench --only replayを使います (上の「デプロイ先のパターンを手元で再生する」) -
接続元 1 つの追跡 (T14.27):
PROXY_TRACE_CLIENT=<ip>を設定している間だけ、その接続元の 要求を/trace?n=200&since=<epoch>(新しい順、既定 200 行・最大 1,000、1,000 行の環状) に残します。 1 行 = 時刻 (at、epoch 秒)・接続 id (conn)・接続元 (client)・要求行 (method/target/version)・ 応答の状態 (status)・所要 ms (took_ms)・バイト (bytes)・段階の ms (ms。/recentと同じ綴り)・ 閉じた理由 (reason。CONNECT だけ。forward の 1 要求ではnull)。CONNECT のtargetは宛先のhost:port、 forward のtargetは URL (先頭 256 バイト) です。 この口だけは URL のパスが入ります (他の個票は入れません。下の「個票に入れるのは…」を参照)。 全体のログ水準をtraceに上げるとアクセスログが全員に乗る (1 行 7.2 us/要求) のに対し、 ここは 1 人ぶんだけです。照合は accept の 1 回だけで、一致した接続に旗を立て、 要求ごとに見るのはその旗 1 つ (一致しない接続元の費用は分岐 1 回)。--liteは接続の枠そのものを作らないので旗も立たず、1 行も残りません。 リングはメモリだけなので再起動で消えます (/recentなどと違い個票のファイルには書きません)。/snapshotには入れません (パスが保存したファイルに残らないように)。 いま誰を追っているかは/configのPROXY_TRACE_CLIENTで読めます -
起きたことの時系列 (T14.11):
/events?n=200&since=<epoch>は、プロキシに起きた出来事を 1 本の時系列にしたものです (新しい順、既定 200 件、512 件の環状)。数字が動いたときに 「そのとき何を変えたか」を読むための口で、/statusのsettingsは最後の 1 回しか残さず、/logは warn 以上なので info の出来事 (再読込・ブロックリストの取得・バラストの増減) が入りません。 1 件 = 時刻 (at、epoch 秒)・種類 (kind)・短い説明 (text、128 バイトまで)。 種類はstart(起動。版と設定の要約) /reload(.envの再読込。変わった名前と前後の値、 再起動が要る項目はその旨) /blocklist(一覧を組み直した。件数と取得の成否) /ipv6(IPv4 優先への切替と解除) /pressure(メモリの圧迫の検知と解消) /ballast(先行確保が ±64 MiB 以上動いた) /state_file(状態ファイルの書込エラー。最初の 1 回だけ) /evict(上限に当たって暇なトンネルを閉じた。1 時間に初めて起きたときだけ) /emfile(accept の失敗。同じく 1 時間に 1 回) /shutdown(停止シグナル) /anomaly(下の自動検知) /new_client(初めて見た接続元。同じく下の自動検知の規則 6) の 12 種で固定です (kindsにも並びます)。書くのは稀な経路だけで、要求ごとの経路には 1 命令も増えていません。ipv6/pressure/ballast/anomaly/new_clientの 5 つは履歴スレッドの周期 (5 秒) で状態の変わり目を拾うので、 時刻は最大 5 秒遅れ、--liteとPROXY_STATS_PERSIST=off(履歴スレッドを起こさない設定) では 残りません。残りの 7 種は--liteでも残ります。メモリだけなので再起動で消えます (512 件で 87 KiB、応答は 256 KiB 以下) -
異常の自動検知 (T14.23): 24 時間の図を人が全部読むのは手間なので、「いつから」を機械に 印させます。履歴スレッドが 5 秒ごとに取る標本を直近 5 分の窓に畳み、直近 1 時間の基準値と 比べて外れていたら、上の
/eventsにanomalyの 1 件を書きます (専用の口は作っていません。/events?n=200で読みます。畳むのは/history?summary=1と同じ関数・同じ切り方です)。 判定は 8 種 + 規則 6 で固定で、閾は次のとおりです。種類 (説明の頭に出ます) 立つ条件 connect_p95CONNECT 確立の p95 (直近 5 分) が直近 1 時間の p95 の 3 倍以上、かつ 50 ms 以上、かつその窓に 20 本以上あるとき (T15.0 (9)) dns_slow名前解決のミス 1 回の平均 (直近 5 分) が 100 ms と canary の名前解決の中央値 (直近 1 時間) の 3 倍の大きい方以上、かつその窓にミスが 3 回以上、かつその窓のミスの合計が 1,000 ms 以上あるとき (canary が offなら 100 ms だけ。5 分に 1 回の重いミスだけでも、3〜5 回で合計の小さい初めての名前の引きだけでも立ちません。3 回でも 1 回 334 ms 以上なら立ちます。T17.1 / T22.2)errorsエラーが 5 分で 5 件以上 (原因の内訳も説明に入ります) active_high同時接続の山が PROXY_MAX_CONNSの 50% 以上 (/burstsの写真と同じ閾。同じ周期で写真が撮れていればそのseq)rejectedrejected_overload/evicted_idle/rejected_client_aclが増えたcpu_throttledcgroup の CPU の上限で直近 5 分に絞られた期間が 50% 以上 (解除は 25% 未満。説明に quota_coresと使ったコア数と/profileの上位スレッドの tid が入ります。T15.0 (6))tunnel_spin「起こされたのに 1 バイトも進まない」が 1 周期 1,000 回以上のトンネルが 1 分続いた (説明に接続の idと宛先と齢とhalf_closed。T15.0 (6))dns_miss_rate名前解決のミスが直近 1 時間で 0.20 回/接続 以上 (解除は 0.10 未満。起動から 6 時間は判定しません — 再起動の直後はどの名前も warm でないため。1 時間に 30 本以上の確立があるときだけ。T15.0 (9)) new_client(規則 6)/clientsのfirst_seenがこの 5 秒の窓の中にある接続元 (T14.54)dns_slowの閾を変えたら件数がどう動くかは、scripts/dns-slow-replay.py SNAP.json …が雪像の/history?res=60から 5 分の窓を作り直して案ごとに並べます (T22.2。1 分の行で数えるので、5 秒の境目に またがる窓は見えず、実機より少なめに出ます)。表のsum1000が今の条件 (T22.2) で、currentはその前の条件です。同じ種類は収まるまで 1 回だけ書きます。条件を外れたまま 5 分続いたら
cleared: <種類>で始まる解除の 1 件を書き、また立てるようになります。説明には必ず数字 (何が・いくつ・基準値) が入ります (例:connect_p95: connect p95 138 ms over 5m is 14.1x the 1h baseline 9.8 ms (120 of 1328 connects)、cleared: errors after 11m (0 errors in 5m))。connect_p95だけは立っている間は「立った瞬間の基準値」と比べます (基準値の窓は直近の 5 分を含むので、山が 1 時間続くと基準値そのものが山になって倍率が 1 に戻り、山の最中に 解除を書いてしまうため)。費用は 0 で、判定するのは履歴スレッドだけです (要求ごとの経路には 1 命令もありません。--liteとPROXY_STATS_PERSIST=offでは 履歴スレッドが無いので判定もしません) -
初めて見た接続元 (T14.54。上の規則 6): 認証なしの公開プロキシなので、見知らぬ接続元は 「現れた瞬間」に気づきたいものです (2026-09-16 に現れた接続元に気づいたのは 3 日後でした)。 上の判定と同じ 5 秒の周期で
/clientsを見て、first_seenがその窓の中にある接続元を/eventsにnew_clientで 1 件残します (種類がanomalyではなくnew_clientなのは、 異常ではなく「初めて」だからです)。説明には接続元・要求数・最初の宛先の種類 (ポートと、名前宛てか IP リテラル宛てか)・User-Agentが入ります (例:new_client: 198.51.100.7 first seen (1 req, first target port 443 (name), agent "curl/8.5.0"))。 同じ接続元は 1 回だけで、2 回目の要求では増えません。走査を受けて 1 周期に何百も現れたときは 8 件まで書き、残りはnew_client: N more clients first seen in the same 5s window (wrote 8)の 1 行にまとめます (出来事のリング 512 件を 1 回で流さないため)。状態ファイルから読み戻した接続元 (first_seenが0= この起動より前から居た) は「新しい」ではありません。費用は 0 で、 5 秒に 1 回、接続元の表の鍵を取ってfirst_seenを比べるだけです (/clientsを丸ごと写しません。要求ごとの経路には 1 命令もありません) -
1 要求で全部取る (T14.4):
/snapshotは上の口を 1 つの JSON にまとめて返します (status/status_errors/status_dns/history(5/60/3600) /dns/errors/connections/recent/hosts/clients/bursts/events/log。何が入っているかはpartsに並びます)。 デプロイ先の様子を見るのに 17 本の URL を手で叩いていたのを 1 回で済ませるための口で、 組み立ては同じプロセス内の関数呼び出し (自分へ HTTP で繋ぎ直さないので、接続を 17 本増やしませんし、 上限に当たっている最中でも取れます)。上限は 4 MiB で、越えたらrecent→log→history.5の順にnullへ落としてdroppedに名前を出します。保存して読むのはscripts/collect-deployed.shです -
canary (利用者の要求が無い時間帯も待ちを測る。T14.10): プロキシ自身が 60 秒に 1 回 (
PROXY_CANARY_SECS)、PROXY_CANARYで決めた宛先へ 名前解決 → TCP 接続 → 即closeだけを行い、 その時間を残します。TLS も HTTP も送りません (相手に届くのは 1 分に 1 回の名前解決と SYN / FIN だけです。 利用者と同じ Happy Eyeballs を通るので、A と AAAA の両方を持つ相手には 250 ms ずらして もう 1 本 SYN が出ることがあります)。 平常時の CONNECT 確立 p50 は利用者の要求があった時間帯だけの値なので、深夜や利用者が居ない日は 1 点も無く、 「遅かったのはプロキシか、回線か、利用者の端末か」が切り分けられませんでした。canary の値が利用者の値と 合っていれば回線 (またはリゾルバ)、合っていなければ利用者側、と読めます。 最後の 1 回は/statusのcanary(mode/secs/runs/failures/at/host/dns_ms/connect_ms/ipv6_connect_ms/error/ipv6_runs/ipv6_skipped)、/metricsのsorahost_canary_seconds{stage="dns"|"connect"|"ipv6_connect"}(最後の値。 1 回も回っていなければ 1 行も出しません。失敗した回は届かなかった段階が 0 になるので、 成否は/statusのcanary.errorとcanary.failures、/errorsで見てください)。時系列は/history?res=5|60のcanaryで、{"keys":["t","canary_dns_ms","canary_connect_ms","canary_host","canary_ipv6_connect_ms"],"samples":[[…]]}という 別の配列です (既存のkeys/samplesは 1 列も変えていません。.rrdの標本には書かないので 再起動で消えます。窓は 5 秒 × 720 と 60 秒 × 1,440)。失敗は/errorsにkind: "canary"で 1 件だけ残り、 利用者に返したエラーの集計 (errors_by_cause) には混ざりません。 名前解決は名前解決の表を通さず OS に直接聞くので (リゾルバの実力を測るため)、/statusのdns.hits/dns.missesにも keep-warm にも影響しません。TCP 接続は利用者と同じ経路 (Happy Eyeballs と IPv4 優先の学習) を通ります。回すのはcanaryスレッド 1 本だけで、 利用者の要求の経路には 1 命令も足していません。履歴スレッドが動いているときだけ回ります (--liteとPROXY_STATS_PERSIST=offでは履歴スレッドごと止まるので canary も回りません) -
canary の IPv6 側 (
PROXY_CANARY_IPV6、既定 on。T14.37): 同じ周期に、canary の名前の AAAA へ 1 本だけ繋いでみてcanary.ipv6_connect_msに残します (繋がれば ms、 繋がらなければnull: AAAA が無い名前、PROXY_IPV6=off、経路が黒穴、PROXY_CANARY_IPV6=off)。 コンテナの IPv6 が黙って落ちる環境では、プロキシは 3 回続けて負けると初めて見るホストを IPv4 優先に切り替えます (/statusのipv6.v4_first)。この 1 本があれば「IPv6 が生き返ったか」を 1 分の粒度で (利用者を待たせずに) 読めます。T17.7 からは元に戻すかどうかもこの 1 本が決めます: この 1 本が試している間 (直近 600 秒に 1 本、ipv6.probe_byが"canary") は利用者の要求で 600 秒に 1 回 IPv6 を先頭に戻す探りをやめ (探りの 1 本は利用者を Happy Eyeballs の間隔ぶん待たせていた)、 繋がったらv4_firstを解きます。Happy Eyeballs も勝敗の記録 (ipv6.attempts/wins/losses) も ホストごとの族の記憶も動かしません。 失敗は/errorsにも残しません (黒穴のままだと 1 分に 1 件ずつ個票が埋まってしまうため。 生死はipv6_connect_msがnullかどうかで読みます)。nullは「試して繋がらなかった」と「試さなかった」の両方なので、試したかどうかはcanary.ipv6_runs(IPv6 側を実際に試した回数) とcanary.ipv6_skipped(試さなかった回数) で読みます (T18.1。通算で、 canary の 1 回につきどちらかが 1 増える =runsと同じ歩み)。試さないのは、名前が引けなかった回・引けた答えに AAAA が無い回・PROXY_IPV6=off・PROXY_CANARY_IPV6=offで、試さなかった回は「探っている」印を更新しません (600 秒ぶん続くと探りは利用者の要求に戻り、ipv6.request_probesが増えます)。宛先が 1 つも無い周 (PROXY_CANARY=off、autoで直近 1 時間に CONNECT が無い) はrunsごと増えません -
再起動をまたぐか (
persisted/restored):/recent/errors/bursts/events/logの 5 つは、 5 秒ごとに$HOME/.rust-http-proxy.recent(固定 4 MiB、統計の.rrdとは別のファイル) へ新しい分だけ追記され、 次の起動で読み戻されます。"persisted": true|falseがその可否 (PROXY_STATS_PERSIST=offと、 ファイルが開けなかったときはfalse= 「この口の中身は再起動で消える」)、"restored": Nが 再起動前から引き継いだ件数です。ファイルの中は 5 本の環状の領域で、 閉じた接続 4,096 件 (1 件 512 B) / エラー 2,048 件 / 山の写真 128 枚 / 出来事 512 件 / ログ 3,568 行 (どれもメモリのリングと同じか多く持つので、 何度か再起動しても前の版の個票が残ります)。書くのは履歴スレッドと停止シグナルだけで、 1 周期に書くのは 64 KiB まで (それを越えた分は古い方から落とし、/statusのstate_file.recent.droppedに出ます)。/historyのclosed(分布) と/connections(いまの接続) と/dns(表) はメモリだけのままです -
どの個票も応答は 256 KiB 以下 (件数の上限とは別にバイト数でも打ち切り、切ったら
"truncated": true)。 どれも認証なしで見えます (このプロキシの方針。/purgeと同じ)。接続元の IP と宛先ホストが並ぶので、 公開ポートに出すなら ACL や到達制御で守ってください (PROXY_ALLOW_CLIENTSで接続元を絞れば、これらの個票にも届きません)。 個票に入れるのは接続元 IP・宛先のホスト:ポート・時刻・数字だけです。/clientsのUser-Agent(先頭 128 バイト) が入る唯一のヘッダーで、URL のパスや問い合わせ文字列、 本文、その他のヘッダーは 1 つも記録しません。 例外は/traceだけです (T14.27):PROXY_TRACE_CLIENTで追跡している 1 接続元に限り、 要求行の URL を先頭 256 バイトまで残します。これも認証なしで見えるので、調べ終わったらPROXY_TRACE_CLIENTを空に戻してください (空にすれば次の接続から書かなくなり、 プロセスを再起動すればリングごと消えます。リングはメモリだけでファイルには残りません) -
記録を一括で止める / 接続元を復元できない形にする (
PROXY_RECORDS。T14.41): 上の個票は認証なしの公開ポートでも誰でも読めます。利用者以外の人の情報を残さずに 動かしたいときのつまみがPROXY_RECORDSで、旗 1 つで全部の個票を止めるか、 接続元 IP をハッシュに置き換えるかを選べます。on(既定): 今までどおり。off:/recent/errors/connections/clients/log/events/trace/burstsと/readers(内部エンドポイントを引いた接続元。T14.53) のどれにも 1 件も書きません (どれも"count": 0、/statusのreadersも[])。個票のファイル ($HOME/.rust-http-proxy.recent) にも 1 バイトも書かず、読み戻しもしません ("persisted": false。ファイル自体は消さないのでonに戻して再起動すれば前の個票が また読めます)。統計ファイル (.rrd) の接続元別の表は、次の書き出し (5 秒ごと) で 空になります — 接続元を 1 行も持たなくなるので、前の起動が残した生の IP も ディスクから消えます (ホスト別の表と履歴はそのままです)。 残るもの: ホスト別の統計 (/hosts/hosts/series/explain)、時系列 (/history/daily/snapshots)、/statusの数字 (total_requests/ エラーの原因別 /rejected_per_client…)、/dns、/metrics。個人に結びつくのは接続元の側だけで、宛先ホストの集計と時系列に 「誰が」は入らないためです。標準出力のアクセスログは止まりません (コンテナのログは 運用する人の手元にしか出ないので別扱い。止めたいならPROXY_LOG_LEVEL=warnにします)。hashed: 個票は残しますが、接続元 IP を 16 桁の 16 進に置き換えます (例:127.0.0.1→cb3c874474114702)。起動ごとの乱数 (塩) を混ぜた FNV-1a 64 ビット なので、同じ起動の中では同じ接続元がいつも同じ値になり (/recent/errors/connections/clients/trace/readers/burstsの写真、/recent?client=の 絞り込みで突き合わせられます)、プロセスを再起動すると値が変わります (= 値から IP を 引き当てる表を作り置きできません)。/clientsと/readersの鍵も同じ値です。 前の起動がonのときに 残した個票と接続元の統計も、読み戻すときに同じ変換を通します。 宛先ホスト・ポート・User-Agent・SNI はそのまま残ります (置き換えるのは接続元だけ)。- どちらも
.envで即時反映で、効くのは次の記録からです (それまでに溜まった個票は 書き換えません。消したいなら再起動してください)。いま効いている値は/statusの 末尾のrecordsと/configのPROXY_RECORDSで読めます。 - 効かない / 変わらないもの: 判定は必ず生の IP で行います —
PROXY_ALLOW_CLIENTS(接続元の ACL)・PROXY_MAX_CONNS_PER_CLIENT(接続元ごとの上限)・PROXY_TRACE_CLIENT(追跡する接続元) はoffでもhashedでも今までどおり効きます。--liteはもともと個票を作りません。費用は記録の入口ごとに分岐 1 回で、既定 (on) では 1 バイトも増えません。 offで 1 つだけ欠けるもの:/historyのclosed(閉じた理由・寿命・バイトの分布) は 接続の枠から作るので埋まりません (--liteと同じ)。分布も残したいならhashedを使います
-
カーネルと cgroup の窓 (バーストのときカーネル側で何が起きていたか。T14.12): プロキシの統計には残らない事象を、5 秒の標本のときだけ
/procと/sys/fs/cgroupを読んで メモリ上の窓 (5 秒 × 720 = 1 時間 と 60 秒 × 1,440 = 1 日。1 標本 200 B なので約 420 KiB、 環状バッファの伸び方しだいで最大 600 KiB) に残します。要求ごとには 1 回も読みません。- 受け入れ待ち行列の溢れ (
listen_overflows/listen_drops)。溢れるとクライアントは SYN を 1〜3 秒後に再送するので、プロキシから見ると「遅い接続」としてすら残りません (/proc/netの数はどれもネットワーク名前空間ごとで、このプロキシの待ち受けのぶんだけではありません) - 再送 (
retrans_segs/syn_retrans/tcp_timeouts/abort_on_timeout) - TIME_WAIT の本数 (
time_wait) と TCP ソケットの数 (sockets_inuse/sockets_alloc/curr_estab)。 手元で CONNECT のベンチを回すとtcp_max_tw_buckets(この機械は 32,768) に張り付きます - cgroup の CPU の絞り (
cpu_nr_periods/cpu_nr_throttled/cpu_throttled_usecとcpu.maxのquota_cores)。CPU 上限を持つコンテナで「自分が遅い」のか「絞られて待たされた」のかが 分かれます。読むのは割合 (cpu_nr_throttled÷cpu_nr_periods) で、cpu_nr_periodsがその分母です (T15.0 (6)。「41 回絞られた」だけでは 41/8,123 = 0.5% なのか 41/41 = 100% なのか決まりません)。/statusのkernel.cgroup_cpuには累計のほかにpath(階層のどこのcpu.statを読んでいるか。 自分の cgroup に cpu コントローラが無いと親の値を読みます。--checkにも同じ道が出ます) とsince_start(nr_periods/nr_throttled/throttled_usecのこのプロセスが始まってからの 増分。累計はプロセスより長生きなので、起動直後の雪像にもnr_throttledが乗ります) が出ます。cgroup_cpuとsince_startの末尾のusage_usec/user_usec/system_usec(T16.0) は同じcpu.statの CPU の使用量 (累計 us / 起動からの増分) で、ユーザー空間とカーネル側に分かれます (コンテナ全体。 プロセスだけなら/profileのcpu_user_us)。行の無いcpu.statでは 3 つともnull。/historyのkernelの 末尾には同じものの増分がcpu_user_usec/cpu_system_usecで入ります (1 分へは足し合わせ) - PSI (
psi_cpu_some_avg10など。直近 10 秒のうち、その資源を待って進めなかった時間の割合 %)。 隣のコンテナに CPU を取られている時間が読めます - 一緒に取るもの: 名前解決のミスの回数とミス 1 回の ms、状態ファイルの書込エラー
累計のものは増分 (その 5 秒に何回起きたか)、値のものは値で入ります (1 分へ畳むときは 増分は足し合わせ、値と PSI は最大)。最新の値と累計は
/statusのkernel(tcp/cgroup_cpu/psi/ 直近 5 分のlast_5m)、時系列は/historyのkernel、 Prometheus ではsorahost_kernel_listen_overflows_totalなどの累計とsorahost_kernel_time_wait/sorahost_cgroup_cpu_throttled_seconds_total/sorahost_cgroup_cpu_throttled_periods_total÷sorahost_cgroup_cpu_periods_total(絞られた割合) /sorahost_psi_some_avg10{resource="cpu"|"memory"|"io"}です。 読めない源はnull(Linux 以外、/proc/netの無いコンテナ、cgroup v1、PSI 無しのカーネル)。.rrd(状態ファイル) には書かないので再起動で消えます (版 3 で標本 1 本の余白は 516 B = 64 項目に 広がったので、入れるなら 26 列は収まります。移すかどうかは項目ごとに決めます)。 履歴の収集スレッドが動いていない--lite/PROXY_STATS_PERSIST=offでは窓は空 (kernelはnull) です - 受け入れ待ち行列の溢れ (
-
ホスト別の時系列 (T14.22):
/hosts/series?top=16と/hosts/series?host=<name>は、 直近 1 時間の要求数で選んだ上位 16 ホストについて、5 分の窓 × 288 標本 (24 時間) を返します。/hostsは通算 (avg_msは 3 日の平均)、/historyは全体しか無いので、その間を埋める口です (「datadog が 15 時に遅かった」「mtalk だけ夜に再送が増えた」はどちらでも読めませんでした)。 1 標本 =count(件数)・ms_sum/ms_max(CONNECT は確立まで、forward は初バイトまでの ms)・dns_ms(名前解決の合計 ms)・errorsの 5 項目で、keysがその並びです。標本は古い順で、i番目の時刻はt0 + i * window_secs(tを 16 × 288 個並べると応答が 50 KB 太るので置いていません)。 ほかにhour_requests(直近 1 時間の要求数 = 順位そのもの)、total(keysと同じ順の合計。ms_maxだけは最大)、tracked(いま系列を持っているホストの数)、rotations(窓を進めた回数) が出ます。 上位の入れ替えは履歴スレッドが 5 分ごとに行い、要求の経路は「上位に居るか」の旗を見て 配列 1 要素に 5 回足すだけです (鍵はホスト別統計が既に取っているもの。原子操作もシステムコールも増えません)。 上位から落ちたホストの標本は捨てます (再び上がれば 0 から)。ただし枠が余っている間は今の住人を残すので、 夜だけ動くホストの 24 時間が 1 時間の無音で消えることはありません。 メモリは 16 ホスト × 288 標本 × 5 項目 × 8 B = 180 KiB 固定 (上位が 1 つ決まったときに 1 回だけ確保)。.rrd(状態ファイル) には書かないので再起動で消えます。履歴スレッドが動いていない--lite/PROXY_STATS_PERSIST=offでは系列を 1 本も持ちません (seriesは空。費用も 0)。 応答はデプロイ先並みの値なら 16 本で約 96 KiB、他の個票と同じく 256 KiB 以下 (切ったらtruncated) -
1 相手の説明 (T14.36):
/explain?host=<name[:port]>と/explain?client=<ip>は、 1 つの相手について上の口を全部横断して 1 枚に組んだものです。「この宛先はなぜ遅いか」を 調べるには/hosts/dns/recent/clients/errorsを手で突き合わせる必要がありました (T14.0 で実際にやった作業) が、その突き合わせをサーバー側で 1 要求にします。?host=に入るのは、ホスト別の統計 (/hostsと同じ形。ポートを書かなければconnect://とhttp://、ポート違いを全部まとめた合計で、混ぜた鍵はkeysに並びます。 ポートを書けばそのポートの鍵だけ)、原因別のエラー件数 (errors_by_cause、名前つき)、/dnsの行そのもの (warm か・残り TTL・答え・OS への問い合わせ回数)、 そのホスト宛ての閉じた接続の個票 10 本(/recentと同じ 1 件。段階の ms と閉じた理由つき)、 エラーの個票 5 件 (/errorsと同じ)、上位 16 ホストに居れば直近 1 時間の時系列 12 窓 (/hosts/seriesの末尾。居なければnull)、直近の異常 3 件 (/eventsのanomaly。 これはプロキシ全体の判定で、相手ごとではありません)。?client=は/clientsの行 + その接続元の個票 10 本 + エラー 5 件 + RTT (利用者 → プロキシ) です。 末尾に 1 行の判定summaryが付きます — 日本語で 「61 要求 (CONNECT 17 / forward 44)。所要の平均 1.0 ms = 名前解決 0.2 + 接続 0.3 + プロキシ側 0.5 ms。 p50 0.6 / p95 8.9 ms。カーネルの RTT 0.4 ms (標本 17、再送 0)。…」のように段階の数字を並べるだけで、 「だから RTT だ」の推定は書きません (読む人がします)。同じ値は機械が読めるnumbersにも入ります (avg_ms=dns_ms+connect_ms+proxy_ms。平均は時間を測れた要求timedで割った値です。 引き算で出るproxy_msは、CONNECT だけの相手ならプロキシ側の待ちですが、forward が混ざる相手では オリジンが考えていた時間と本文を流した時間も入るので、文章の方もそう呼びます)。 知らない相手でも 200 のまま"known":falseを返します (「どこにも記録が無い」こと自体が答えなので)。?host=も?client=も書かなければ 400。応答は 64 KiB 以下 (個票 10 本・エラー 5 件の上限つき)。 新しい記録は 1 つも増やしていません (この口に来たときだけ既にある表とリングを読んで組み立てるので、 要求の経路の費用は 0 です) -
日次の要約 (永久に残る。T14.20):
/daily?n=365(既定 1 年、最大 4,096 日) は$HOME/.rust-http-proxy.daily.jsonlの中身を古い順にそのまま返します。/historyは 30 日で消えますが、 こちらは**「いつから遅くなったか」「デプロイの前後で何が変わったか」を年単位で追うためのもので、 1 日 1 行 (ありふれた 1 行 336 B、上限 512 B) なので 1 年で約 120 KB です。 1 行 =day(UTC の日付) ・t(その日の 0 時の epoch 秒)・secsとsamples(その日をどれだけ見ていたか。 再起動した日は 1 日ぶんに満たない)・requests・bytes・connects・connect_p50_ms/connect_p95_ms・dns_misses/dns_per_connect/dns_miss_ms・errors・bursts(山の写真の枚数)・active_max・evicted_idle・rss_max/rss_avg・version(その日動いていたバイナリの版)。 累計 (要求数・バイト・追い出し・山) は日の境目の値の差**、区間の値 (確立時間の分布・エラー・名前解決) は その日の標本の足し合わせ、ゲージ (同時接続数・RSS) は最大と平均です。 書くのは履歴スレッドが UTC の日付をまたいだ瞬間の 1 回だけ (要求の経路の費用は 0)。 ファイルは追記のみで上限 2 MiB (越えたら古い行から捨てる = 約 11 年ぶん)、 起動時に最後の行の日付を見るので同じ日に 2 回起動しても 1 行のままです。PROXY_STATS_PERSIST=offでは 1 行も書きません (/dailyのpathがnull)。 応答は他の個票と同じく 256 KiB 以下 (切ったらtruncated)。 この応答をそのままscripts/weekly-report.pyに渡せば、雪像が無くても週次の表が出ます -
SLO の達成率 (T14.50):
/slo?days=7(既定 7 日、最大 31 日。「今日」は UTC) は、PROXY_SLOの 4 つの閾を 5 秒の標本 1 本ごとに判定した結果を、日ごと (daily)・時間ごと (hourly) の達成率と、外れた時間帯の一覧 (breaches) にして返します。 読み方:ratio=met ÷ judged= 4 つとも満たした 5 秒の割合で、judgedは「確立が 1 本以上あった 5 秒」だけを数えます (確立の無い 5 秒は分母に入らないので、静かな時間帯があっても達成率は薄まりません。判定できた標本が 1 本も無ければratioはnullで、0% ではありません)。missesは閾ごとに外した標本の数 (namesと同じ並び)。breachesは連続する外れを 1 行に畳んだもので、1 行 = 開始・終了 (from/toと、人が読むfrom_hour/to_hour)・ 続いた時間数・その間のjudged/metと、どの閾を外したか・その最悪の値 (breached[]のname/samples/worst/threshold)。 例: 「99.2% の時間で満たした。外れたのは 09-11 17〜23 時 (connect_p50_ms5,040 本、最悪 46.9 ms、閾 10 ms)」。 使い道 (T14.99): Phase の完了の定義は「平常時の CONNECT 確立 p50 6 ms 以下」のような閾値ですが、PROXY_SLO=connect_p50_ms=6を入れておけば、/sloのratioがそのまま 「その閾を満たしていた時間の割合」になり、判定が「満たした / 満たさない」ではなく 「99.2% の時間で満たした。外れたのはこの時間帯」と数字で書けます。 集計はメモリだけで 31 日ぶん (1 時間 1 行 × 744 = 約 48 KiB)、再起動で消えます (first_t/last_tでどこから見ているかが分かります)。 応答は 64 KiB 以下 (越えるぶんは外れた時間帯と時間ごとの行から落としてtruncated)。 ダッシュボードの KPI「今日の SLO」も同じ口を 30 秒に 1 回読んでいます (/sloを持たない版ではカードごと出しません) -
日次の snapshot (30 日ぶん。T14.34):
/snapshotsは$HOME/.rust-http-proxy/snapshots/に残してある日付と大きさ (files[]のdate/bytes/t(書いた時刻)、古い順) と、置き場所 (dir)・残す日数 (days)・1 ファイルの上限 (max_bytes= 4 MiB) を返します。/snapshots/<YYYY-MM-DD>はその日のファイルを そのまま (/snapshotの応答そのもの) 返すので、scripts/snapshot-diff.pyやscripts/status-diff.py、1 週間ぶんを 1 枚にするscripts/weekly-report.pyに そのまま渡せます (置いていない日と日付として読めない名前は 404)。 書くのは履歴スレッドが UTC の日付をまたいだ瞬間の 1 回だけで (要求の経路の費用は 0)、 名前は終わった日 (前日) の日付です。PROXY_SNAPSHOT_DAYSで日数を変えられ、0で止まります。PROXY_STATS_PERSIST=off(と--lite) では 1 ファイルも書きません (dirがnull)。 ディスクの空きが予算 (PROXY_DISK_KEEP_FREE_MBのマージン) を割り込むときは書かずに/eventsに 1 件 (state_file) 残します -
RSS の内訳 (
/statusのmemory。T14.21): 256 MiB のコンテナで「RSS が何でできているか」 (ヒープの断片・スレッドのスタック・キャッシュ・記録のリング) を 1 枚から読むためのものです。 読むのは/statusに来たときだけで、要求の経路には 1 命令も増えません (mallinfo2(3)はアリーナの鍵を順に取るので数 us かかります)。heap_used/heap_free/mmapは glibc のmallinfo2(3)のuordblks/fordblks/hblkhd。 glibc 2.33 以上でだけ読めます: リンク時に決め打ちせずdlsym(RTLD_DEFAULT, "mallinfo2")で 実行時に探すので、musl や古い glibc、Linux 以外では落ちずに 3 つともnullになりますrssはキャッシュのプローブ (既定 1 秒ごと) が読んだ値で、同じ応答のcache.system.process_rss_bytesと同じ値です (1 枚の中に食い違う RSS が 2 つ並ばないように)。 プローブが止まっている (PROXY_CACHE_PROBE_SECS=0/ キャッシュ無効 /--lite) ときだけ、 その場で/proc/self/statusを読みますstacks_estimateは予約の合計です (接続スレッドconnは 256 KiB、それ以外は Rust の既定 2 MiB)。 実際に触ったページとの差は出せないので、RSS のうちスタックのぶんはこれより小さくなりますcache_memoryはキャッシュがヒープに持っている量 (cache.memoryのused_bytes+ 先行確保のreserved_bytes)ringsは記録のリングが満杯になったときの見積もり (バイト):recent(2,000 件)、errors(500 件)、bursts(50 枚)、log(1,000 行)、events(512 件)、trace(1,000 行。T14.27)、history(5 秒 × 4,320 + 60 秒 × 1,440 + 1 時間 × 720 の標本と、閉じた接続の窓、 速さと半閉じの窓。5 秒の標本を 6 時間ぶん持つので 2.95 → 4.77 MB (T14.32)、 T15.0 (10) で標本 1 本が 504 → 664 B になって 5.84 MB、T16.0 で 688 B / 6.00 MB)、hostseries(16 ホスト × 288 標本 × 5 項目 × 8 B = 180 KiB。T14.22)、readers(内部エンドポイントを引いた接続元の表。環状ではありませんが同じ「満杯のとき」の 見積もりで並べてあります。最大 256 行。T14.53)、quantiles(3 系統 × 1,024 本 × 8 B = 24 KiB。T14.31、T15.0 (2) でwaitを足して 16 → 24 KiB)、profile(段階とスレッドの窓 = 5 秒 × 720 + 60 秒 × 1,440 の標本。.rrdには書きません。 T14.3。T14.21 はこれを落としていたのでtotalが RSS の説明に足りていませんでした。 T15.0 (13) で足して 6.77 MB、T16.0 で 6.95 MB —/profileの標本 1 本は 3,216 B で、historyより大きい口です) と、 その合計total(この機械では 14.3 MiB = 15,022,620 B。T16.0 の前は 14.0 MiB)rings_usedはringsと同じ鍵で、いま埋まっているぶんの実バイト (T15.0 (13))。 1 件あたりの見積もりはringsと同じものを使うので、必ずrings_used.<名前> ≤ rings.<名前>です。ringsは 0 時間でも 36.6 時間でも 1 バイトも変わりませんが、こちらは溜まるにつれて増えます (起動直後はほぼ 0)。割合は出しません (used ÷ capacityで出せますが、割合からは実バイトを戻せません)。 件数そのものは/recentや/errorsのtotalを見てくださいarenasはPROXY_MALLOC_ARENASで実際に掛けたM_ARENA_MAX(0= glibc の既定のまま)rings_touched(bool。T17.8) は、起動時にリングの置き場を満杯のぶん確保して 1 ページに 1 バイトずつ 触ったか。trueなら RSS は起動直後から天井の近くに居るので、そこから増えたらリングが埋まった せいではなく、そのまま「増えた」の信号として読めます (この機械で 12.9 MiB を 3〜5 ms。満杯にしても RSS は +36 KiB。触らなければ満ちるまでの 1 日で約 12 MiB 増えていました)。触るのはhistory(PROXY_STATS_PERSIST=offでは触らない) とprofile、recent/errors/bursts/events/logの 1 件の固定部 (PROXY_RECORDS=offでは触らない) で、文字列は来たときに確保します。trace・hostseries・quantilesは使い始めに 1 回だけ確保する作りのまま触りません。触っても件数は 増えないのでrings_usedは変わりません。--liteと Linux 以外はfalse(今までどおり満ちるまで伸びる)
足して RSS になる形ではありません:
heap_freeは「アロケータが返していない」だけで常駐しているとは 限らず (MADV_DONTNEED済みのページ)、mmapも確保しただけで触っていないページは常駐しません。 「RSS のうち説明できる部分を上から並べたもの」として読んでください。 -
直近の窓の正確な分位点 (
/statusのrecent_quantiles。T14.31):{"connect":{"n":1024,"p50":0.712,"p90":1.204,"p99":3.410,"max":9.876,"window_secs":137},"forward":{…},"wait":{…}}。hosts[]のp50_ms/p95_msや/historyの分位点は 区間 (ホスト別 24 段・履歴 12 段) の内側を 線形に補間した値で、5〜10 ms の区間に入る限り 5.0〜10.0 のどこかを返します。こちらは 確立時間そのものを 1,024 本そのまま持った環状バッファからselect_nth_unstableで出す 正確な値なので、「p50 が 8.3 か 6.0 か」を 1 ms 単位で読めます。- 単位は ms (小数 3 桁)。内部は us で持っています (
u32)。 ただし forward の「初バイトまで」は元が ms 刻みなので (Detail::first_byte_ms)、 小数は 3 桁出ても刻みは 1 ms です。CONNECT の確立だけが us の精度で出ます (ベンチ (--only connect) の p50 と ±0.05 ms で突き合わせられるのはこちらです)。 nは環に残っている本数 (最大 1,024)、window_secsはいちばん古い標本からの経過秒 (= このn本が何秒ぶんか)。忙しければ数秒、暇なら数時間になります。connectは CONNECT の確立まで (connect://の鍵のもの)、forwardは forward の初バイトまで。 エラーで終わった 1 本 (繋がらなかった 502 など) は入りません (T20.4。/historyの分布と同じ数え方。0.18.0までの版は「失敗するまでの時間」も入っていて、繋がらない宛先への再試行が続くと p90 が秒になりました)。waitも同じで、nは「繋がった本数」ですwaitは利用者が待つ時間 (queue + client_read + dns + connectの和。CONNECT だけ。T15.0 (2))。connectは要求行を読んだ後から測るので、accept してワーカーが動き出すまでの待ち (queue) もHostを読み終えるまで (client_read) も名前解決も入っていません。次の「完了の定義」の 基準線はこのwaitを見てください。まだ外にあるのは 2 つだけです: accept から要求行が届くまでと、200 Connection Establishedを書いた後のトンネル越しの TLS 握手 (first_relay)。 形はconnect/forwardと同じ 6 つの欄で、同じ 1 本の接続を数えるのでnはconnectと一致し、 各分位点はconnectの同じ分位点以上になります。--liteでは書きません (queueとclient_readが 0 なので「4 段の和」を名乗れないため)。connectの系列は 1 バイトも変えていないので、Phase 12〜14 の p50 と比べる値はそのままです。- 書くのはホスト別統計が既に取っている鍵の内側で 8 バイト 1 回だけなので、
原子操作もシステムコールも壁時計の読みも増えません。分位点を出すのは
/status(と/history?summary=1) に来たときだけです。--liteでは 1 本も書きません (nが 0 のまま)。メモリだけで.rrdには書かないので、再起動で消えます
- 単位は ms (小数 3 桁)。内部は us で持っています (
-
起動直後の自己ベンチ (
/statusのself_bench。T14.43):{"at":1789558422,"forward_us":42.6,"connect_us":140.0,"cores":4,"requests":20000,"connects":2000,"secs":3,"note":null}。PROXY_SELF_BENCH=onで起動したときだけ入り、既定 (off) ではnullです。 置いた先のコンテナの CPU で 1 要求が何 us かを、上の「性能」の表と同じ物差しで出すためのもの (詳しくは「置いた先の CPU/要求 を同じ物差しで測る」)。forward_usは CPU/要求、connect_usは CPU/本 で、どちらもプロセスの utime+stime の増分から自己ベンチ自身のスレッドの取り分を引いた値を 操作数で割ったものです (clock_gettimeのCLOCK_PROCESS_CPUTIME_ID/CLOCK_THREAD_CPUTIME_ID。/procの 10 ms 刻みでは 1.5 秒の窓に足りません)。noteには断られた理由か、 本数の上限で早く終わったことが入ります。この 3 秒ぶんは他のどの口にも数えません (total_requestsも/hostsも/recentも素通し)。読めない環境 (Linux 以外) では 数字がnullになりnoteに理由が入ります -
いまの転送速度 (
/connectionsの各行のrate_bpsと/statusのrate_bps_total。T14.39):bytesは接続を受けてからの累計なので「いま誰が帯域を使っているか」が読めません。 履歴スレッドが5 秒ごとに全接続のbytesを控え、前に控えた値との差分 ÷ その周期を バイト/秒で書きます。rate_bps_totalはその全接続の和です。- 書くのは履歴スレッドだけで、接続を受ける経路にも中継 (splice の往復) にも 1 命令も増えません
(中継が暇になるたびに置いている累計
bytesをそのまま控えるだけ)。240 本でも原子の読み書き 240 回ぶんと表の鍵 1 回 (数 us) が 5 秒に 1 度だけです - 値は直近の 1 周期の平均なので、細かい山谷はならされます (5 秒より短い山は見えません)。 周期 1 回ぶん (最大 5 秒) 遅れて出ます
- 上り / 下りの別はありません: 中継は方向別のバイトを中継スレッドの中でだけ数えていて、
/connectionsの枠には合計しか置いていないためです (方向別にするには中継の経路に 原子を 2 つ増やすことになるので採りません)。向き別が要るときは/hostsのbytes_in/bytes_out(T14.26。接続が閉じてからの集計) を見てください - keep-alive の HTTP 接続は中継中に
bytesを置かないのでrate_bpsは 0 のままです (速さが出るのは CONNECT のトンネルです)。--liteでは表そのものが空なのでrate_bps_totalは 0 です - ダッシュボード (
/dashboard) の「いまの接続」には**「速さ」の列**として出ます (T14.44)
- 書くのは履歴スレッドだけで、接続を受ける経路にも中継 (splice の往復) にも 1 命令も増えません
(中継が暇になるたびに置いている累計
-
PURGE <url>//purge?url=<url>//purge?all=1でキャッシュを消す、/lookup?url=<url>でエントリの状態を見る -
/history?res=5|60|3600[&n=720]で 6 時間 / 1 日 / 30 日の履歴。res=5は 5 秒の標本を 6 時間ぶん (4,320 本) メモリに持ちます (T14.32。バーストは数時間続く (T14.0 の 09-11 は 17〜23 時) のに 5 秒の解像度が 1 時間ぶんしか無く、60 秒に畳むと山の形が鈍っていたためです)。n=は新しい方から何本返すかで、既定は今までどおり 720 本 (1 時間ぶん。応答の大きさを変えないため)、 最大 4,320 本 (?res=5&n=4320。デプロイ先の値なら 1.7 MB 前後)。res=60(1,440 本) とres=3600(720 本) は 既定で全部返るのでn=を書く意味はありません。増えたのはメモリだけ (標本 1 本 688 B (T16.0。T15.0 では 664 B) × 4,320 = 2.83 MiB。/statusのmemory.rings.history) で、状態ファイル (.rrd) に書くのは今までどおり最新 720 本です (ファイルの形も大きさ (8 MiB) も変わらず、再起動後に読み戻した 720 本はリングの末尾に入ります)。?summary=1(下) は 5 秒のリングが 6 時間ぶんあるので?res=5を明示すれば 6 時間前まで 5 秒で畳めますが、res=を書かないときの解像度の自動選択の閾は変えていません (1 時間までが 5 秒、1 日までが 60 秒)。 -
確立 / 初バイト / 待ちの 12 列に入るのは、エラーにならなかった要求だけです (T20.4):
connects/connect_ms_sum/connect_ms_max/connect_bucketsは繋がった CONNECT、forwards/forward_ms_sum/forward_ms_max/forward_bucketsは 5xx にならなかった転送 (キャッシュ HIT も入ります。403 で断った要求は今までどおりどちらにも入りません)、waits/wait_ms_sum/wait_ms_max/wait_bucketsは繋がった CONNECT の待ち。 エラーで終わった 1 件 (繋がらなかった 502・オリジンが返した 5xx) はerrorsとerrors_by_cause(原因が分かるものだけ)、/errorsの個票 (connect_msつき)、ホスト別の行 (hosts[]のrequests/errors/avg_ms/p95_ms。「その相手に掛かった時間」なので失敗も入れたまま) に残ります。dns_misses/dns_ms_sumは成否を問わず数えます。0.18.0までの版は失敗も「失敗するまでの時間」で 12 列に入っていました (connectsは試みた本数で、 失敗はconnectsとerrorsの両方に居ました)。IPv6 だけの宛先への再試行 (1 本 約 1.3 秒) が接続の 17% を 占めた週は、確立の p95 が 2,066 ms と出て速さの物差しになりませんでした (成功だけなら 66 ms)。 列の名前も並びも.rrdの形も変えていないので、再デプロイをまたぐ/historyには両方の数え方の標本が並びます (tが再起動より前の標本は古い数え方)。同じ窓から出る数字も一緒に変わります:?summary=1のconnects/p50_ms/p95_ms/forwards/dns_miss_per_connect、/statusのrecent_quantiles、/profileの段階 (エラーで終わった要求の段は入りません)、/slo、/dailyのconnects/connect_p50_ms/connect_p95_ms/dns_per_connect、ダッシュボードの KPI、異常のconnect_p95とdns_miss_rate(分母の接続が「繋がった本数」になります。分子のミスは失敗した接続のぶんも入ったまま)、/metricsのsorahost_connect_secondsと段階のヒストグラム -
keysの隣にkey_kindsが並びます (T15.0 (10))。keysと同じ長さ・同じ並びで、 その列の読み方を 1 つずつ書いたものです。列の名前からは読み方が分かりません (requestsは起動からの通算、connectsはその区間だけ) — 同じ表に 2 種類が混ざっているのは 意図したもの (T12.4 (3)) なので、綴りは変えずに読み方を隣に出しています:time= 窓の先頭の時刻 (epoch 秒)cumulative= 起動からの通算。レートが欲しければ隣の標本との差を取ってください (粗い解像度へは窓の最後の値で畳みます。再起動をまたぐと段差が 1 つ出ます)delta= その区間に起きたぶんだけ (粗い解像度へは足し合わせ)gauge= その瞬間の値 (粗い解像度へは平均。山は消えます)。 ただし上限の列 (max_fds) だけは窓の最後の値で畳みます (RLIMIT_NOFILEは ほぼ定数なので、平均にすると上限が変わった瞬間だけ中途半端な数になります)peak= その区間の最大 (粗い解像度へも最大)buckets= 入れ子の配列 (要素ごとに足して畳みます。段の境目はbounds_ms、errors_by_causeの名前はcauses)
-
末尾に足した列 (T15.0。既存の列は 1 つも消していません・意味も変えていません):
- T15.0 より前に状態ファイル (
.rrd) へ書かれた標本は、この 8 列が 0 で読み戻ります (版を上げずにレコードの余白へ足したので、古いレコードはそこがゼロ埋めです)。 再デプロイ直後の/historyには、その 0 が?res=5で最大 1 時間・?res=60で最大 1 日・?res=3600で最大 30 日 (720 本) ぶん並びます。tが最後の再起動より前の標本では、 この 8 列を読まないでください (下のactive_peak >= active_maxもそこでは成り立ちません)。 再起動の時刻は/statusのuptime_secsから出せます waits/wait_ms_sum/wait_ms_max/wait_buckets= その区間の 利用者が待つ時間 (queue + client_read + dns + connectの ms。CONNECT だけ)。connectsの 4 列と同じ形・同じ読み方 (区間) です。connect_*はopen()の入口 (要求行を読んだ後) からしか測らないので、accept してワーカーが動き出すまでの待ちも 名前解決も入っていません。「利用者が何 ms 待ったか」はこちらを読んでください。--liteではwaitの窓に 1 本も書きません (段の内訳を取らないので、4 段がそろう 分岐に入りません。件数 0 のまま)dns_warm= その標本の瞬間の warm な名前の件数 (/statusのdns.warmと同じ数。gaugeなので粗い解像度へは平均で畳みます)。/configのdns_warm(PROXY_DNS_WARM_SECS) は warm に保つ窓の秒数で意味が違うので取り違えないでください。 裏の引き直しの速さは 引き直し回数/時 ÷ その時間の平均dns_warmで 1 名前あたりになります (通算の平均で割ると実勢を 35〜60% 過小に見せます)。引き直し回数は/historyの列にはありません —/statusのdns.refreshes(起動からの通算) を 2 回引いて差を取ってください
- T15.0 より前に状態ファイル (
-
末尾に足した列 (T16.0):
dns_warm_max(peak) = その区間の warm な名前の件数の最大 (dns_warmは平均なので、枠 32 件がバーストで埋まったかは 60 秒と 1 時間の行からはこちらで読みます)、dns_warm_sumとgauge_n(どちらもdelta) = その行に畳んだ 5 秒の標本のdns_warmの合計と標本の数 (5 秒の行はdns_warmと同じ値と 1)。粗い解像度のゲージ 9 つ (active/mem_used/mem_limit/disk_used/disk_limit/rss/threads/fds/dns_warm) の平均は T16.0 から標本の数で重みを付けて 四捨五入します (前は行の数で割って切り捨てていたので、5 秒 → 60 秒 → 1 時間の 2 段で下に偏っていました)。dns_warmは合計から出すので真の平均 ±0.5、ほかの 8 つは 60 秒の丸めを重ねるので 1 時間の行で最悪 ±1.0 です。 T16.0 より前に書かれた標本はこの 3 列が 0 で読み戻り、畳むときは 1 本ぶん (gauge_n= 1) として扱いますrequests_delta/bytes_delta= その区間に増えた要求数とバイト数。 隣のrequests/bytesは通算のまま残してあります (ダッシュボードと道具が読んでいます)。 差は標本を作るときに取っているので、再起動の段差や欠けた標本があっても狂いませんactive_peak= その区間の同時接続の真の山。active_maxは 5 秒ごとの瞬間値の 最大なので 5 秒より短い山を取りこぼしますが、こちらは接続を数え上げるたびに見ています (T15.0 以降に撮った標本ではactive_peak >= active_max。それより前の標本は 上のとおりactive_peakが 0 で読み戻るので、この不等式は成り立ちません) 標本の後ろにclosedが付きます (T14.6): その窓に閉じた接続の分布で、閉じた理由 8 種の件数 (reasons。/recentのreasonと同じ綴り。error:*はerror1 つに、client_deadはshutdownにまとめます — 標本の余白の都合で列は 8 つのままです。 1 本ずつ切り分けたいときは/recentのreasonを読んでください。T14.52)・寿命の 12 段 (life、境目はlife_bounds_secs。PROXY_KEEPALIVE_SECSの 15 秒とPROXY_TUNNEL_IDLE_SECSの 300 秒が境目にあります)・ 上り / 下りバイトの 12 段 (up/down、境目はbyte_bounds= 1 KiB から 4 倍ずつ)・ 寿命と預かり秒とバイトの合計が並びます。標本 (samples) の形と読み方は変えていません (別の配列です)。 5 秒 × 720 と 60 秒 × 1,440 をメモリだけに持ちます (res=3600はnull、状態ファイルには書きません。 版 3 で標本 1 本の余白は 516 B = 64 項目に広がったので、移すかどうかは項目ごとに決めます)。件数 0 の窓は出しません (行の先頭に窓の始まりの時刻があります)。 その隣にtransfer(転送速度と半閉じの分布。T14.25) が付きます: その窓に終わった CONNECT のトンネルだけを数えたもので、1 行 =t・tunnels(終わった本数)・speed_nとspeed(速さ = 運んだバイト ÷ 中継の時間の 12 段。境目はspeed_bounds_bps= 1 KiB/s から 4 倍ずつ 1 GiB/s まで + 上限なしの 1 段 = 13 列。1 KiB 以上運んだトンネルだけが対象で、 境目は 1,024 / 4,096 / 16,384 / 65,536 / 262,144 / 1,048,576 / 4,194,304 / 16,777,216 / 67,108,864 / 268,435,456 / 1,073,741,824 / 4,294,967,296 バイト毎秒)・half_close_nとhalf_close(片側だけ閉じた (半閉じ) あと反対側が閉じるまでの 12 段 (ms)。境目はhalf_close_bounds_ms= 1 ms から 4 倍ずつ 1 / 4 / 16 / 64 / 256 / 1,024 / 4,096 / 16,384 / 65,536 / 262,144 / 1,048,576 / 4,194,304 ms + 上限なしの 1 段。PROXY_TUNNEL_IDLE_SECSの既定 300 秒は上から 3 段目に入ります。 半閉じで終わらなかったトンネルは数えません)・bytes_sum/relay_ms_sum/half_close_ms_sum(合計)・stall_client_ms_sum/stall_origin_ms_sum(中継が書けるのを待った ms の合計。T14.42。 末尾に足した 2 列で、既存の並びは 1 つも変えていません。clientは「クライアントへ書けなかった」= 利用者の下り回線か端末、originは「オリジンへ書けなかった」= オリジンか利用者の上り。tunnelsで割れば 1 本あたりの平均。1 本ごとの値は/recentのstall_ms。 1 KiB の足切りは掛けず、終わったトンネル全部が対象)。 中継の時間は「寿命 − 確立まで − 預かり所にいた時間」 (預けは利用者が待っていない時間なので中継ではありません)。 窓の作りと出し方はclosedと同じ (5 秒 × 720 と 60 秒 × 1,440、メモリだけ、res=3600はnull、 本数 0 の窓は出さない)。書くのはトンネルの終わりの 1 回だけで、要求の経路にも中継の往復にも費用はありません。
-
/history?since=<epoch>|restart&until=<epoch>&summary=1は、その期間を畳んだ 1 行だけを返します (T14.24)。{"from","to","interval_secs","first_t","last_t","samples","burst_samples","normal_hours_only","connects","p50_ms","p95_ms","avg_ms","max_ms","forwards","forward_p50_ms","forward_p95_ms","forward_avg_ms","forward_max_ms","dns_misses","dns_miss_per_connect","dns_miss_avg_ms","errors","errors_by_cause","causes","active_max","recent_quantiles"}で、標本そのものは返しません (応答は 700 B 前後、必ず 4 KiB 以下)。調査で「起動から」「前のデプロイと比べる」を 見るのに/historyを丸ごと (284 KB) 取って手元で集計していたのが 1 要求で済みます。since=restartは/statusのsince_start_secsと同じ起動時刻から (読み戻した再起動前の標本は入りません)。sinceを書かなければ残っているいちばん古い標本から、untilを書かなければ今までです。normal_hours_only=1を付けると **1 時間 300 本以上の標本 (バースト) を外した「平常時」**だけを畳みます (T14.0 の定義。外した本数はburst_samples)。5 秒の窓では閾が 1 本になり確立のあった標本が全部外れるので、 平常時を見るのは 60 秒か 1 時間の窓で。- 解像度は
?res=が無ければ期間の長さで選びます (1 時間までは 5 秒、1 日までは 60 秒、それ以上は 1 時間の窓)。 p50_ms/p95_msはその期間の 12 段のヒストグラムを足し合わせてから区間内を線形に補間した値 (scripts/snapshot-diff.pyが手元で集計するのと同じ求め方なので、同じ期間を切れば同じ数字が出ます)。- 末尾の
recent_quantilesは/statusと同じもの (直近 1,024 本の正確な分位点。T14.31) を そのまま添えたものです。p50_msとは別物で、since/untilに従いません (期間に関わらず直近 1,024 本)。1 ms 単位で読みたいときはこちらを、期間で切りたいときはp50_msを。/blocklist?host=<h>でブロックリストの判定、&action=block|allow|clear[&ttl_secs=N]で一時的な上書き (既定 24 時間、0で無期限。状態ファイルに 256 件まで残る)
-
/profile?res=5|60で「1 要求の時間がどの段階に消えたか」「CPU がどの役割のスレッドで何をして使われたか」 「ロックの取り合いと待ち行列の待ち」を 1 枚で (5 秒 × 720 = 1 時間 と 60 秒 × 1,440 = 1 日 の窓。 ダッシュボードの「プロファイル」の節がこれを描きます):- 段階 — CONNECT は
queue(accept してからワーカーが動き出すまで) /client_read(要求行を読んでからHostまで) /dns/connect/first_relay(200 Connection Establishedを書いてから最初の中継バイトまで = トンネル越しの TLS 握手の往復) /relay/parkの 7 段、転送はqueue/client_read/origin/send/ttfb/bodyの 6 段。段階 1 つにつき 件数・合計 ms・最大 ms・12 段の区間 (/historyと同じ 1〜5,000 ms) - スレッド — 役割ごとの CPU と「走行中 / どのシステムコールで待っているか / 休眠」の割合 (
PROXY_PROFILE_SAMPLE_MS)。 状態の割合は「どこで待っているか」で、「どこで CPU を使っているか」ではありません:/proc/<tid>/syscallはスレッドが CPU に乗っている間は中身に関係なくrunningを返すので、 カーネルの中で回り続ける処理 (spliceの中継など) はrunningに出ます。CPU の行き先は役割ごとの CPU を見てください。 またconn役には次の仕事を待っているワーカーも入ります (futex) threads_top(どのスレッドが回っているか) — その窓で CPU を多く使ったスレッドを最大 8 本、[tid, "comm", roles の添字, cpu_us, その窓に走行中だった標本の数]で。役割ごとの集計では 「conn役のrunningがいつも 2.0 本」までしか読めず、どのスレッドかが出ないので、 空回り (回り続けているのに何も進んでいないトンネル) を tid と名前で指すための欄です。 何もしなかったスレッドは並べません (1 本も無い窓は01 文字)run_delay_us(走れずに待った時間) — 役割ごとに「走行可能なのに CPU に乗れなかった」時間の その窓の増分 (us。/proc/self/task/<tid>/schedstatの 2 番目)。CPU の絞り (cgroup の quota) と 隣のプロセスとの取り合いがどちらもここに出るので、確立の尾がプロキシのせいか機械のせいかを 切り分けられます。CONFIG_SCHEDSTATSの無いカーネルではnull(capabilitiesのproc_schedstatが偽)user_us/cpu_user_us(ユーザー空間の CPU。T16.0) —keysの末尾の 2 列。user_usはrolesと同じ長さの配列で 役割ごとの、cpu_user_usはプロセス全体の、その窓の CPU のうちユーザー空間 (utime の増分 us) です。 カーネル側はthreadsのcpu_us − user_us/cpu_us − cpu_user_usで出します (sys は持ちません)。 中継の CPU は大半がカーネル (splice/poll) なので、ビルドの設定のようにユーザー空間にしか効かない変更は 合計では差が埋もれます。recentと?summary=1の各段の末尾にもcpu_user_usが付きます- CPU/要求 — 窓の CPU (utime + stime の増分) ÷ 窓の要求数。
scripts/cpu-per-request.shと同じ物差しの値が デプロイ先でも読めます (recent.cpu_per_request_usは直近 5 分) - ロック — 統計の表・名前解決の表・預かり所・ワーカーの 4 つが「待たされた」回数と、待ち行列で待った件数 / 合計 ms / 最大 ms
- 記録はプロセスのメモリだけ (約 6.9 MB = 1 標本 3,216 B × (720 + 1,440)。状態ファイルには書きません)。応答は 256 KiB 以下で、
入り切らないときは新しい標本を残して古い方から落とし
"truncated": trueを出します。--liteでは{"profile":"off"} ?n=と?offset=(T15.0 (11)) — 応答の 256 KiB に対して標本 1 本の JSON の行が太いので、 デプロイ先の実測 (T15.0 の行の形) で?res=5は 720 標本のうち 456 本、?res=60は 1,440 標本のうち 362 本しか 1 枚に入りません (T16.0 で 1 行が 20〜90 B 太ったので少し減るはずですが、まだ測り直していません。 上の 3,216 B はメモリの見積もりで、JSON の行の長さとは別の数です)。n=が 1 枚に返す標本の数 (既定はその解像度の全部、上は 720 / 1,440)、offset=が新しい方から何本飛ばすかです。 応答の末尾にn/offset/next_offsetが出て、next_offsetがnullならそれで終わりです。 時刻では引けません (since=/until=は足していません) — 環は新しい順に詰めるだけの作りで、 標本のtは 1 つ目の欄にあるので、読む側で切ってください?summary=1— 標本を 1 本も返さず、5m/1h/allの 3 段に畳んだrequests/cpu_us/cpu_per_request_us(と畳んだ標本の数samples) だけを返します。 これだけは重い口ではありません (/snapshotを組んでいる最中でも 503 になりません) ので、 「いまこの機械が 1 要求に何 us 使っているか」を 5 秒おきに引く監視はこちらを使ってください- 段階の窓は ms 刻みなので、loopback のように 1 要求が 1 ms に満たない環境ではほとんどの段階が 0 に潰れます
(これはデプロイ先の 6〜30 ms の待ちを読むための道具です。手元の速さを見るなら
cpu_per_request_usの方) - Prometheus で長く見るなら 同じ段階が
/metricsのsorahost_stage_seconds{kind="connect"|"forward",stage=...}にも起動からの累計で出ます (/profileの窓は 1 時間 / 1 日で古い標本から落ちます)。ロックの取り合いはsorahost_lock_contention_total{lock=...}です
- 段階 — CONNECT は
-
- タイムアウト制御:
PROXY_TIMEOUT_SECSによる接続および読み書きタイムアウト制御PROXY_CONNECT_TIMEOUT_SECSでCONNECTのオリジン接続だけに短い締め切りを置いています (既定 5 秒。未設定なら 5 秒とPROXY_TIMEOUT_SECSの小さい方)
環境変数を書かなくても、よく使う設定は引数で渡せます (優先順位は 引数 > $HOME/.env > 環境変数)。
-p, --port <PORT> 待ち受けポート (SERVER_PORT)
--bind <ADDRS> 待ち受けアドレス (PROXY_BIND、カンマ区切り)
--no-cache キャッシュを止める (PROXY_CACHE_ENABLED=off)
--quiet 警告以上だけ出す (PROXY_LOG_LEVEL=warn)
--lite 最速の素通しプロファイル (PROXY_PROFILE=lite)
--check 起動せずに環境と効く設定を出して終了 (下記)
-h, --help 使い方を出して終了 (終了コード 0)
-V, --version 版を出して終了
--port=3128 の形式も使えます。知らない引数は使い方を出して終了コード 2 になります。
--check は起動せずに「この環境で何が読めるか」(capabilities の 7 項目) と
「この設定で起動したら何が効くか」(/config と同じ全 PROXY_* / SERVER_* と出どころ) を印字して終わります。
Pterodactyl のように触れないコンテナで、起動前の確認と統計の null の理由の切り分けに使えます
(他の引数も一緒に効くので --check -p 3128 --lite のように「その設定なら何が効くか」も見られます)。
終了コードは capabilities の 7 項目 (resolver_ms と cgroup_cpu_path を除く) が全部読めれば 0、
1 つでも読めなければ 1 です (名前解決を外すのは、リゾルバが遅い環境でもプロキシとしては動く —
そしてそれ自体が測りたい数字 — ため。cgroup_cpu_path は真偽ではなく「どの階層の cpu.stat を読むか」を
見せるだけの行です。T15.0 (6))。
$ rust-http-proxy --check
rust-http-proxy 0.18.0+28f9064 --check
settings file: /home/container/.env (3 variables)
capabilities (what this environment lets the proxy read):
[ok] proc_syscall /proc/self/task/<tid>/syscall (per-thread state)
[ok] tcp_info getsockopt(SOL_TCP, TCP_INFO) (kernel RTT and retransmits)
[ok] cgroup_cpu cgroup cpu.stat (CPU throttling)
[ok] cgroup_pressure cgroup cpu.pressure (PSI: waiting for the CPU)
[ok] ipv6_route a default route in /proc/net/ipv6_route
[ok] home_writable $HOME is writable (statistics file, blocklist)
[ok] proc_schedstat /proc/self/task/<tid>/schedstat (time runnable but not running)
[ok] resolver_ms 9 ms for one lookup (not part of the exit code)
[ok] cgroup_cpu_path /sys/fs/cgroup/cpu.stat (where nr_throttled is read)
settings (source, name, effective value):
default SERVER_PORT 8080
env_file PROXY_DNS_TTL_SECS 30
...
check: ok (everything this proxy reads is readable)
-V が出す版は 0.18.0+144b992 のように Cargo.toml の版 + ビルドしたときの git の短いハッシュです
(作業ツリーに未コミットの変更があれば 0.18.0+144b992-dirty)。git や .git の無いところでビルドすると
0.18.0+unknown になります (ビルドは通ります)。同じ文字列を起動ログの rust-http-proxy ... listening on ... の行と
/status のトップレベルの version にも出すので、デプロイ先でどのコミットが動いているかが分かります。
--lite (= PROXY_PROFILE=lite) は「認証なし・手軽・最速」の素通し設定です。キャッシュ・統計の永続化・
ブロックリストの取得を止め、ログを warn にします (個別の環境変数を明示すればそちらが勝ちます)。
/dashboard は 1 行の lite mode: ... を返し、起動ログの 1 行目に profile: lite が出ます
(「調査」ページ /inspect と「端末から測る」ページ /probe.html は --lite でも 200 で開けます —
中の表と図は「記録していません」と出ます)。
起動直後のスレッドは 4 本 (待ち受け + env-reload + shutdown + idle-watch) だけです
(PROXY_PARK_IDLE=off なら 3 本)。
./rust-http-proxy --lite -p 8080まず探すための一覧表です (並びは /config と --check が出す順)。「ひとこと」は 1 行の要約なので、
条件や根拠まで要るときは下の「変数ごとの説明」を見てください (分類ごとに、変数 1 つ = 箇条書き 1 つ)。
| 環境変数名 | デフォルト値 | ひとこと |
|---|---|---|
SERVER_PORT |
8080 |
待ち受けポート (Pterodactyl が自動設定) |
PROXY_BIND |
自動 (:: + 0.0.0.0) |
待ち受けアドレスのカンマ区切り。未設定でデュアルスタック |
PROXY_IPV6 |
on |
IPv6 を使うか (待ち受けと AAAA での接続) |
PROXY_LISTEN_BACKLOG |
0 (= min(1024, somaxconn)) |
待ち受けの受け入れ待ち行列の長さ (listen(2)) |
PROXY_TIMEOUT_SECS |
30 |
接続とデータ転送の締め切り (秒)。0 で無期限 |
PROXY_CONNECT_TIMEOUT_SECS |
5 |
CONNECT のオリジン接続だけの締め切り (秒) |
PROXY_HE_STAGGER_MS |
250 |
Happy Eyeballs で次の候補を試し始めるまでの間隔 (ms、10〜2000) |
PROXY_KEEPALIVE_SECS |
15 |
クライアント接続を次の要求まで待つ時間 (秒) |
PROXY_TUNNEL_IDLE_SECS |
300 |
CONNECT トンネルのアイドル打ち切り (秒) |
PROXY_MAX_CONNS |
auto |
同時に受ける接続数の上限 |
PROXY_MAX_CONNS_PER_CLIENT |
0 (無効) |
1 つの接続元から同時に受ける接続数の上限 |
PROXY_MAX_THREADS |
auto |
同時に生きていてよい接続スレッドの上限 |
PROXY_ORIGIN_POOL |
64 |
オリジンへのアイドル接続をホストごとに保つ本数 |
PROXY_ORIGIN_POOL_TOTAL |
256 |
アイドル接続の全ホスト合計の上限 |
PROXY_PARK_IDLE |
on |
暇な接続をスレッドから外して監視スレッドに預ける |
PROXY_PARK_GRACE_MS |
3 |
預ける前に同じスレッドで待ってみる時間 (ms) |
PROXY_MALLOC_ARENAS |
8 |
malloc のアリーナ数の上限 |
PROXY_DNS_TTL_SECS |
60 |
名前解決の結果を保持する秒数 |
PROXY_DNS_NEGATIVE_SECS |
60 |
名前解決の失敗を覚えておく秒数 (0 で覚えない) |
PROXY_DNS_WARM_SECS |
0 |
keep-warm: よく使う名前を裏で引き直し続ける窓 (秒。0 で止める = 既定。T21.3 までの既定は 3600) |
PROXY_DNS_STALE_SECS |
21600 |
serve-stale: 期限切れでもこの秒数未満の答えは待たずに使い、裏で引き直す (0 で止める) |
PROXY_CANARY |
auto |
canary: 要求が無い時間帯も待ちを測る宛先 |
PROXY_CANARY_SECS |
60 |
canary の周期 (秒、最小 1) |
PROXY_CANARY_IPV6 |
on |
canary の IPv6 側 (AAAA へ 1 本だけ繋いでみる) |
PROXY_ALLOW_HOSTS |
なし (全許可) | 接続を許すあて先ホストのカンマ区切り |
PROXY_DENY_HOSTS |
なし | 接続を拒むあて先ホストのカンマ区切り |
PROXY_CONNECT_PORTS |
なし (制限なし) | CONNECT を許すあて先ポート |
PROXY_ALLOW_LOCAL |
off |
ループバック・リンクローカル宛てを許すか |
PROXY_ENDPOINTS_READONLY |
off |
内部エンドポイントの書き換える口だけを断る |
PROXY_ALLOW_CLIENTS |
なし (全許可) | 受ける接続元のカンマ区切り (CIDR 可) |
PROXY_TRACE_CLIENT |
なし (追跡しない) | 1 つの接続元だけを追って /trace に残す |
PROXY_PEEK_SNI |
on |
CONNECT の先頭から SNI を読んで個票に残す |
PROXY_BURST_PERCENT |
50 |
同時接続がこの割合を越えた瞬間に写真を 1 枚撮る |
PROXY_BLOCKLIST_FILE |
なし | ドメインのブロックリスト (hosts 形式も可) |
PROXY_BLOCKLIST_URL |
なし | ブロックリストを取りに行く URL |
PROXY_BLOCKLIST_REFRESH_SECS |
86400 |
URL を取り直す間隔 (秒、最小 60) |
PROXY_BLOCKLIST_EXEMPT |
なし | ブロックリストの対象外にするホスト |
PROXY_PAC_DIRECT |
なし | /proxy.pac で DIRECT にするホスト |
PROXY_TLS |
on |
HTTPS のオリジンから取得するか |
PROXY_TLS_VERIFY |
on |
オリジンの証明書を検証するか |
PROXY_TLS_CA_FILE |
なし (システムの CA) | 追加で信頼する CA 証明書 (PEM) |
PROXY_TCP_KEEPALIVE |
on (= on:60:10:3) |
消えたクライアントを見つける TCP keepalive |
PROXY_RECORDS |
on |
個票に何を残すかの旗 |
PROXY_STATS_PERSIST |
on |
統計・履歴・個票をファイルに残して読み直すか |
PROXY_SNAPSHOT_DAYS |
30 |
日次の snapshot を残す日数 |
PROXY_SLO |
connect_p50_ms=10,connect_p95_ms=100,error_rate=0.005,dns_miss_per_connect=0.2 |
SLO の 4 つの閾 |
PROXY_PROFILE |
なし | lite で最速の素通しプロファイル |
PROXY_PROFILE_SAMPLE_MS |
1000 |
/profile のスレッドの標本を取る間隔 (ms) |
PROXY_SELF_BENCH |
off |
起動直後に loopback だけで 3 秒の自己ベンチを回す |
PROXY_LOG_LEVEL |
info |
ログレベル |
PROXY_CACHE_ENABLED |
true |
キャッシュを無効化する旗 |
PROXY_CACHE_DIR |
自動選択 (後述) | ディスクキャッシュ格納先 |
PROXY_MEM_CACHE_MB |
auto |
メモリキャッシュ上限 |
PROXY_DISK_CACHE_MB |
auto |
ディスクキャッシュ上限 |
PROXY_MEM_TARGET_PERCENT |
100 |
auto 時にメモリ使用率を頭打ちにする割合 |
PROXY_DISK_TARGET_PERCENT |
100 |
auto 時にディスク使用率を頭打ちにする割合 |
PROXY_MEM_KEEP_FREE_MB |
0 |
手動で必ず空けておくメモリ量 (MiB) |
PROXY_DISK_KEEP_FREE_MB |
0 |
手動で必ず空けておくディスク量 (MiB) |
PROXY_CACHE_RESERVE |
staged |
先行確保 (バラスト) の仕方 |
PROXY_CACHE_PROBE_SECS |
1 |
使用量を測り直して予算を更新する間隔 (秒) |
PROXY_CACHE_TTL_SECS |
300 |
鮮度の手がかりが無いときの TTL (秒) |
PROXY_CACHE_HEURISTIC_PERCENT |
10 |
Last-Modified からの経過時間のうち TTL にする割合 |
PROXY_CACHE_HEURISTIC_MAX_SECS |
604800 |
経験則 TTL の上限 (秒) |
PROXY_CACHE_MAX_STALE_SECS |
2592000 |
再検証できるエントリを保持する最長時間 (秒) |
PROXY_CACHE_GRACE_SECS |
60 |
期限切れ後すぐ返して裏で再検証する秒数 |
PROXY_STALE_WAIT_SECS |
5 |
期限切れのときオリジンを待つ上限 (秒) |
PROXY_CACHE_MAX_OBJECT_MB |
4096 |
ディスク層に置く 1 オブジェクトの最大 (MiB) |
PROXY_MEM_CACHE_MAX_OBJECT_MB |
32 |
メモリ層に置く 1 オブジェクトの最大 (MiB) |
PROXY_DISK_MAX_ENTRIES |
2000000 |
ディスク層の索引に保持するエントリ数の上限 |
PROXY_CACHE_ADMISSION |
on |
入場制御 (1 回目は置かない) |
PROXY_NEGATIVE_TTL_SECS |
60 |
否定応答 (404 / 410 など) の TTL 上限 (秒) |
PROXY_DISK_QUOTA_MB (別名 SERVER_DISK) |
なし | コンテナのディスク割当 (別名 SERVER_DISK) |
PROXY_DISK_QUOTA_ROOT |
$HOME |
ディスク割当が適用されるディレクトリ |
PROXY_DISK_PROBE |
on |
割当が分からないとき Wings の挙動から探るか |
SERVER_MEMORY |
なし | コンテナのメモリ割当 (MB)。Pterodactyl が自動設定 |
環境変数を設定できない環境 (Pterodactyl で egg 変数を追加する権限が無い等) では、$HOME/.env に KEY=VALUE を
1 行ずつ書けば同じ効果になります (# はコメント、ファイルの値が実際の環境変数より優先)。Pterodactyl ならファイルマネージャで
/home/container/.env を置くだけです。
.env は起動後も監視していて、保存すると再起動なしで読み直します ($HOME を inotify で監視、使えないファイルシステムでは
30 秒ごとの mtime 確認)。即時に反映されるのは PROXY_ALLOW_HOSTS / PROXY_DENY_HOSTS / PROXY_TIMEOUT_SECS /
PROXY_CONNECT_TIMEOUT_SECS /
PROXY_KEEPALIVE_SECS / PROXY_LOG_LEVEL / PROXY_MAX_CONNS / PROXY_MAX_THREADS /
PROXY_ALLOW_CLIENTS / PROXY_ENDPOINTS_READONLY / PROXY_MAX_CONNS_PER_CLIENT などで、
既存の keep-alive 接続には次の接続から効きます (どの値を当てたかは /status の settings.applied に出ます)。ポート・bind・
待ち受けの backlog (PROXY_LISTEN_BACKLOG)・TLS・
オリジンプール・キャッシュ予算 (SERVER_MEMORY / SERVER_DISK / PROXY_CACHE_*) は起動時に固定なので、変更を検知すると
/status の settings.restart_required と /dashboard の帯に「再起動が必要」と出ます。解釈できない値を書いた場合は
前の設定を維持し、settings.error にメッセージが入ります。
いま何が効いているかは /config で 1 枚に出ます (JSON)。全 PROXY_* / SERVER_* について
{"PROXY_DNS_TTL_SECS":{"value":30,"source":"env_file"}, ...} の形で、value はいま効いている値、
source はそれが来た層 (default = このコードの既定 / env = 実際の環境変数 / env_file = $HOME/.env /
cli = コマンドライン引数) です。書いたのに読めない書き方だった行は default のまま出るので、
「.env に書いたのに効かない」がその場で分かります (再起動が要る項目は値が古いままなので、
同じ応答の reload.restart_required を見てください)。別名のあるキー (SERVER_DISK は
PROXY_DISK_QUOTA_MB の別名) は、実際に効いた方にだけ source が付きます。
一覧の値 (PROXY_PAC_DIRECT など) は 1 KiB で切って "+N more" を付けます (全部見たいときは .env を読む)。
同じ応答に capabilities (上記) と .env の監視の状態も入るので、データを取るときは /config を 1 枚
一緒に保存しておけば「そのときの設定」が後から読めます。応答は 64 KiB 以下です。
PROXY_CACHE_DIR を指定しない場合は、書き込める最初の候補を使います:
$XDG_CACHE_HOME/rust-http-proxy (または ~/.cache/rust-http-proxy) → /var/cache/rust-http-proxy → $TMPDIR/rust-http-proxy-cache。
Pterodactyl 以外で root 実行の場合は /var/cache を優先します。$TMPDIR は tmpfs (RAM) のことが多いので最後の手段です。
並びは /config と --check が出す順 (Config::settings()) と同じです。説明の文面は上の表にあったものをそのまま移しました。
SERVER_PORT(既定8080) プロキシが待受を行うポート番号 (Pterodactyl が自動設定)PROXY_BIND(既定 自動 (::+0.0.0.0)) 待ち受けアドレスのカンマ区切りリスト (例:127.0.0.1,[::1])。 未設定ならデュアルスタックで自動PROXY_IPV6(既定on) IPv6 を使う (待ち受けと AAAA での接続)。offで0.0.0.0のみ・A レコードのみ。onのままでも、IPv6 が黙って落ちる環境では自動で IPv4 を先に試す (上記。確実に避けたいならoff)PROXY_LISTEN_BACKLOG(既定0(=min(1024, somaxconn))) 待ち受けの受け入れ待ち行列の長さ (listen(2)の backlog)。 Rust のTcpListener::bindは 128 固定ですが、ブラウザがページを 1 枚開くと数十本の CONNECT が同時に来るのに accept ループは 1 本しかありません (増やしても速くならないことを測って決めた設計)。 行列が溢れると SYN は黙って捨てられ、クライアントは 1 秒後に再送するので、利用者には 1 秒の待ちとして見えます (統計には「遅い接続」としてすら残りません)。0/autoはmin(1024, /proc/sys/net/core/somaxconn)、数値を書けばその値。 カーネルがsomaxconnで頭打ちにするので、それより大きく書いてもsomaxconnまでしか効きません (この機械のsomaxconnは4096、既定は1024)。 効いている値は起動ログのlistening on ... (backlog N, ...)と/configのPROXY_LISTEN_BACKLOGに出ます。 実際にカーネルに届いたかはss -ltnのSend-Q(待ち受けの行) で見られます。 溢れた回数は/statusのkernel.last_5m.listen_overflows(Linux)。.envでは即時反映されません (待ち受けは起動時に 1 回作るため。変更を検知するとrestart_requiredに出ます)。 Linux 以外ではstdのまま 128 です
PROXY_TIMEOUT_SECS(既定30) 接続およびデータ転送タイムアウト(秒)。0で無期限 (PROXY_TUNNEL_IDLE_SECSと同じ意味): 何も送ってこないクライアント接続を閉じず、オリジンへの接続と読み書きにも締め切りを置かない (OS 既定に任せる)。PROXY_KEEPALIVE_SECS(要求と要求の間) とPROXY_TUNNEL_IDLE_SECSは別に効くPROXY_CONNECT_TIMEOUT_SECS(既定5)CONNECTのオリジン接続だけの締め切り (秒)。 未設定なら 5 秒とPROXY_TIMEOUT_SECSの小さい方です (全体を 3 秒にしていれば 3 秒)。PROXY_TIMEOUT_SECS=0(無期限) でも 5 秒です — 繋がらない相手を無期限に待つ意味が無いためで、無期限にしたいときは0と明示してください。 既定を 10 → 5 秒にした根拠 (2026-10-20、T23.3): 雪像 4 枚 (tokyo 3 枚 + nagoya 1 枚) のconnect_bucketsを数えると、5 秒を越えて成功した確立は tokyo の 12 日ぶん 91,258 本で 0 本、 nagoya の 28 日ぶん (258,951 本、失敗も区間に入れた古い版) でも 22 本 (= 1 日 0.79 本の上限、timeout18 本を引けば 4 本) だけでした。2.5〜5 秒も tokyo の 12 日で 4 本 (= 1 日 0.33 本) です。 一方timeoutは tokyo の 62 時間に 3,869 本あり、1 件 10 秒を丸ごと待っていました (待ち 10.4 分/時 = 4.2 時間/日)。5 秒にすると待ちが半分 (2.1 時間/日) になります。 T15.6 (2) が「5 秒は攻めすぎ」と言った根拠は、遠いオリジンで SYN の再送 (1 秒 → 3 秒) が重なると 4 秒台まで伸びうることでした。実測では 4 秒台の成功が 12 日で 4 本しかなく、5 秒なら 4 秒台は切らずに残ります (切るのは 5 秒を越えた分だけ)。数え直す道具はscripts/connect-timeout-replay.py SNAP.json …(--secs/--hours/--json)。 戻すには.envにPROXY_CONNECT_TIMEOUT_SECS=10の 1 行 (再読込で効きます)。 戻す条件は「5 秒で切った接続のうち本当は繋がったはずのものが 1 日 1 本以上」(T23.99 で見ます)。 いまはCONNECTにだけ効きます: forward のオリジン接続・オリジンとの読み書き・クライアントソケットの読み書き・ブロックリストの取得はPROXY_TIMEOUT_SECSのままです。 繋がらない相手を待つ時間 (利用者から見える「固まっている」時間) だけを縮めるための鍵です —PROXY_TIMEOUT_SECSを短くすると大きな本文の転送や遅い応答まで切ってしまうためです。 Happy Eyeballs の締め切りも同じ値なので、締め切りで抜けた接続は/errorsにcause: "timeout"で残ります。 名前解決の時間は含みません (名前を引いたあとのconnectに効きます)。.envで即時反映PROXY_HE_STAGGER_MS(既定250) Happy Eyeballs (RFC 8305) で、名前が複数のアドレスを返したときに先頭の候補が返らなければ次の候補を試し始めるまでの間隔 (ms)。 受けるのは 10〜2000 (RFC 8305 の範囲) で、外れた値と数でない値は起動ログにWARNを 1 行出して既定の 250 に戻します (/configの出どころもdefaultのまま)。 起動時に 1 回だけ読みます (.envを書き換えても効かず、/statusのsettings.restart_requiredに出ます)。 IPv6 が黙って落ちる網ではホストごとに勝った族を覚えるので (上の「250 ms が消えたのは」)、この間隔を払うのは初めて見るホストと 600 秒に 1 回の IPv6 の探りだけです。 縮めると SYN が遅いだけの相手にも 2 本目を同時に張る回数が増えるので、既定から動かす理由が無ければそのままにしてくださいPROXY_KEEPALIVE_SECS(既定15) クライアント接続を次の要求まで待つアイドル時間 (秒)。0で 1 接続 1 要求。 待つ長さとは別に、1 本の接続で 1,000 要求を捌いたらその接続は閉じます (下記)PROXY_TUNNEL_IDLE_SECS(既定300) CONNECT トンネルのアイドル打ち切り。双方向とも無通信がこれだけ続いたら両側を閉じる (PROXY_PARK_IDLE=onなら、預かり所が期限を見て引き上げる)。0で無期限。.envで即時反映PROXY_MAX_CONNS(既定auto) 同時に受ける接続数の上限。上限に当たったら、まず預かり所の暇な CONNECT トンネルを最古から 1 本閉じて席を作り、その接続を受ける (閉じた数は/statusのevicted_idleと/metricsのsorahost_evicted_idle_total。暇な keep-alive 接続は閉じない — 次の要求を待っているだけなので、閉じると入れ違いで届いた要求を取りこぼすため)。 閉じるものが無い (トンネルが全部中継中、または預かり所が空) ときは、スレッドを起こさず503 Service Unavailable+Retry-After: 1を返して閉じる。 ただし自分宛て (/status/metricsなどの内部エンドポイント) は上限 + 4 本まで受ける: accept の時点では要求が読めないので、4 本までは受けて要求行とHostを読み、自分宛てなら普通に応答、それ以外は 503 で閉じる (上限に当たっている最中でも監視が取れるようにするため。この枠で受けた接続は要求行が 2 秒来なければ 503 で閉じる)。autoは記述子の上限からmin(4096, (RLIMIT_NOFILE の soft − 予備 64) ÷ 4)(1 接続が最悪で使う記述子は クライアント 1 + オリジン 1 + 素通しのパイプ 2 = 4 本。ulimit -nが 1024 の環境なら 240、4096 なら 1008)。 記述子が余っていても 4096 で頭打ちにするのは、上限が fd 以外の資源 (スレッド・RSS) の歯止めでもあるため (同時 5,000 本で RSS 198 MiB の実測)。 数値を書けばその値、0で無制限。決まった値は起動ログのmax connections:と/statusのmax_conns(/metricsはsorahost_max_connections) に出る。.envで即時反映。断った数は/statusのrejected_overloadと/metricsのrejected_overload_totalPROXY_MAX_CONNS_PER_CLIENT(既定0(無効)) 1 つの接続元から同時に受ける接続数の上限。認証なしの公開ポートで、見知らぬ接続元 1 人がPROXY_MAX_CONNS(既定 240) を使い切ると本人が 503 になるため、その手前で頭を押さえるつまみです。 認証ではなく公平さの上限です (同じアドレスから来られれば誰でも通ります)。 設定すると accept の直後にその接続元のいま生きている接続の本数を数え、上限以上なら503 Service Unavailable+Retry-After: 1を返して閉じます。 断った数は/statusのrejected_per_clientと/metricsのsorahost_rejected_per_client_total、接続元ごとの内訳は/clientsの行のrejected。 自分宛て (/statusなどの内部エンドポイント) は数えません: accept の時点では要求が読めないので、PROXY_MAX_CONNSと同じ「上限 + 4 本」の枠で受けてから要求行を読み、自分宛てなら普通に応答、それ以外は 503 で閉じます (上限に当たっている接続元からでも監視が取れるように)。 数え方: 数えるのは/connectionsの表と同じ「接続の開始と終了」で ±1 する本数で、鍵は接続元 IP (v4-mapped IPv6 は IPv4 として数えます)。 NAT の内側の複数台は 1 人として数えられます。数えるのは上限を設定している間だけで、0に戻すと表ごと捨てます (既定の費用は accept ごとの分岐 1 回)。--liteでも効きます (/connectionsの行は作らずに本数だけ数えます)。 同時に来た数本は上限を少し超えて通ることがあります (数えるのは登録済みの本数のため)。.envで即時反映 (次に受ける接続から。あとから入れたときは、そのとき生きている接続から数え直します)PROXY_MAX_THREADS(既定auto) 同時に生きていてよい接続スレッドの上限。上限に達したら新しいスレッドを起こさず、その仕事を待たせる (捨てない。空いたスレッドが順に引き取る)。autoはmin(PROXY_MAX_CONNS, コア数 × 64 を 128〜512 に収めた値)で、コア数はtasksetで絞られていればその数。 数値を書けばその値、0で無制限 (T10.5 以前の動き)。 上限があるのは、預けた接続が一斉に切れたときにスレッドが跳ねないようにするため (暇なトンネル 5,000 本の一斉 close で、上限なしだと一時的に 4,400〜4,700 スレッド・RSS 65 MB、上限 256 なら 260 スレッド・RSS 27 MB)。.envで即時反映 (次に受ける接続から効く。下げても走っているスレッドは殺さず、仕事を終えたスレッドから順に減ります。autoのときはPROXY_MAX_CONNSを変えるとこちらも決め直します)。 決まった値は起動ログのmax connection threads:と/statusのmax_threadsに出る (いまの本数は/statusのlive_threads/idle_threads、上限に当たって待たせている仕事はqueued_jobs。/metricsにもsorahost_max_threads/sorahost_live_threads/sorahost_idle_threads/sorahost_queued_jobsとして出る)。 裏側の再検証 (stale-while-revalidate) もこの上限の内側で走りますが、こちらは待たせず捨てます (/statusのrevalidations_dropped)PROXY_ORIGIN_POOL(既定64) オリジンへのアイドル接続をホストごとに保持する本数。0で再利用しない。 少ないと同時要求数が多いときに張り直しが増える (実測: 8 本だと 64 並列で p99 が 40 ms 台、64 本なら 10 ms 前後)PROXY_ORIGIN_POOL_TOTAL(既定256) アイドル接続の全ホスト合計の上限。多数のホストへ行くときにホスト数 × PROXY_ORIGIN_POOLまで増えないようにするPROXY_PARK_IDLE(既定on) アイドルな keep-alive 接続と、両方向とも暇な CONNECT トンネルをスレッドから外し、1 本の監視スレッド (epoll) に預ける。offで「1 接続 = 1 スレッドが専任」の動きに戻る。 Linux 専用 (それ以外では自動的に無効)。実測: 暇な接続 2,000 本でスレッド 2,004 → 25 本、RSS 68.0 → 25.2 MB、暇なトンネル 5,000 本でスレッド 5,005 → 68 本、RSS 93.9 → 29.9 MB。 忙しいときの CPU/要求とシステムコール数は変わらないPROXY_PARK_GRACE_MS(既定3) 預ける前に同じスレッドで待ってみる時間 (ミリ秒。CONNECT トンネルは下限 100 ms)。 続けて要求が来る忙しい接続に、預ける/戻すの往復 (epoll_ctl2 回 + ワーカーの受け渡し、実測 18 µs/要求) を払わせないための猶予。 読み取りタイムアウトをこの長さにして空振りを「暇だ」と解釈するので、システムコールは増えない。0なら猶予なしで即座に預けるPROXY_MALLOC_ARENAS(既定8) malloc のアリーナ数の上限。0で glibc の既定 (コア数 × 8) のまま。 接続ごとにスレッドが増えるため、既定のままだとアイドル接続を多く抱えたときに使われないアリーナが RSS に居座る (実測: 2,000 本のアイドル接続で 80.5 → 26.8 kB/接続)。 代償は高並列でのロック競合 (実測: 64 並列で CPU/要求 +4%、8 並列では差なし)。 実際に掛かった値は/statusのmemory.arenasに出ます
PROXY_DNS_TTL_SECS(既定60) 名前解決の結果を保持する秒数 (この長さが妥当かは/dnsのchanges÷ (misses+refreshes) で見ます。答えがほとんど変わらないなら延ばせます)。0で毎回解決 (それでも 1 要求につき 1 回。/statusのdns.missesがその回数)。 直近この秒数以内に使われた名前は期限の 3/4 を過ぎたところで裏で 1 回だけ引き直すので、使い続けているホストはミスになりません (/statusのdns.refreshes)。 解決に失敗したら 1 時間以内の古い結果を使う。.envで即時反映PROXY_DNS_NEGATIVE_SECS(既定60) 名前解決の失敗を覚えておく秒数 (0で覚えない)。 覚えている間は OS に問い合わせずに同じエラーを返します (/statusのdns.negative_hits)。 引けない名前 1 つで 2 秒待たされることがあるための蓋で、古い答えが 1 時間以内にあるときはエラーより古い答えを優先します。.envで即時反映PROXY_DNS_WARM_SECS(既定0= 止める。T22.4 で3600から変えた) keep-warm: 直近この秒数に 2 回以上使われた名前 (warm) は、使われていなくてもPROXY_DNS_TTL_SECSの 3/4 ごとに裏で引き直し続けます (0で無効 = 直近 TTL 内に使われた名前だけ 1 回先回りする動きに戻る)。 既定で止めている理由 (T22.4): serve-stale (PROXY_DNS_STALE_SECS) のもとでは、warm が救っていた期限切れのミスは待たない古い答えの当たりになるので、warm の引き直し (1 名前 80 回/時、tokyo では 32 件で約 2,000 回/時) はミスをほとんど減らしません。scripts/dns-replay.py --gridの再生 (雪像 3 枚) で、止めると引き直しは今の 5〜27%、expired+warm_staleのミスは増えませんでした。代わりに古い答えで繋ぎに行く回 (dns.stale_hits) が増えます。 T21.3 までの動きに戻すときはPROXY_DNS_WARM_SECS=3600。 TTL (60 秒) を熱さの物差しにすると、間隔が TTL より長いホストは 1 つも救えません (デプロイ先の主要 3 件は 2〜10 分間隔で、ミス率は 0.31 / 0.76 / 1.00 でした)。 1 回だけ使われた名前は warm にしません (引き直しても二度と来ない)。 答えを持っている名前だけが warm になります (引けない名前は負のキャッシュの担当)。 同時に warm でいられるのは 32 件まで (最後の使用がいちばん古いものから外す) で、最後の使用からこの秒数を過ぎたら引き直しを止めます。 最悪でも 32 件 ÷ 45 秒 ≈ 0.7 回/秒。いま warm な名前の数は/statusのdns.warm、名前ごとの予定は/dnsのwarm/next_refresh_secs。 逆に、この窓より長い間隔で来る名前は救えません: デプロイ先の実測 (2026-09-18、36.6 時間) では上の 3 件が 0.02 / 0.15 / 0.01 に下がりましたが、discord.comだけ 0.15 が残りました — 2〜4 本の塊が約 1,800 秒おきに来るので**(当時の既定) 900 秒**の窓をいつも外れ、塊の 1 本目が必ずミスするためです (2026-09-18T053213Z-snapshot.jsonの$.hosts.hostsの差分と$.hosts_series)。 そこで T15.4 で既定を 900 → 3,600 秒に広げました (デプロイ先での効きの判定は T15.99)。.envで即時反映PROXY_CANARY(既定auto) canary (利用者の要求が無い時間帯も待ちを測る):PROXY_CANARY_SECS秒に 1 回、宛先へ名前解決と TCP 接続だけ (とPROXY_CANARY_IPV6=onなら AAAA へもう 1 本) を行って時間を残します (握ったらすぐ閉じ、TLS も HTTP も送りません。相手に届くのは 1 分に 1 回の SYN と FIN だけ)。autoは直近 1 時間で最も要求の多い CONNECT の宛先 (/statusの上位ホストの先頭で、最後に使ってから 1 時間以内のもの) を毎周期選び直します (1 件も無ければ何もしません = 誰も使っていないプロキシは誰にも繋ぎません)。offで止める。ホストをカンマ区切りで書けばその全部 (最大 8、ポートを省くと 443)。 結果は/statusのcanary、/history?res=5|60のcanaryの配列、/metricsのsorahost_canary_seconds{stage="dns"|"connect"|"ipv6_connect"}、失敗は/errorsにkind: "canary"で 1 件。 名前解決は表を通さず OS に聞くので利用者のdnsの数字には混ざりません。 履歴スレッドが動いているときだけ回ります (--liteとPROXY_STATS_PERSIST=offでは回りません)。.envで即時反映PROXY_CANARY_SECS(既定60) canary の周期 (秒、最小 1)。試験で短くするための口で、運用では触りません (60 秒に 1 回・1 宛先 1 本なら、相手にも自分にも負荷はありません)。.envで即時反映PROXY_CANARY_IPV6(既定on) canary の IPv6 側: 同じ周期に、canary の名前の AAAA へ 1 本だけ繋いでみて/statusのcanary.ipv6_connect_msと/historyのcanaryの 5 列目 (canary_ipv6_connect_ms) に残します。 繋がれば ms、繋がらなければnull(AAAA が無い名前、PROXY_IPV6=off、経路が黒穴、ここがoff)。 コンテナの IPv6 が黙って落ちる環境で「生き返ったか」を 1 分の粒度で読むための観測で、IPv6 の探りも引き受けます (T17.7): この 1 本が試している間は利用者の要求で 600 秒に 1 回 IPv6 を先頭に戻す探りをやめ (/statusのipv6.probe_byが"canary")、繋がればv4_firstを解きます。 Happy Eyeballs もipv6の勝敗 (attempts/wins/losses) もホストごとの族の記憶も動かしません。offにすると、最後の 1 本から 600 秒で探りは利用者の要求に戻ります。 失敗は/errorsに残しません (黒穴のままだと 1 分に 1 件ずつ埋まるため)。offにすると 1 本も出しません。.envで即時反映
PROXY_ALLOW_HOSTS(既定 なし (全許可)) 接続許可ホストのカンマ区切りリスト (例:*.example.com,api.github.com)PROXY_DENY_HOSTS(既定 なし) 接続拒否ホストのカンマ区切りリスト (例:bad.com,*.blocked.org)PROXY_CONNECT_PORTS(既定 なし (制限なし))CONNECTを許すあて先ポート。443,80,8080-8099のようにカンマ区切り (範囲可)。 ここに無いポートは 403。.envで即時反映PROXY_ALLOW_LOCAL(既定off) ループバック (127.0.0.0/8,::1) とリンクローカル (169.254.0.0/16,fe80::/10) 宛てのオリジンを許すか。 既定では 403 にしてクラウドのメタデータ (169.254.169.254) 経由の SSRF を防ぐ。 ローカルのサービスへプロキシしたいときだけon。.envで即時反映PROXY_ENDPOINTS_READONLY(既定off)onにすると内部エンドポイントの書き換える口だけを405 Method Not Allowedで断ります (/purge?url=//purge?all=1/PURGE <url>//blocklist?...&action=block|allow|clear)。 読む口 (/status/healthz/history/daily/slo/snapshots/metrics/hosts/hosts/series/clients/readers/explain/errors/connections/recent/bursts/events/trace/dns/log/lookup/proxy.pac/dashboard/inspect/probe.htmlと、判定だけの/blocklist?host=) は今までどおりです。 認証ではありません (読める人は読めます)。公開ポートに出していて「誰でもキャッシュを消せる」のだけを止めたいときのつまみです。.envで即時反映PROXY_ALLOW_CLIENTS(既定 なし (全許可)) 受ける接続元のカンマ区切りリスト (1.2.3.4,10.0.0.0/8,2001:db8::/32。1 つの IP は/32/128と同じ)。 ここに無い相手は accept した直後に、要求を 1 バイトも読まずに閉じます (応答も返しません)。 内部エンドポイントも含めて閉じるので、公開ポートで/statusや/clientsの個票が見られることもありません。PROXY_MAX_CONNSの 「上限 + 4 本」の枠より前で判定します。 断った数は/statusのrejected_client_aclと/metricsのsorahost_rejected_client_acl_total。 v4-mapped IPv6 (::ffff:1.2.3.4) は IPv4 として照合するので、デュアルスタックで 待ち受けていても1.2.3.4の 1 行で書けます。 書式が違う項目は読み飛ばします (起動ログのallowed clients:に実際に読めた項目が出るので、書き損じはそこで分かります)。 宛先のPROXY_ALLOW_HOSTS/PROXY_ALLOW_LOCALとは無関係で、認証でもありません (同じアドレスから来られれば誰でも通ります)。.envで即時反映 (次に受ける接続から)PROXY_TRACE_CLIENT(既定 なし (追跡しない)) 1 つの接続元だけを追いかけて、その要求を/traceに残します (T14.27)。 値は IP を 1 つ (198.51.100.7/2001:db8::1。v4-mapped IPv6 は IPv4 として照合します)。 設定すると accept した直後に接続元がこの IP かどうかを 1 回だけ見て、一致した接続に旗を立てます。 旗の立った接続は、要求ごとに要求行 (メソッド + URL の先頭 256 バイト + HTTP の版)・応答の状態・所要 ms・バイト・段階の msを、CONNECT はトンネルの終わりに宛先と閉じた理由を、1,000 行の環状バッファに 1 行書きます (/trace?n=200&since=<epoch>、既定 200 行・最大 1,000)。 全体のログ水準をtraceに上げるのとは違い、費用が乗るのはその 1 人だけです (アクセスログ 1 行は 7.2 us/要求。既定 (空) では accept ごとの分岐 1 回、設定していても一致しない接続元は要求ごとに旗を読む分岐 1 回だけ)。 この口だけは URL のパスが入ります (他の個票は入れません)。 認証なしで誰でも読めるので、調べ終わったら空に戻してください。 リングはメモリだけで、個票のファイル ($HOME/.rust-http-proxy.recent) にも/snapshotにも入れません (パスが保存したファイルに残らないように)。--liteは接続の枠を作らないので追跡しません。.envで即時反映 (次に受ける接続から。いま開いている接続の旗は動きません)PROXY_PEEK_SNI(既定on) CONNECT の最初のバイト (TLS の ClientHello) から SNI を読んで個票 (/recentのsni) に残します (T14.38)。200 Connection Establishedを書いたあと最初の中継の前に 1 回だけrecv(MSG_PEEK)で 1,024 バイト覗くだけで、バイトは消費しません (そのあとのspliceは今までどおり)。 費用はトンネル 1 本にシステムコール 1 回で、要求ごとにも中継のバイトごとにも増えません。 覗くのは 443 宛ての CONNECT だけ (それ以外は TLS とは限らないため)。offで 1 度も覗きません。on:<port>はそのポートも 443 扱いにします (試験用。試験のオリジンを 443 に立てられないため)。--liteは接続の枠を作らないので覗きません。CONNECT の宛先のホストと SNI が食い違った本数は/statusのsni_mismatchesと/hostsのsni_mismatch(どちらもメモリだけ。IP リテラル宛ては必ず食い違います)。 再起動が要ります (.envでは反映しません)PROXY_BURST_PERCENT(既定50) 同時接続数がPROXY_MAX_CONNSのこの割合を越えた瞬間に/connectionsの写真を 1 枚撮って/burstsに残す (T14.6)。0で撮らない。同じ山では 1 枚だけで、閾の 80% を下回るまで次は撮りません。 撮るのは履歴スレッド (5 秒周期) なので、接続を受ける経路に増えるのは比較 1 回だけです。 割合を当てるのはPROXY_MAX_CONNSだけで、上限の外の枠 4 本 (自分宛て用) は含めません。PROXY_MAX_CONNS=0(無制限) と--liteでは撮りません。 履歴スレッドが撮るのでPROXY_STATS_PERSIST=offでも撮りません。.envで即時反映PROXY_BLOCKLIST_FILE(既定 なし) ドメインのブロックリスト (hosts 形式0.0.0.0 hostまたは 1 行 1 ドメイン)。 親ドメインの登録で子ドメインも落ちる。.envで即時反映、ファイルの更新は 1 分以内に反映PROXY_BLOCKLIST_URL(既定 なし) ブロックリストを取りに行く URL (StevenBlack の hosts など)。$HOME/.rust-http-proxy.blocklistに保存して再起動後も使う。 ファイルと両方あれば和集合PROXY_BLOCKLIST_REFRESH_SECS(既定86400) URL を取り直す間隔 (最小 60)。失敗したら 10 分後に再試行し、その間は前の一覧を使うPROXY_BLOCKLIST_EXEMPT(既定 なし) ブロックリストの対象外にするホストのカンマ区切り (*.example.com可)PROXY_PAC_DIRECT(既定 なし)/proxy.pacでプロキシを通さず DIRECT にするホストのカンマ区切り (*.example.com可)。.envで即時反映
PROXY_TLS(既定on) HTTPS のオリジンから取得するか (システムの OpenSSL を実行時に読み込む)。offで無効PROXY_TLS_VERIFY(既定on) オリジンの証明書を検証するか。offは自己署名の内部オリジン向け (推奨しない)PROXY_TLS_CA_FILE(既定 なし (システムの CA)) 追加で信頼する CA 証明書 (PEM)PROXY_TCP_KEEPALIVE(既定on(=on:60:10:3)) 消えたクライアントを見つける TCP keepalive です (T14.52)。 端末のスリープや回線の切断では FIN も RST も来ないので、CONNECT トンネルはPROXY_TUNNEL_IDLE_SECS(既定 300 秒) の期限切れまで残り、閉じた理由がidle_timeoutになって**「本当に暇」と「相手が消えた」が区別できません**。onにしておくと accept した直後にクライアント側のソケットへSO_KEEPALIVE/TCP_KEEPIDLE60 秒 /TCP_KEEPINTVL10 秒 /TCP_KEEPCNT3 を当てるので、消えた相手は 60 + 10 × 3 = 約 90 秒でETIMEDOUTになり、/recentのreasonがclient_deadになります (/historyのclosedの集計ではshutdownに畳みます)。on:<idle>:<intvl>:<cnt>で 3 つとも秒 / 回を指定できます (on:1:1:2なら約 3 秒。試験用)。 費用は接続あたりsetsockopt4 回で、要求ごと・中継のバイトごとには 1 つも増えません (offなら accept ごとの分岐 1 回だけ)。TCP_NODELAYなどと違って待ち受けから継承させていないのは、.envで変えたときに次の接続から効くようにするためです。--liteでも当てます。当てるのはクライアント側だけで、オリジンへ出ていく接続には当てません (そちらは要求が終われば閉じるか接続プールが捨てるため)。 半端な書き方 (on:1:2など) は既定に落とします。 Linux 以外では何もしません。効いている値は/configのPROXY_TCP_KEEPALIVE。.envで即時反映 (次に受ける接続から。いま開いている接続には当て直しません)
PROXY_RECORDS(既定on) 個票 (/recent/errors/connections/clients/log/events/trace/bursts/readers) に何を残すかの旗です (T14.41)。onは今までどおり、offはその 9 つに 1 件も書かず個票のファイルにも書きません ("persisted": false。ホスト別の統計/hostsと時系列/history/daily、/statusの数字は残ります — 個人に結びつくのは接続元の側だけなので)、hashedは接続元 IP を 16 桁の 16 進に置き換えて残します (起動ごとの乱数つき FNV-1a 64 ビット。同じ起動の中では同じ接続元が同じ値になり、再起動すると変わります。/clientsの鍵も同じ値)。 認証を入れない方針なので、公開ポートで個票を誰にも見せたくないときのつまみです。 判定は必ず生の IPで行うのでPROXY_ALLOW_CLIENTS/PROXY_MAX_CONNS_PER_CLIENT/PROXY_TRACE_CLIENTはoffでも効きます。 標準出力のアクセスログは止まりません (PROXY_LOG_LEVEL=warnで)。 費用は記録の入口ごとに分岐 1 回 (既定では変わりません)。.envで即時反映 (次の記録から。溜まった個票は書き換えません)PROXY_STATS_PERSIST(既定on) 統計と履歴を$HOME/.rust-http-proxy.rrd(固定 8 MiB) に、個票 (/recent/errors/bursts/events/log) を$HOME/.rust-http-proxy.recent(固定 4 MiB) に残し、再起動後に読み戻す。 1 日 1 行の要約$HOME/.rust-http-proxy.daily.jsonl(追記のみ、上限 2 MiB) もこの設定で書きます (/daily)。offで無効 (どちらの固定長ファイルも作らず、履歴の収集スレッドも起動しないので/historyとダッシュボードのグラフ、カーネルと cgroup の窓 (/statusのkernel)、ホスト別の時系列 (/hosts/series) は空になり、個票の"persisted"はfalse、日次の要約も 日次の snapshot も書きません)PROXY_SNAPSHOT_DAYS(既定30) 日次の snapshot を残す日数 (T14.34)。 履歴スレッドが UTC の日付をまたいだ瞬間にその時点の/snapshotをまるごと$HOME/.rust-http-proxy/snapshots/<YYYY-MM-DD>.json(名前は終わった日) に書き、31 個目を書いたら最古を 1 つ消します。 1 ファイルは/snapshotと同じ 4 MiB まで (30 日で最大 120 MiB、静かなプロキシなら 1 日 20 KB 前後)。0で書きません。読む口は/snapshotsと/snapshots/<date>。PROXY_STATS_PERSIST=offと--liteでは履歴スレッドごと無いので書きません。 ディスクの空きがPROXY_DISK_KEEP_FREE_MBのマージンを割り込むときは書かずに/eventsに 1 件 (state_file) 残します。 再起動で反映PROXY_SLO(既定connect_p50_ms=10,connect_p95_ms=100,error_rate=0.005,dns_miss_per_connect=0.2) SLO の 4 つの閾 (T14.50)。履歴スレッドが 5 秒の標本 1 本ごとにこの 4 つを判定し、4 つとも満たした標本の割合を/sloで返します (connect_p50_ms/connect_p95_ms= その 5 秒に確立した CONNECT の p50 / p95 (ms)、error_rate= エラー ÷ 試み (確立 + 転送 + エラー)、dns_miss_per_connect= 名前解決のミス ÷ 確立。満たす = 閾以下)。 確立もエラーも 1 本も無い 5 秒は「判定なし」で分母に入れません (誰も使っていない夜中を「達成」と数えると、達成率が「動いていた割合」に化けるため)。 「確立」は繋がった CONNECT の本数です (T20.4。0.18.0までは失敗した CONNECT も確立に数えていて、失敗 1 件が「確立」と「エラー」の両方に居ました)。試み = 確立 + 転送 + エラー は失敗 1・成功 1 で 2 になり、失敗の「失敗するまでの時間」はconnect_p50_ms/connect_p95_msに入りません。繋がらなかった CONNECT しか無い 5 秒 (確立 0 本・エラー 1 件以上) は、error_rateだけを外した 5 秒として数えます (速さとミスの 3 つは 0 として外しません。0.18.0まではerror_rateとconnect_p95_msの 2 つを外した 5 秒でした)。宛先が全滅した時間帯も達成率に出ます。 書いた閾だけが効き、書いていない閾・知らない綴り・数として読めない値・負の値は既定のままです (例:PROXY_SLO=connect_p50_ms=6だけ書けば p50 の閾だけ 6 ms になる)。 効いている値は/configのPROXY_SLOと/sloのthresholds。 判定するのは履歴スレッドなので要求の経路の費用は 0 で、PROXY_STATS_PERSIST=offと--liteでは 1 本も判定しません。 再起動で反映PROXY_PROFILE(既定 なし)liteで最速の素通しプロファイル (--liteと同じ)。 キャッシュ・統計の永続化・ブロックリストを止め、ログをwarnにするPROXY_PROFILE_SAMPLE_MS(既定1000)/profileのスレッドの標本を取る間隔 (ms)。profile-sampleスレッド 1 本が この間隔で/proc/self/task/*/statと/proc/self/task/*/syscallと/proc/self/task/*/schedstatを読み、役割ごと (accept/conn/idle-watch/dns-refresh/history/persist/cache-probe/profile-sample/other) に「CPU」と「いま走っているか・どのシステムコールで待っているか・休眠か」と「走れずに待った時間」を数え、CPU を多く使ったスレッド上位 8 本 (threads_top) を残します。0で標本を止める (段階の窓は 5 秒ごとに畳み続けます)。 下限 50 ms・上限 60,000 ms に丸めます。標本の費用は 1 スレッドにつき/procを 3 つ開くぶん (実測 約 84 us。schedstatを足す前は同じ測り方で 68 us) で、140 スレッド・1 秒間隔で 1 コアの 1.2% (60 秒で 700 ms)。 スレッド数に比例するので、多いときは間隔を延ばしてください (自分の CPU は/profileのprofile-sample役に出るので、そこで確かめられます)。/proc/self/task/*/syscallが読めない環境 (seccomp やhidepidのコンテナ) では状態がrunning/sleepingだけになり/profileのsamplerがpartialに、/procごと読めなければoffになります。schedstatだけが無いカーネル (CONFIG_SCHEDSTATS無し) ではrun_delay_usがnullになるだけで、ほかは変わりません。--liteでは/profileごと offPROXY_SELF_BENCH(既定off) 起動直後に loopback だけで 3 秒の自己ベンチを回して CPU/要求 と CPU/本 を測ります (T14.43)。 待ち受けを開いた直後に、このプロセスの中へ固定 1 KiB を返すオリジン (no-store) とすぐ閉じる sink を127.0.0.1の使い捨てポートに立て、自分の待ち受けへ forward 8 並列と CONNECT 8 並列を打ちます。 外へは 1 バイトも出しません。結果は/statusのself_benchと、起動ログ・/eventsの 1 行 (self_bench forward 43 us, connect 140 us …)。 本数に上限があり (forward 20,000 要求 / CONNECT 2,000 本)、秒数より先に当たればそこで終わります (上限が無いと CONNECT を 1.5 秒で 22,000 本張り、TIME_WAIT が 44,000 残ります)。 自分で打ったぶんはどの統計にも入れません (total_requests/bytes_forwarded//hosts//clients//recent//connections//history)。 測る 3 秒だけログ水準をwarnに下げ (既定のinfoのままだとアクセスログが数万行出て CPU/要求 に乗るため)、PROXY_ALLOW_LOCAL=off(既定) のままでもこの 2 つのポート宛てだけを 3 秒間通します。 用途は「上の『性能』の表 (この機械の big コア、41.4 us/要求) と置いた先のコンテナを同じ物差しで並べる」ことなので、普段はoffのままにして、再デプロイの直後に 1 回だけonにしてください。offでは起動時の分岐 1 つ以外何も走りません (--liteでも明示すれば回ります)。 再起動で反映PROXY_LOG_LEVEL(既定info) ログレベル (error/warn/info/debug/trace)
PROXY_CACHE_ENABLED(既定true)0/false/off/noでキャッシュを無効化PROXY_CACHE_DIR(既定 自動選択 (後述)) ディスクキャッシュ格納先PROXY_MEM_CACHE_MB(既定auto) メモリキャッシュ上限。auto(動的マージンだけ残して限界まで) か固定値 (MiB)PROXY_DISK_CACHE_MB(既定auto) ディスクキャッシュ上限。autoか固定値 (MiB)PROXY_MEM_TARGET_PERCENT(既定100)auto時に使用率をこの割合で頭打ちにする (任意のキャップ)。PROXY_MEM_CACHE_MB=auto:85の形でも指定可PROXY_DISK_TARGET_PERCENT(既定100) 同上 (ディスク)PROXY_MEM_KEEP_FREE_MB(既定0) 動的マージンに加えて手動で必ず空けておく量 (MiB)PROXY_DISK_KEEP_FREE_MB(既定0) 同上 (ディスク)PROXY_CACHE_RESERVE(既定staged) 先行確保 (バラスト) の仕方。staged(既定。使われるまで確保しない: 保存 0 件なら 0、以後は実使用量の 2 倍まで) /eager(予算の未使用分を最初から全部) /off(0/false/noも同じ。上限管理のみ)PROXY_CACHE_PROBE_SECS(既定1) 使用量を測り直して予算を更新する間隔 (秒)。0で起動時の 1 回だけPROXY_CACHE_TTL_SECS(既定300)Cache-ControlもLast-Modifiedも無い場合の TTL(秒)。 経験則 TTL の下限でもあるPROXY_CACHE_HEURISTIC_PERCENT(既定10)Last-Modifiedからの経過時間のこの割合を TTL にする (RFC 9111 4.2.2)。0で無効PROXY_CACHE_HEURISTIC_MAX_SECS(既定604800) 経験則 TTL の上限 (既定 7 日)PROXY_CACHE_MAX_STALE_SECS(既定2592000) 期限切れでも再検証できるエントリを保持しておく最長時間 (既定 30 日)PROXY_CACHE_GRACE_SECS(既定60) 期限切れ後この秒数以内なら、保存済みの表現をすぐ返して裏で再検証する (stale-while-revalidate)。0で無効PROXY_STALE_WAIT_SECS(既定5) 期限切れの表現があるとき、オリジンの接続と最初の応答を待つ上限 (秒)。 超えたら stale を返すPROXY_CACHE_MAX_OBJECT_MB(既定4096) ディスク層に置く 1 オブジェクトの最大サイズ(MiB)PROXY_MEM_CACHE_MAX_OBJECT_MB(既定32) メモリ層に置く 1 オブジェクトの最大サイズ(MiB)。これを超えるものはディスクからストリーミング配信PROXY_DISK_MAX_ENTRIES(既定2000000) ディスク層の索引に保持するエントリ数の上限 (1 件あたり RAM 約 100 バイト)。 超えた分は LRU で追い出すPROXY_CACHE_ADMISSION(既定on) 入場制御。最後の層 (ディスク、無ければメモリ) が 90% 埋まったら、2 回目に要求された URL だけ保存する (一度きりの URL で追い出しを起こさない)。 見たキーは 512 KiB のブルームフィルタで覚えるPROXY_NEGATIVE_TTL_SECS(既定60) 404 / 410 などの否定応答にmax-age/Expiresが無いときの TTL 上限 (明示があればそちらを使う)PROXY_DISK_QUOTA_MB(別名SERVER_DISK) (既定 なし) コンテナのディスク割当。Pterodactyl はこれを渡してくれないので、egg 変数として設定する。 MB 数 = パネルの Disk Space、0= 無制限、auto=df -B1 /home/containerの total を割当とみなす (下記)。 Pterodactyl で未設定ならディスクキャッシュは 512 MiB 固定・先行確保なしPROXY_DISK_QUOTA_ROOT(既定$HOME) ディスク割当が適用されるディレクトリ (Pterodactyl では/home/container)PROXY_DISK_PROBE(既定on) 割当が分からないとき Wings の挙動から割当を探るか (後述)。offなら 512 MiB 固定SERVER_MEMORY(既定 なし) コンテナのメモリ割当 (MB)。Pterodactyl が自動設定し、メモリキャッシュの上限として尊重される
すべてのログはレベルによらず 標準出力 (stdout) へ出力されます。既定の info レベルで
1 リクエストにつき 1 行のアクセスログが出ます。
2026-09-02T02:48:22.900Z INFO [main] disk cache ready at /home/container/.cache/rust-http-proxy (12034 entries restored, 210 expired removed, 0 migrated, 0 stray files removed)
2026-09-02T02:48:22.901Z INFO [main] memory cache budget: 0 MiB -> 3482 MiB (container memory 12.1% used)
2026-09-02T02:48:22.901Z INFO [main] disk cache budget: 0 MiB -> 97800 MiB (disk quota 2.0% used)
2026-09-02T02:48:24.310Z INFO [main] reserved +3456 MiB memory / +97792 MiB disk (ballast now 3456 MiB / 97792 MiB)
2026-09-02T02:48:23.044Z INFO [conn#1] ACCESS 127.0.0.1 "GET http://example.com/ HTTP/1.1" 200 204B 22.4ms cache=MISS stored ttl=300s
2026-09-02T02:48:23.087Z INFO [conn#2] ACCESS 127.0.0.1 "GET http://example.com/ HTTP/1.1" 200 260B 0.4ms cache=HIT(memory) age=0s ttl_left=300s
2026-09-02T02:53:40.512Z INFO [conn#3] ACCESS 127.0.0.1 "GET http://example.com/ HTTP/1.1" 200 260B 18.9ms cache=REVALIDATED(memory) age=317s ttl_left=300s
2026-09-02T02:53:41.002Z INFO [conn#4] ACCESS 127.0.0.1 "GET http://example.com/ HTTP/1.1" 304 171B 0.2ms cache=HIT(memory,304) age=318s
2026-09-02T02:48:24.143Z INFO [conn#5] ACCESS 127.0.0.1 "CONNECT example.com:443 HTTP/1.1" 200 7070B 1010.8ms cache=BYPASS(tunnel)
2026-09-02T03:10:01.502Z INFO [main] memory pressure detected (PSI some=24.3% full=1.0%): releasing reservations
2026-09-02T03:10:01.502Z INFO [main] memory cache budget: 3482 MiB -> 2790 MiB (container memory 89.7% used)
| レベル | 主な内容 |
|---|---|
error |
起動失敗、致命的な接続エラー |
warn |
403 (ACL)、502 (オリジン接続失敗)、キャッシュ I/O 失敗、資源が計測できない環境、設定の警告 |
info |
起動時の設定サマリ、予算の大きな変化、まとまった先行確保、圧迫 / ENOSPC の検知、アクセスログ |
debug |
接続の受付・切断、キャッシュ HIT/MISS/STORE/EVICT/REFRESH の詳細、予算の小さな変化 |
trace |
リクエスト / 転送 / レスポンスの全ヘッダー、トンネル転送量、L2 書き込み |
warn 以上の行は直近 1,000 行だけプロセスのメモリにも残り、/log?n=200 で読めます (1 行 256 B まで、新しい順)。コンソールが流れて消える環境 (Pterodactyl) で「さっき何を警告したか」を後から見るための口です。info のアクセスログは写しません (1 行 7.2 us/要求 の熱い経路を重くしないため)。
アクセスログの cache= の値: HIT(層) 新鮮なヒット / HIT(層,304) クライアントの条件付き要求に 304 で応答 /
REVALIDATED(層) オリジンに再検証して 304 を受け延命 / REFRESHING(層) 期限切れ直後の表現を返し裏で再検証 /
COALESCED(層) 同時に進行中だった取得の完了を待ってキャッシュから配信 /
STALE(層) オリジン障害・待ち切れ時に期限切れを配信 /
MISS stored 取得して保存 / MISS 取得したが保存対象外 / BYPASS キャッシュ対象外の要求。
GET リクエストのみを対象に、レスポンスをワイヤ形式そのままで 2 段キャッシュへ格納します。
- 保存するのは解読済みの本文 (chunked を外したもの) と、枠組み・接続管理のヘッダーを除いた先頭部分。配信時に
Content-Length/Connectionを付け直す。形式はSHPC2で、旧形式のエントリは起動時に捨てる - L1 (メモリ) → L2 (ディスク) の順に探索し、
PROXY_MEM_CACHE_MAX_OBJECT_MB以下の L2 ヒットは L1 へ昇格。 それより大きいものはディスクからそのままストリーミング配信 - どちらも LRU で上限を超えた分から追い出し (参照・追い出しともに O(log n))。書き込み中の一時ファイルの分も 容量計算に含めるので、同時ダウンロードやバラストの再充填で上限を超えることはない
- ディスク上のエントリはペイロード長をヘッダーに記録し、読むときにファイルサイズと照合して途中で切れたものを弾く
- ディスクキャッシュは 256 分割ディレクトリに 1 エントリ 1 ファイルで置き、ファイルの mtime に有効期限を 記録するので、起動時の走査はファイルを開かずに済む。書き込みは一時ファイルへのストリーミング
- キャッシュキーは メソッド + URL + 正規化した
Accept-Encoding。VaryにAccept-Encoding以外があれば保存しない Range付きの要求は、キャッシュ済みの完全な表現があれば206で切り出し、無ければそのまま転送して保存しない。HEADはキャッシュがあればヘッダーだけ返し、無ければ転送 (保存はしない)- 次の場合は保存しない: GET 以外 /
Authorization付き /Range付き / クライアントのno-store/ レスポンスのno-store・private/Set-Cookie/ 非対応のVary/ 非キャッシュ対象ステータス / 上限超過 - クライアントの
no-cache/max-age=0は「バイパス」ではなく「オリジンで再検証」として扱う
HTTPS の中身をキャッシュするには TLS を終端する必要があり、CONNECT トンネル (クライアントが https:// を普通にプロキシ
経由で開く形) では暗号化されたまま素通しになります。代わりに、クライアント側で URL を次の形にしてプロキシへ平文 HTTP
で頼めば、プロキシが HTTPS で取得して保存・配信します。
# プロキシをオリジンとして叩く形 (スクリプトやダウンロードツール向け)
curl http://127.0.0.1:8080/https/example.com/file.zip -o file.zip要求行に GET https://example.com/file.zip HTTP/1.1 と絶対 URL を書いて平文で送るクライアント (自作スクリプト等) も
同じように扱います。普通のプロキシ設定で https:// を開くクライアントは CONNECT を使うので対象外です。
- TLS はシステムの OpenSSL (
libssl.so.3/libssl.so.1.1) を実行時に読み込んで使います。クレートもビルド時の依存もなく、 ライブラリが無い環境では HTTPS 取得だけが無効になります (起動ログに出ます) - 証明書は既定で検証します (システムの CA ストア、
SSL_CERT_FILE/SSL_CERT_DIR、またはPROXY_TLS_CA_FILE) - 応答の
Location/Content-Locationが絶対 URL なら/https/host/path形式に書き換えるので、リダイレクトを追っても プロキシから外れません - キャッシュキーには
https://host:443/pathの形で保存されるので、/https/...形式と絶対 URL 形式は同じエントリに当たります
TTL は s-maxage → max-age → Expires → Last-Modified からの経験則 (経過時間の 10%、下限 PROXY_CACHE_TTL_SECS、
上限 7 日) → 既定 TTL の順で決めます。
- ETag か Last-Modified を持つレスポンスは、期限切れでも
PROXY_CACHE_MAX_STALE_SECS(既定 30 日) の間は残します。 次の要求ではIf-None-Match/If-Modified-Sinceを付けてオリジンに問い合わせ、304 なら本文を転送せずに 保存済みの表現を延命して配信します (cache=REVALIDATED)。no-cacheやmax-age=0のレスポンスも バリデータがあれば「毎回再検証」として保存します - 期限切れから
PROXY_CACHE_GRACE_SECS(既定 60 秒) 以内なら、保存済みの表現をすぐ返して裏で再検証します (cache=REFRESHING、RFC 5861 の stale-while-revalidate)。オリジンがstale-while-revalidate=Nを付けていれば その値も使います。max-age=0(毎回再検証) の表現は、オリジンが明示したときだけ対象です。同じ URL の裏側の 再検証は同時に 1 本、全体で 32 本まで。裏側の再検証は接続スレッドと同じ置き場で走ります (PROXY_MAX_THREADSの内側)。空いているスレッドが無ければ待たせずに捨て、その要求はそのまま 同期の再検証に回ります (捨てても正しさは崩れません。その項目は次の要求で取り直されます)。 捨てた回数は/statusのrevalidations_droppedと/metricsのcache_revalidations_dropped_totalに出ます - 期限切れの表現があるのにオリジンが遅いときは、接続と最初の応答を
PROXY_STALE_WAIT_SECS(既定 5 秒) までしか 待たず、超えたら期限切れの表現を配信します (cache=STALE) - オリジンに繋がらない・5xx を返す場合は、
must-revalidateでない限り期限切れの表現を配信します (cache=STALE) - クライアントが
If-None-Match/If-Modified-Sinceを付けてきて保存済みの表現と一致すれば、キャッシュから 304 を返します no-cache/s-maxage/must-revalidate付きの表現と、クライアントがno-cacheを付けた要求では stale を配信しません- 上流のキャッシュを経てきた応答は
AgeとDateから経過時間を差し引いて保存し、配信時のAgeはプロキシが付け直します - POST / PUT / DELETE などへの成功応答 (2xx/3xx) を受けたら、その URL (と同じサーバーへの
Location/Content-Location) のキャッシュを無効化します (RFC 9111 §4.4)。本文付きの GET とRange要求の応答は保存しません
auto では毎秒 (PROXY_CACHE_PROBE_SECS) 使用量を測り直し、各層の上限 (予算) を次の式で更新します。
予算 = 自分が保持しているバイト数 (エントリ + バラスト) + (全体 − 安全マージン − 現在の使用量)
「現在の使用量」には自分の分も含まれるので、他プロセスが資源を使えばその分だけ予算が縮み、 バラスト → LRU 追い出しの順に手放します。逆に空けばまた育ちます。安全マージンは固定値ではなく、 次の最大値として毎秒決め直します。
- 変動幅: 他プロセスの使用量が直近 60 秒の窓で 1 秒間にどれだけ動いたかの最大値 × 2 (次の測定までに他者が伸びても吸収できる量)
- 床: メモリは
vm.min_free_kbytes× 4 と全体の 1% (最低 64 MiB、ただし全体の 1/10 まで) の大きい方、ディスクは全体の 1% (最低 256 MiB、同上) - 活性ページキャッシュ: ホストの
Active(file)(他者が実際に使っているキャッシュ) は奪わない - バックオフ: PSI (
/proc/pressure/memoryまたは cgroup のmemory.pressure) でsome avg10 >= 20%かfull avg10 >= 5%、 ディスクは自分の書き込みが ENOSPC になったら、全体の 5% から始めて倍々に増やす。平穏が 30 秒続くごとに 3/4 に減衰。 圧迫を検知した後 60 秒はバラストを再確保しない - 手動の最低値:
PROXY_*_KEEP_FREE_MB
上限を割合で抑えたいときは PROXY_*_TARGET_PERCENT (既定 100 = 抑えない) を下げます。
計測の分母は次のとおりです。
- メモリ:
/proc/meminfoのMemTotal/MemAvailableに加え、所属する cgroup (v1/v2) の制限とSERVER_MEMORY(Pterodactyl の割当) をそれぞれ同じ式で計算し、最も厳しい値を採用。 cgroup の使用量は Docker / Wings と同じ「usage − inactive_file」で見るので、パネルの表示と一致します - ディスク:
statvfsでdfと同じ流儀の使用率を見る。PROXY_DISK_QUOTA_MBがあれば代わりに 「割当 − 割当ディレクトリ内の自分以外のファイル」を分母にします (60 秒ごとに再計測) - 計測できない環境 (Linux 以外など) では固定値 (メモリ 200 MiB / ディスク 2048 MiB) にフォールバックして警告します
**既定 (staged) は「使われるまで確保しない」**です。保存が 1 件も無い間はバラストを 0 に保ち、
最初の保存以降は「エントリ + バラスト ≤ 実使用量 × 2」の範囲でだけ (もちろん予算の範囲でも) 先に押さえます。
PROXY_CACHE_RESERVE=eager にすると従来どおり、起動直後から予算の未使用分を全部確保します。
eager を既定から外したのは、256 MiB のコンテナで測ったら何も買っていなかったからです
(2026-09-10。scripts/cgroup-run.sh で再現できます)。
- バラスト無し (
off) でもメモリ層はlimit_bytes(197.6 MiB) まで埋まり、oom_killは 0。 先に押さえなくても予算は取れる (64 KiB × 4,160 URL を保存させた実測) - 逆に
eagerは 192 MiB を先に押さえるので、256 MiB のコンテナに残る空きが 43 MiB しかありません。 そこへコンテナの中の別プロセスが 80 MiB 取ろうとすると、1 秒周期のプローブがバラストを返す前に カーネルの OOM killer がプロキシを殺します (同じ条件を 4 回試して 2 回。off/stagedなら 同じ 80 MiB でも 142 MiB でも平気で、cgroup のピークは 86〜147 MiB に収まりました) - 段階化すると、要求 0 件のコンテナの RSS は 215.9 MB → 23.1 MB、
disk.reserved_bytesは 2.9 GB → 0 になります (どちらも 256 MiB の cgroup で 60 秒後の実測)
確保するときの動きは staged も eager も同じです。
- メモリ: 64 MiB 単位の領域を 0 以外で埋めて全ページをコミット。エントリの追加時にその分だけ解放
- ディスク:
ballast.reserveファイルをfallocateで伸ばす。エントリの書き込み前に必要分だけ縮める - 予算が縮んだときはまずバラストを返し、それでも足りないときだけエントリを追い出す
- Pterodactyl で割当を探っている最中 (
PROXY_DISK_PROBE) だけは、探索そのものがfallocateで上限を確かめる仕組みなので段階化しません - tmpfs / ramfs 上のディレクトリでは「ディスク」の先行確保が RAM を食うだけなので無効化して警告
- SIGTERM / SIGINT を受けたら
ballast.reserveを切り詰めてから終了します (Pterodactyl の停止中にディスク使用量として 残らない)。強制終了で残っても、次回起動時に必ず空にしてから予算に合わせて作り直します
- メモリは cgroup と
SERVER_MEMORYの両方で上限が決まるので追加設定は不要です。コンテナ内の/proc/meminfoは ホスト全体を示しますが、実際に効くのは cgroup 側の予算です - ディスク割当は Pterodactyl がコンテナに渡してくれません。 Wings は
/home/containerの合計サイズを監視していて、 割当を超えると 即座にプロセスを停止し (Server is exceeding the assigned disk space limit, stopping process now)、 減らすまで起動もできません。egg 変数PROXY_DISK_QUOTA_MB(またはSERVER_DISK) を用意し、サーバーの Disk Space (MB) と同じ値にしてください。無制限なら0。未設定のときはディスクキャッシュを 512 MiB 固定・ 先行確保なしに抑えます (起動時に警告します)。egg の Configuration Files 機能で{{server.build.disk_space}}を書き出せる環境なら、それを起動スクリプトで環境変数に渡す手もあります - 未設定でも自動判断します:
df -B1 /home/container相当 (statvfs) が/と別のファイルシステムで、かつ/より 小さければ、それを割当とみなして使います (ボリュームが別ディスクにあるだけのホストで、そのディスク丸ごとを割当と 誤認しないための条件)。条件に合わなければ、割当を探ります:- まず 512 MiB ずつ素早くバラスト (fallocate) を伸ばします (実データの上限は 512 MiB のまま)。fallocate が失敗する、 またはファイルシステムの空きの都合で伸びなくなったら、そこを割当の候補にします。候補のまま 10 分止められなければ 確定し、実データもそこまで使います。ファイルシステム側で割当が効いているホストなら数分で終わります
- Wings がディレクトリの合計サイズで止めるタイプのホストでは、素早く伸ばしている間に止められます。停止シグナルで バラストは切り詰められるので使用量は 512 MiB 以下に戻り、そのまま再起動できます。再起動時に「起動 10 分以内に 途切れた」と分かるので、以後は緩やかな探索に切り替えます: 10 分止められないごとに 512 MiB ずつ上げ、増えた分は バラストだけで埋め (実データは確認済みの上限まで)、上げた直後に止められたら確認済みの値を割当として記憶します (7 日は探りません)。例えば割当 3 GiB なら約 1 時間で 2.5〜3 GiB に落ち着きます
- つまり最悪 2 回 Wings に止められて再起動が必要になりますが、以降は無設定で割当いっぱいまで使います。
状態は
/home/container/.rust-http-proxy.stateに残ります。PROXY_DISK_PROBE=offで探索を止められます (その場合は 512 MiB 固定)。割当が分かっているなら.envにSERVER_DISKを書く方が早いです
SERVER_DISK=autoを明示すると、df -B1 /home/container相当 (statvfs) の total を割当として使います。 これが正しいのは、ホストが XFS のプロジェクトクォータや ZFS データセットなどでサーバーごとに領域を切っていて、dfの total がパネルの Disk Space と一致する場合だけです。単なる bind mount ではホストのディスク全体が 見えるので、起動時にdf /と比べて同じファイルシステムなら「不明」扱い (512 MiB 上限) に落として警告します。 Pterodactyl では判断しやすいよう、起動ログにdf -B1 /home/container: total ... used ...を常に出します- 超過で止められてしまったら、ファイルマネージャか SFTP で
/home/container/.cache/rust-http-proxy/(特にballast.reserve) を削除すれば起動できます - 既定のキャッシュ先は
/home/container/.cache/rust-http-proxy(ボリューム内なので再起動後も残る)
外部クレートは 1 つも使っていません (すべて std のみ)。crates/ にあるのは全部このリポジトリのコードで、
責務ごとの層に分けてあります (41 + 本体)。分けている理由は 2 つで、責務を 1 つに保つことと、rustc がクレート単位で
全部を一度に抱えるためビルドのメモリがそのまま行数に比例すること (動作環境の SERVER_MEMORY は 256 MiB)。
クレートの版の決まり (2026-10-15、T21.6。T21.1 の決まりを置き換えた): 各クレートの version はそのクレートの中身を最後に変えたタスクの番号 0.<Phase>.<番号> です
(例: T21.3 → 0.21.3、T17.11 → 0.17.11。英字の付くタスク (T17.0a) は英字を落とす)。タスクの中で、取り込む前に scripts/crate-versions.py --task T21.3 で上げます (main との分かれ目から中身が変わったクレートだけ)。
本体 (rust-http-proxy) と proxy-server は全クレートの版と本体 (src/) を最後に変えたタスクの番号のうち最大 (= そのビルドに入っている最後のタスク。-V の版は proxy-server の build.rs が作る) で、タグは本体の版です (v0.21.3 ↔ 0.21.3)。
「中身が変わった」は crates/<名前>/ の差分から Cargo.toml の version の 1 行を除いたもので、--check はコミットの文面を読まず、版の行を書いたコミットより後に中身が変わっていたら上げ忘れとして落とします (下の「運用」の 0)。
| クレート | 責務 |
|---|---|
proxy-sys |
Linux のシステムコールを直接叩く薄い層 (poll/epoll/splice/pipe2/recv) とシグナル |
proxy-base |
ロック、壁時計、JSON の組み立て、.env の読み取り、ログ、HTTP 日付、host:port の分解と組み立て、コマンドライン引数、ASCII だけを見る文字列の分割、起動ごとの Via の印 |
proxy-rrd |
固定長のリングバッファ (状態ファイルと個票のファイルに共通の保存形式) |
proxy-sysinfo |
機械の観測 (メモリ、ディスク、cgroup の上限、inotify) |
proxy-workers |
接続スレッドの使い回し |
proxy-tls |
システムの OpenSSL を dlopen で使う TLS クライアント |
proxy-msg |
HTTP メッセージの表現 (ヘッダー、本文の枠、読み取りバッファ、応答の先頭) |
proxy-net-dns |
名前解決 (getaddrinfo の答えのキャッシュ、族の記憶、よく使う名前の先読み) |
proxy-net-conn |
接続 (Happy Eyeballs で A / AAAA を並行に試す) と待ち受けソケットの用意 |
proxy-net |
アドレスの判定 (ACL とローカル宛ての拒否)、上の 2 つをまとめた facade |
proxy-origin |
オリジンへの接続とその使い回し、要求 URL の解釈 |
proxy-cachekey |
キャッシュの保存形式と鍵 |
proxy-cachecfg |
キャッシュの設定 |
proxy-diskprobe |
ディスクの実測 (実際に書いてみて、どれだけ入るかを確かめる) |
proxy-capacity |
使ってよい量の見積もり (空きメモリ・cgroup の上限・コンテナの quota) |
proxy-cachemem |
キャッシュのメモリ側 (LRU、エントリ、合流、受け入れ判定、保存されない鍵の記憶) |
proxy-cachedisk |
キャッシュのディスク側 (ファイル形式、走査、書き出し) |
proxy-cache |
キャッシュ本体 (メモリ側とディスク側を束ねる) |
proxy-config |
起動時の設定 |
proxy-metrics-types |
計測の型と定数 (ホスト別統計・1 要求の内訳・エラーの原因)、分位点、ホスト別の時系列、カーネルと cgroup の統計 |
proxy-metrics-recent |
記録の個票 (閉じた接続・1 つの接続元の要求の並び・出来事の時系列) |
proxy-metrics-profile |
時系列の窓の土台 (解像度と 1 区間の応答時間)、段階ごとの待ちとスレッドの標本 |
proxy-metrics-window |
転送の速さ、接続元の個票、履歴のリング。proxy-metrics-profile の 2 つも今までの名前で出し直す |
proxy-metrics-core |
計測の本体 (Metrics。/status の組み立て) |
proxy-metrics-slo |
窓を読んで要約するもの (SLO・日次の要約・日次の雪像) |
proxy-metrics-watch |
窓を読んで判定するもの (異常の検知・利用者が居ない時間帯の様子見 (canary))。proxy-metrics-slo の 3 つも今までの名前で出し直す |
proxy-metrics |
状態ファイルへの読み書きと、5 秒ごとの記録スレッド。上の 7 つを今までの名前で出し直す口 |
proxy-blocklist |
ドメインのブロックリスト |
proxy-reload |
$HOME/.env の再読込 (inotify で見張る) |
proxy-prom |
Prometheus 形式の出力 |
proxy-freshness |
RFC 9111 の鮮度判定 |
proxy-http |
中継の本体 |
proxy-tunnel |
CONNECT トンネル |
proxy-endpoints-core |
エンドポイントの共通の土台 (要求 1 本ぶんの文脈、問い合わせ ?a=1&b=2 の読み方) |
proxy-endpoints-explain |
1 相手の説明 (/explain?host= ?client=) |
proxy-web |
ブラウザで開くページの HTML (/dashboard /inspect /probe.html) の実体。const 3 つだけの葉 |
proxy-endpoints |
プロキシ自身のエンドポイント (/dashboard /status /metrics …) |
proxy-selfbench |
起動直後の自己ベンチ (PROXY_SELF_BENCH=on)。内蔵の小さなオリジンと打ち手、CPU の測り方。依存は proxy-base だけ |
proxy-bench |
計測用の道具 (既定のビルド対象から外してあります。cargo build --release -p proxy-bench) |
proxy-server |
接続の受け付け、keep-alive、アイドル接続の預かり。下の層を今までの名前で出し直す口でもある |
proxy-run |
起動の全部 (設定の読み取り、待ち受け、スレッドの立ち上げ、起動ログ)。main の中身 |
rust-http-proxy |
facade (proxy-server の再輸出) と実行ファイル (main は proxy-run を呼ぶだけ) |
メモリの小さい環境向けの設定:
.cargo/config.tomlでjobs = 1にしてあります。 このリポジトリは 約 90 MB のメモリでリリースビルドが通ります (2026-09-26、手元の aarch64・rustc 1.98.1 で実測。 90 MB は測った 4 回とも通り、85 MB 以下は 2 回とも落ちます。 CI が毎回確かめているのは 120 MB の関門を通るかどうかだけで、CI で通る最小は測っていません)。 LTO を既定で切っているのと、全クレートをcodegen-units = 4にしてあるのもこのためです (下の「プロファイルの設定」)。rustcはクレート単位で全部を一度に抱えるため、いちばん大きいクレート (proxy-endpoints) の 1 プロセスで RssAnon 82.5 MB 使い (通る最小はここに 7〜20 MB 足した値になります。/usr/bin/time -vの最大 RSS は 246 MB と出ますが、そのうち 110〜122 MB はlibrustc_driverのファイル由来のページで、ページキャッシュに 載っていれば cgroup には課金されません)、既定の並列数だと その合計がコンテナのメモリ上限を超えて OOM killer に落とされます (実測: 180 MB の cgroup で、 並列だと落ち-j 1なら通る)。潤沢な機械で急ぐときはcargo build --release -j 8で上書きできます (8 コアで 32.3 秒 → 14.9 秒)。手元で確かめるなら
cargo clean && scripts/build-memory.sh 120(通る最小を探すならscripts/build-memory.sh --find 80 85 90 95 100 110 120)。このスクリプトは 実際にその上限の cgroup の中でビルドします — RSS を測るだけだと、メモリ圧のかかっていない機械ほど大きく出て 機械をまたいだ判定にならないためです。cgroup は systemd に作らせます (システムのsystemd-run --scope、 無ければユーザーのsystemd-run --user --scope。どちらも無い環境では参考の RSS だけ出して判定しません)。
# テスト実行
cargo test
# 通常ビルド
cargo build
# 最適化リリースビルド
cargo build --release
# 起動 (bin が 2 つあるが default-run でプロキシ本体が選ばれる。ベンチはビルドされない)
cargo run --release
# ベンチ (オリジンもベンチ内で起動する。プロキシは別端末で PROXY_ALLOW_LOCAL=on を付けて先に上げておく)
cargo run --release --bin bench -- --proxy 127.0.0.1:18080 --conc 8 --seconds 5
# --conc 並列数 / --seconds 測定秒数 / --body-bytes 応答本文の大きさ
# --only direct|forward|tunnel|connect|connect-multi|idle-tunnels|idle-conns|syscall-cost|
# replay|all で 1 種だけ測れる
# direct 行はプロキシを通さないオリジン直結 (ベンチ自身の上限。固定しなければ 26〜30 万 req/s、
# LITTLE に固定すると 5.5 万 req/s)
# tunnel 行も --seconds 秒だけ 1 本のトンネルに流す (この行はベンチ律速。上の「性能」の注)
# idle-tunnels / idle-conns は --conc 本を張ったまま --seconds 秒握る (スレッド数と RSS 用)。
# idle-conns は 1 要求ずつ通してから握る。どちらも PROXY_MAX_CONNS=8192 を付けて測る
# connect-multi と replay は scripts/deployed-like.sh の中で回す (上の「デプロイ先に似せた条件」)。
# replay は /recent の個票を同じ間隔・同じ本数で張り直す (--replay-file / --speed / --rtt-file)
# この機械での sendto / recvfrom 1 回の実費 (プロキシは使わない。CPU の固定が要る)
taskset -c 4-7 cargo run --release --bin bench -- --only syscall-cost --seconds 3push と Pull Request で .github/workflows/ci.yml が回ります。check は cargo fmt --check →
clippy -D warnings → 文書とコードの整合 (scripts/check-docs.sh) → scripts/ の単体テスト →
shellcheck scripts/*.sh scripts/mx (切った指摘とその理由は scripts/.shellcheckrc) → cargo test --workspace →
リリースビルド → 短いベンチ、の順です。120 MB の cgroup でビルドが通るか (scripts/build-memory.sh 120) は
別のジョブ build-memory で並べて回します。それと並べてもう 1 つ、deployed-like-snapshot が
デプロイ先に似せた条件 (上の scripts/deployed-like.sh) を runner の中に作り、scripts/ci-snapshot.sh で
--only connect-multi と forward を 10 秒ずつ回して /snapshot を成果物 (artifact) の snapshot.json
に残します。見張るのは形の退行だけで、数字の絶対値は比べません (runner は世代も負荷も毎回違うため):
connect-multi の p50 が 50 ms 以上なら CI が落ちます (= Happy Eyeballs の 250 ms がまた毎回乗っている)、
/snapshot が 1 要求で取れて JSON として読めること、その中に /status の ipv6.v4_first と /profile の段階が
入っていて全部 0 ではないこと。runner でユーザー名前空間 (unshare -rmnC) が作れないときは
IPv6 の黒穴だけ諦めて残りを回します (ipv6_blackhole: false と印字し、CONNECT は IP リテラル宛て)。
落ちたときこそ中身が要るので、snapshot.json は成功しても失敗しても成果物に付きます (14 日保存)。
手元で同じものを回すなら cargo build --release && cargo build --release -p proxy-bench のあとに
scripts/ci-snapshot.sh (手元で 26 秒。閾は CI_SNAPSHOT_P50_MAX_MS、秒数は --seconds で変えられます)。
文書とコードが同じ集合かを見るのは scripts/check-docs.sh (T14.56)。エンドポイントも環境変数も
別々の作業で増えていくので、「コードにあるのに文書に無い / 文書にあるのにコードに無い」を機械で見ます。
突き合わせるのは 5 つで、(a) crates/endpoints/src/endpoints/mod.rs の path == "/…" と
上の「動作確認 (curl)」の一覧と / の案内 (endpoint_list)、(b) コードの "PROXY_…" / "SERVER_…" の
文字列と上の「環境変数」の表の鍵の欄、(c) /snapshot の parts と個票のエンドポイント、
(d) scripts/check-dashboard.js が画面の HTML から切り出す関数名と、そこで実際に呼んでいる名前、
(e) 上の「クレート構成」の表と crates/*/Cargo.toml の [package] name (表の前の「(41 + 本体)」の数も見ます)。
意図的に外してあるものはスクリプトの中の除外表に理由つきで持ちます (/snapshot に入れない 18 の口、
ビルド時にしか無い PROXY_VERSION など)。差分が 1 件でもあればその名前を印字して終了コード 1 です。
bash と grep / sed / awk / python3 の標準ライブラリだけで動くので、cargo も Node も要りません
(scripts/check-docs.sh を引数なしで回すだけ。CI の check が毎回回します)。
「使わない機能にはコストを払わない」方針なので、無効にした機能のスレッドは起動しません。
| 設定 | スレッド | 内訳 |
|---|---|---|
| 既定 (キャッシュ・統計あり) | 7 | 待ち受け + env-reload + cache-probe + persist + history + shutdown + idle-watch |
PROXY_CACHE_ENABLED=off PROXY_STATS_PERSIST=off (= --lite) |
4 | 待ち受け + env-reload + shutdown + idle-watch |
上記 + PROXY_PARK_IDLE=off |
3 | idle-watch が減る |
ブロックリストの取得スレッドは PROXY_BLOCKLIST_FILE / PROXY_BLOCKLIST_URL が設定されたときだけ動きます
($HOME/.env の再読込で後から設定された場合もその時点で起動します)。
接続 1 本ごとのスレッドはこれとは別です (CONNECT トンネルは Linux では中継中 1 本あたり 1 スレッド、 暇なあいだは 0 本)。
接続スレッドは使い回します: 仕事を終えたスレッドは空き置き場に戻り、30 秒使われなければ自分で 終わります (空きは最大 64 本まで)。生成と破棄のシステムコール (実測で 1 接続あたり約 16 回) を 接続ごとに払わない形です。
同時に生きているスレッドには上限があります (PROXY_MAX_THREADS、既定 auto)。
「空いている数」(最大 64 本) と「生きている数」は別のもので、後者がこの上限です。
上限に達したら新しいスレッドを起こさず、その仕事を待たせます (捨てません。空いたスレッドが
順に引き取ります)。上限が無かったころは、預けた 5,000 本のトンネルが一斉に切れると 1 本ずつ
ワーカーへ渡すので一時的に 4,400〜4,700 スレッドまで増えていました (閉じるのに shutdown・
アクセスログ・統計が要るので、監視スレッドの中では落とせません)。上限 256 なら同じ場面で
260 スレッド・ピーク RSS 65 → 27 MB で、閉じきるまでの時間は変わりません (0.66 秒)。
上限は .env の再読込で変えられます。当て直すのは接続を受けたときなので、書き換えてから
次の接続 1 本で効きます。上げた場合は待たせていた仕事をその場で起こし、下げた場合は
走っているスレッドを殺しません (代理の途中で切らないため)。新しいスレッドを起こさなくなり、
仕事を終えたスレッドから順に終わるので、しばらくは /status の live_threads が
max_threads を上回ったままになります。
裏側の再検証 (stale-while-revalidate) もこの置き場で走ります。以前は再検証のたびに スレッドを起こしていたので上限の外にいました。ただし待ち方は接続と逆で、空きが無ければ 待ち行列に積まずに捨てます。再検証は「後でやればいい仕事」で、捨てても次の要求で 普通に取り直されるだけなのに対し、積むと (1) 新しい接続の処理がその後ろに並び、 (2) 順番が来るまで「このキーは再検証中」の印を握り続けるためです。捨てた要求はそのまま 同期の再検証に回るので、クライアントには新しい表現が返ります。
代償は「暇なトンネルを預かる速さ」です。トンネルは 1 本ごとに猶予 100 ms のあいだワーカーを
握るので、**次々に張られる CONNECT を受けられる速さの天井が「上限 ÷ 100 ms」**になります
(上限 256 で毎秒 2,560 本。実測で 5,000 本の確立が 1.9 → 2.45 秒)。それより速く暇なトンネルが
増える環境では PROXY_MAX_THREADS を上げてください。短命な CONNECT (張ってすぐ閉じる) と
HTTP の代理はワーカーをすぐ手放すので、この天井には当たりません (実測でも変化なし)。
要求を処理していない keep-alive 接続はスレッドを握りません (PROXY_PARK_IDLE、既定 on、
Linux のみ)。次の要求が猶予 (既定 3 ms) のあいだ来なければ、その接続は idle-watch スレッドの
epoll に預けられ、ワーカースレッドは解放されます。読めるようになったら空いているワーカーに戻します。
実測で暇な接続 2,000 本のとき 2,004 スレッド・RSS 68.0 MB → 25 スレッド・25.2 MB、
忙しいときの CPU/要求とシステムコール数は変わりません。off にすると
「1 接続 = 1 スレッドが専任する」元の動きに戻ります
(2026-09-08、release、PROXY_MAX_CONNS=8192 scripts/cpu-per-request.sh --only idle-conns --conc 2000
の 3 回の中央値。off 側は同じコマンドに PROXY_PARK_IDLE=off PROXY_MAX_THREADS=0 を足したもの)。
暇な CONNECT トンネルも同じ預かり所に預けます (同じ PROXY_PARK_IDLE、Linux のみ)。
両方向とも 100 ms 動きが無ければ、クライアント側とサーバー側の記述子 2 本を epoll に預けて
スレッドを手放します (中継に使うパイプもこのとき手放します)。どちらかが動いたら空いている
ワーカーへ戻し、PROXY_TUNNEL_IDLE_SECS を過ぎたものは預かり所が引き上げて閉じます。
預けているあいだも同時接続数には数えます (PROXY_MAX_CONNS の意味は変わりません)。数えているので、
上限に当たった接続はこの中の最古の 1 本を閉じて席を作ります (PROXY_MAX_CONNS の行を参照)。
実測で暇なトンネル 5,000 本のとき 5,005 スレッド・RSS 93.9 MB → 68 スレッド・29.9 MB
(/status の parked_tunnels で本数が見えます)。片方向だけ閉じたトンネルは預けません。
中継に使う splice(2) のパイプは、空になったものをワーカースレッドが 2 本まで持ち越して
次のトンネルで使い回します。短命なトンネル (CONNECT を張ってすぐ閉じる) は 1 本あたり
pipe2 2 回・fcntl(F_SETPIPE_SZ) 2 回・close 4 回を払っていたので、CONNECT 確立の
システムコールが 29.1 → 20.1 回/本、CPU/本 が 163.5 → 139.7 us になりました。
中身が残ったままのパイプ (送り先が途中で消えたとき) は使い回さずに閉じます。
# シンボル付きでビルドする (profile.release は strip = true なので strip も止める)
CARGO_PROFILE_RELEASE_DEBUG=1 CARGO_PROFILE_RELEASE_STRIP=none cargo build --release
perf record -g -p $(pgrep -f 'rust-http-proxy$') -- sleep 10 # 別端末でベンチを回している間に
perf report --stdio | head -40 # ホットパスを見る
strace -c -f -p $(pgrep -f 'rust-http-proxy$') # perf が無ければシステムコールの回数で見る
strace -f -e trace=write,sendto -c -p $(pgrep -f 'rust-http-proxy$') # 1 要求あたりの write 回数[profile.release] debug = 1 は入れません (バイナリが太るため)。必要なときだけ上の環境変数で付けます。
# Docker (2 段ビルド。実行イメージは debian-slim + libssl3)
docker build -t rust-http-proxy .
docker run -p 8080:8080 rust-http-proxy
curl -x localhost:8080 http://example.com/イメージに入れるのは Cargo.toml / Cargo.lock / .cargo / crates / src だけです
(本体は 26 個のクレートに分かれているので crates が要ります)。
版の文字列を作る build.rs は crates/server/ にあるので crates に含まれます (T15.12 段 6')。.git は入れないので、
イメージの中の版は rust-http-proxy 0.18.0+unknown になります。
.dockerignore で target/ と **/target/ を送らないようにしてあります
(イメージには元から入りませんが、ビルドコンテキストとして daemon へ送ると
cargo build 済みの作業ツリーでは 1 GB を超えて遅くなるため。除いたコンテキストは約 2 MB)。
タグ v* を push すると .github/workflows/release.yml が x86_64 / aarch64 の
バイナリ (glibc 2.35 以上) を作って Release に添付します。
「1 ファイルでどこにでも置ける」ので一度は入れましたが、実測して外しました。
| forward, 8 並列 | CONNECT 確立 | |
|---|---|---|
| glibc (通常ビルド) | 32,169 req/s, p50 0.204 ms | 8,071 tunnels/s |
| musl 静的リンク | 10,846 req/s, p50 0.602 ms (1/3) | 7,277 tunnels/s |
加えて、
- TLS が使えない:
dlopenが機能しないのでlibsslを実行時に読み込めず、起動ログにTLS: libssl not foundが出ます。https://オリジンの取得とキャッシュが無効になります (CONNECTトンネル = ブラウザの HTTPS は影響なし) - 名前解決が NSS を通らない: musl は
/etc/resolv.confだけを見ます (systemd-resolved / mDNS が効かない) - ビルドが 120 MB に収まらない: 静的リンクにしてもビルドが軽くなるわけではありません
release (既定) |
dist (配布用) |
|
|---|---|---|
opt-level |
3 |
"s" |
lto |
false |
true (fat) |
codegen-units / strip |
4 (全クレート) / あり |
1 / あり |
| ビルドが通る最小のメモリ | 約 90 MB (手元。90 は 4 回とも通り、85 以下は毎回落ちる。2026-09-26。CI では未測定) | 350 MB 以上 |
| バイナリ | 2,760,504 B | 1,842,976 B (852 KB 小さい) |
| CPU/要求 (forward 8 並列) | 41.4 us | 39.6 us |
(バイナリの大きさと通る最小のメモリは 2026-09-26 (T17.11 = T15.12 段 8) の実測です。2026-09-24 (段 7) の時点は
release 2,694,968 B・通る最小 105〜110 MB、2026-09-19 (段 5・段 6') の時点は
release 2,563,896 B・通る最小 120〜125 MB、2026-09-08 の時点は release 1,381,872 B / dist 1,054,184 B (327 KB 小さい) でした。
CPU/要求 の 2 つは 2026-09-08 の値で、段 5 / 段 7 では測り直していません。速さの測り方は上の「性能」と同じです)
LTO を既定で切っている理由: cargo build --release を メモリ 120 MB のコンテナで通す ためです。
LTO の重さは最終リンクの 1 回にかかり、クレートを 26 に割ってもそこは小さくなりません。
26 クレート・jobs = 1 で 3 つの選択肢を同じ日に測った結果 (2026-09-07。手元の aarch64 で、その上限の cgroup に
入れて実際にビルドしたもの。バイナリと CPU はこのときのコードの値で、いまの release は上の表のとおりです。
CI で通る最小は測っていません):
[profile.release] |
通る最小のメモリ (手元) | クリーンビルド | バイナリ | CPU/要求 (forward) |
|---|---|---|---|---|
lto = false (既定) |
100 MB | 38.7 秒 | 1,316,336 B | 50.19 us |
lto = "thin" |
170 MB | 55.4 秒 | 1,316,328 B | 50.09 us (-0.2%) |
lto = "fat" |
350 MB | 48.8 秒 | 1,185,248 B | 47.95 us (-4.5%) |
fat は効きますが 120 MB の約 3 倍のメモリが要ります。thin は 170 MB 払ってもバイナリが
8 バイトしか変わらず、速さもぶれの中です。配布バイナリだけ dist (fat LTO) で作ります。
codegen-units は全クレート 4 (2026-09-24、T15.12 段 7): ビルドの山はコード生成 (LLVM) の段で、
codegen-units = 1 はクレート全体の LLVM IR を 1 つのモジュールとして一度に抱えます。
全クレートに当てて測った実測 (手元 aarch64、jobs = 1、RssAnon の最大) は
proxy-metrics-watch 121.7 → 92.5 MB (= 4) → 84.3 MB (= 16)、クリーンビルド 95 → 106 → 133 秒で、
4 より上げても減りません (コード生成の前の段 = 型検査とメタデータの床が約 80 MB)。
全クレート 4 のいまの上位は proxy-endpoints 82.5 > proxy-server 81.5 > proxy-metrics-recent 76.9 >
proxy-http 74.7 MB です (2026-09-26、T17.11 で proxy-metrics-watch 95.4 MB と proxy-metrics-window 91.1 MB を
2 つずつに割った後。段 7 の前は proxy-metrics-window 107.8 MB がいちばん上)。
codegen-units を増やすとクレートの中でのインライン化の範囲が狭まりますが、手元もデプロイ先も共有の機械で
CPU/要求 が数 % ぶれるので手元の A/B は取らず、デプロイ先で「桁で悪くなっていないか」だけを見ます。
悪くなっていたら Cargo.toml の [profile.release] の codegen-units を 1 に戻す 1 行で戻ります。
--lite のシステムコール 5.022 → 5.023 回/要求、確保 10.006 → 10.006 回/要求 で、要求の経路の費用は動いていません。
2026-09-19 (段 5) から 2026-09-24 (段 7) までは、要求の経路に乗らない 9 クレートだけを
[profile.release.package.<名前>] で 4 にしていました。
dist は codegen-units = 1 を明示しています (release の 4 を継ぐと fat LTO でも .text が 16.9 KB 太るため)。
最適化レベル: release は opt-level = 3、dist は "s" です (dist はサイズを優先)。
fat LTO と合わせた dist の実測 (2026-09-08) は release に対して forward 8 並列 +1.9% (CPU/要求 41.4 → 39.6 us で -4.4%)、
キャッシュ HIT +0.7%、64 並列 -1.2%、CONNECT 確立 -8% (この経路のぶれ ±25% の中) で、CPU 以外はほぼぶれの中です。
それでも dist は 721 KB 小さい (2026-09-19 の実測) ので、配布は dist のままにしています。
# 基本起動 (メモリ・ディスクとも動的マージンだけ残して限界まで自動確保)
SERVER_PORT=8080 ./target/release/rust-http-proxy
# ACL・タイムアウト付きで起動
SERVER_PORT=8080 \
PROXY_ALLOW_HOSTS="*.example.com,*.github.com" \
PROXY_DENY_HOSTS="evil.example.com" \
PROXY_TIMEOUT_SECS=15 \
./target/release/rust-http-proxy
# 使用率を 80% / 90% で頭打ちにし、先行確保をやめて上限管理だけにする
SERVER_PORT=8080 \
PROXY_MEM_TARGET_PERCENT=80 \
PROXY_DISK_TARGET_PERCENT=90 \
PROXY_CACHE_RESERVE=off \
./target/release/rust-http-proxy
# 従来どおり固定上限 (メモリ 200MB / ディスク 2GB) で起動
SERVER_PORT=8080 \
PROXY_LOG_LEVEL=debug \
PROXY_MEM_CACHE_MB=200 \
PROXY_DISK_CACHE_MB=2048 \
PROXY_CACHE_DIR=/var/cache/rust-http-proxy \
./target/release/rust-http-proxy
# Pterodactyl (SERVER_PORT / SERVER_MEMORY / P_SERVER_UUID はパネルが渡す。ディスク割当だけ egg 変数で)
PROXY_DISK_QUOTA_MB=51200 ./rust-http-proxy# HTTP プロキシ経由のリクエスト
curl -x http://127.0.0.1:8080 http://example.com/ -I
# HTTPS (CONNECT) プロキシ経由のリクエスト
curl -x http://127.0.0.1:8080 https://example.com/ -I
# キャッシュヒットの確認 (2 回目は X-Cache: HIT ヘッダーが付く)
curl -x http://127.0.0.1:8080 http://example.com/ -I
curl -x http://127.0.0.1:8080 http://example.com/ -I | grep -i x-cache
# 条件付き要求にはキャッシュから 304
curl -x http://127.0.0.1:8080 http://example.com/ -H 'If-None-Match: "<ETag>"' -I
# エンドポイントの一覧 (ブラウザでプロキシの URL を開いたときと同じ案内)
curl http://127.0.0.1:8080/
# ヘルスチェック (200 = 健康、503 = どれかの検査が偽。軽い JSON)
curl -i http://127.0.0.1:8080/healthz
# メトリクス確認 (キャッシュ統計・予算・マージン・先行確保量・システム使用量・カーネルと cgroup の窓を含む)
curl http://127.0.0.1:8080/status
curl "http://127.0.0.1:8080/status?sort=errors" # 上位 50 をエラーの多い順で切り出す (dns / slow も)
curl http://127.0.0.1:8080/metrics # Prometheus 形式
curl http://127.0.0.1:8080/config # 効いている設定とその出どころ (下記「環境変数」)
curl "http://127.0.0.1:8080/profile?res=5" # 待ちの段階・スレッドの CPU と状態・ロックの取り合い
curl "http://127.0.0.1:8080/profile?res=5&n=180&offset=180" # 続きの 180 標本 (next_offset が null になるまで)
curl "http://127.0.0.1:8080/profile?summary=1" # 標本なし。5 分 / 1 時間 / 全部 の CPU/要求 だけ (重い口ではない)
# 個票 (誰が・いつ・なぜ)
curl "http://127.0.0.1:8080/connections" # いま開いている接続
curl "http://127.0.0.1:8080/errors?n=100" # 直近のエラー (誰が・いつ・どの原因で)
curl "http://127.0.0.1:8080/log?n=200" # 直近の警告とエラーのログ行
curl "http://127.0.0.1:8080/recent?n=200" # 閉じた接続 (新しい順)
curl "http://127.0.0.1:8080/recent?sort=slow&n=20" # 確立のいちばん遅かった 20 本
curl "http://127.0.0.1:8080/recent?client=198.51.100.7" # ある接続元だけ
curl "http://127.0.0.1:8080/recent?since=$(( $(date +%s) - 3600 ))" # 直近 1 時間に開いたもの
curl "http://127.0.0.1:8080/recent?n=500&offset=500" # 続きの 500 本 (next_offset が null になるまで)
curl "http://127.0.0.1:8080/bursts?n=50" # 山が立った瞬間の写真 (新しい順)
curl "http://127.0.0.1:8080/trace?n=200" # 追跡中の 1 接続元の要求 (PROXY_TRACE_CLIENT。URL が入る)
curl "http://127.0.0.1:8080/events?n=200" # 起動・再読込・圧迫などの出来事 (新しい順)
curl "http://127.0.0.1:8080/events?since=$(( $(date +%s) - 86400 ))" # 直近 1 日の出来事だけ
curl -s "http://127.0.0.1:8080/events?n=512" | grep -o '"kind":"anomaly","text":"[^"]*"' # 自動検知だけ
curl "http://127.0.0.1:8080/history?res=5" # 時系列 (既定 720 標本 = 1 時間) + closed + transfer
curl "http://127.0.0.1:8080/history?res=5&n=4320" # 5 秒刻みで 6 時間ぶん (T14.32)
curl "http://127.0.0.1:8080/history?since=restart&summary=1&normal_hours_only=1" # 起動からの要約 1 行
curl "http://127.0.0.1:8080/dns?sort=misses" # 名前解決の表 (age / host / misses で並べ替え)
curl "http://127.0.0.1:8080/hosts?sort=slow&limit=200" # 全ホスト (/status の hosts[] は上位 50 だけ)
curl "http://127.0.0.1:8080/hosts?limit=500&offset=500" # 続きの 500 件 (1,000 件は 1 枚に入らない)
curl "http://127.0.0.1:8080/clients?sort=requests&limit=200" # 全接続元 (User-Agent・宛先の種類・ポート)
curl "http://127.0.0.1:8080/hosts/series?top=16" # 上位 16 ホストの 5 分 × 24 時間
curl "http://127.0.0.1:8080/hosts/series?host=connect://mtalk.google.com:5228" # 1 ホストだけ
curl "http://127.0.0.1:8080/explain?host=mtalk.google.com" # 1 宛先を 1 枚に (統計 + /dns + 個票 + 判定)
curl -s "http://127.0.0.1:8080/explain?host=mtalk.google.com" | python3 -c 'import json,sys;print(json.load(sys.stdin)["summary"])'
curl "http://127.0.0.1:8080/explain?client=198.51.100.7" # 1 接続元を 1 枚に
curl "http://127.0.0.1:8080/readers" # この口を読んでいる相手 (走査か、自分の監視か)
curl "http://127.0.0.1:8080/daily?n=365" # 1 日 1 行の要約 (永久に残る。古い順)
curl "http://127.0.0.1:8080/slo?days=7" # SLO の達成率 (日ごと・時間ごと・外れた時間帯)
curl -s http://127.0.0.1:8080/snapshot > snap.json # 上の全部を 1 要求で (4 MiB まで)
curl "http://127.0.0.1:8080/snapshots" # 日次で残した snapshot の一覧 (30 日ぶん)
curl -s "http://127.0.0.1:8080/snapshots/2026-09-15" > day.json # その日ぶんをそのまま
# ブラウザで開くなら http://127.0.0.1:8080/dashboard (「いま」を見るコントロールパネル)
# ブラウザで読むなら http://127.0.0.1:8080/inspect (上の個票を時間軸で描く「調査」ページ)
# 端末から測るなら http://127.0.0.1:8080/probe.html (往復とプロキシ経由の取得をブラウザで測る)
# ブラウザの自動設定と、ブロックリストの判定
curl http://127.0.0.1:8080/proxy.pac # 自動設定スクリプト (ブラウザにこの URL を設定する)
curl "http://127.0.0.1:8080/blocklist?host=example.com" # ブロックしているか (action=block|allow|clear で上書き)
# キャッシュの操作・確認
curl -X PURGE -x http://127.0.0.1:8080 http://example.com/file.zip # 1 URL (全バリアント) を消す
curl "http://127.0.0.1:8080/purge?url=http://example.com/file.zip" # 同じことを GET で
curl "http://127.0.0.1:8080/purge?all=1" # 全消去
curl "http://127.0.0.1:8080/lookup?url=http://example.com/file.zip" # 保存状態 (層・サイズ・期限)応答の形の版 (schema): JSON を返す口はどれも、応答の先頭に "schema":N を持ちます (整数。/proxy.pac と
/metrics と HTML のページは JSON ではないので付きません)。エラーの応答 (400 / 404 / 405) にも
同じ版が入ります。/snapshot は外側と各部の両方に持ちます (各部はそれぞれの口の出力
そのものなので、切り出して 1 本の応答として読めます)。
curl -s http://127.0.0.1:8080/status | head -c 32 # {"schema":1,"status":"ok","versi読む道具 (scripts/status-diff.py / scripts/snapshot-diff.py / scripts/check-dashboard.js) は
この版で分岐します。版を持たない古い出力は「版 0」として今までどおり読めます
(鍵の有無から形を推測する道)。定義は crates/metrics/src/metrics.rs の SCHEMA の 1 か所です。
| 版 | 日付 | 何が変わったか |
|---|---|---|
| 0 | 〜2026-09-16 | schema が無い。読む道具は鍵の有無 (parts があるか、hosts が object か) から形を推測する |
| 1 | 2026-09-16 | 全 JSON の先頭に "schema" を足した (Phase 14 の形。/status /history /recent /snapshot … の他の鍵と並びはそのまま) |
形を変えるとき (鍵を消す・意味を変える・入れ子を変える) は SCHEMA を +1 して、この表に
1 行足す決まりです。鍵を末尾に足すだけなら上げません (読む側は知らない鍵を無視できるので、
版を上げると「変わっていないのに分岐が増える」ことになります)。
/history の応答には、上の標本 (keys / samples) とは別に canary の配列が付きます
(res=5 と res=60 のときだけ中身が入ります。T14.10)。
/dashboard はブラウザで開くコントロールパネルです (依存なしの 1 ページ。2 秒ごとに /status、5 秒ごとに /history、
30 秒ごとに /status?sort=errors と ?sort=dns を取って描きます。並べ替えた 2 本だけ間隔を空けているのは、
2 秒ごとに引くとプロキシ側で 50 ホストぶんの組み立てが 3 倍になるためです)。/history は 5 秒間隔の JSON で、既定は直近 1 時間分 (720 標本) です
(リングは 6 時間ぶん持っていて ?n=4320 で遡れます。T14.32)。標本は配列の配列で、列名は先頭の keys に
1 回だけ出ます (項目が 32 に増えたため)。要求数・転送量・命中/ミス・メモリ/ディスク使用量・RSS・
上限に当たって暇なトンネルを追い出した回数 (evicted_idle) は累計 (ブラウザ側で
差分を取ってレートにする)、応答時間の分布 (connect_* / forward_* の件数・合計 ms・最大・12 段の区間) と
エラー (errors / errors_by_cause)・名前解決 (dns_misses / dns_ms_sum) はその区間だけの値、
接続数・スレッド数・記述子数 (active / threads / fds) はゲージで、粗い解像度へ畳むときは平均と
最大 (active_max / threads_max / fds_max) の両方を残します (平均に畳むと山が消えるため)。
/history の応答には別の配列 "kernel":{"keys":[...],"samples":[[...]]} が付きます
(上の「カーネルと cgroup の窓」。res=3600 は null = この解像度の窓は持っていません)。
?summary=1 を付けると標本を返さず、その期間を畳んだ 1 行になります (上の /history?...&summary=1。T14.24)。
ブラウザの HTTP プロキシにこのプロキシを設定した状態で http://ホスト:ポート/dashboard を開くと要求は
絶対形式で届きますが、ポートが自分の待ち受けポートなら自分宛てとして応答します (自分へ転送してループしません)。
自分宛てかどうかはポートだけで決めます: 絶対形式 (GET http://host:PORT/status) は URL の、
オリジン形式 (GET /status + Host:) は Host のポート (無ければ 80) が自分の待ち受けポートと同じときだけ
自分宛てです。自分宛てで知らないパスは 404、/ は 200 でエンドポイントの一覧を返します
(ブラウザでプロキシの URL を直接開いた人への案内。--lite でも出ますが、持っていない /dashboard は載せません)。
Host のポートが違うオリジン形式は今までどおり Host 宛てに転送します (透過プロキシの使い方を壊さないため)。
Host の無い HTTP/1.0 のオリジン形式は今までどおり 400 です。
以前はオリジン形式を無条件に自分宛て扱いにしていたため、知らないパスが Host 宛ての転送に落ち、
Host が自分自身だと自分へ max_conns 本つないでループしていました (手元の再現: 1 要求で 33 本)。
保険として、転送する要求には Via: 1.1 rust-http-proxy/<起動ごとの 8 桁 16 進> を付け、
自分の印が付いた要求を受けたら 508 Loop Detected で閉じます。
これらのパスはプロキシ自身が応答し、同じポート宛てのオリジン形式の要求より優先します。認証は無いので、
到達できる人は誰でも purge できます (公開ポートで動かすなら到達制御を)。
PROXY_ENDPOINTS_READONLY=on にすると、書き換える口 (/purge / PURGE / /blocklist?action=) だけを
405 で断ります (読む口はそのまま)。公開ポートで見知らぬ接続元が増えたら PROXY_ALLOW_CLIENTS で絞れます
(一覧に無い相手は accept 直後に閉じるので、内部エンドポイントにも届きません)。
PROXY_MAX_CONNS_PER_CLIENT=N は、1 つの接続元が同時に開ける本数を N 本に抑えます (超えた接続は 503。
自分宛ては上限の外で受けるので監視は取れます)。どれも認証ではありません — このプロキシに Proxy-Authorization は
無く、入れる予定もありません。経路を絞る (PROXY_ALLOW_CLIENTS) か、消せる口を閉じる (PROXY_ENDPOINTS_READONLY) か、
1 人の取り分を抑える (PROXY_MAX_CONNS_PER_CLIENT) かの 3 つだけです。
重い口は同時に 1 本だけ組みます (つまみはありません。いつもこの動作です)。/snapshot は 17 本ぶんの口を
1 つにまとめた最大 4 MiB の JSON で、認証が無いので誰でも好きなだけ叩けます。1 秒に 10 回引かれると、それだけで
CPU と統計の鍵の時間を食います。そこで大きい応答を組む口は同時に 1 本とし、組んでいる最中に来た 2 本目からは
503 Service Unavailable + Retry-After: 1 (本文は {"schema":1,"error":"busy"}) で断ります。重い口はこの 6 つです:
| 口 | 重いと見なす条件 |
|---|---|
/snapshot |
いつも (17 部・最大 4 MiB を組む) |
/profile |
?summary=1 以外はいつも (段階・スレッドの CPU と状態・ロックの取り合いの窓。要約は標本を 1 本も組まないので軽い口です。T15.0 (11)) |
/explain |
いつも (上の口を横断して 1 枚に組む) |
/hosts |
limit が 200 より大きいとき (/hosts?limit=1000 など) |
/recent |
n が 500 より大きいとき (/recent?n=2000 など) |
/history |
n が 720 より大きいとき (/history?res=5&n=4320 は 1.9 MB) |
既定の limit / n のまま引くぶんには重い口になりません。/status /healthz /metrics のような軽い口は
この判定にも旗にも触りません (監視が 5 秒ごとに叩く口を断ったら、断ったこと自体が事故になるため)。
断った累計は /status の末尾の heavy_rejected。走査に対する最小限の保護で、認証ではありません —
順に引けば誰でも全部 200 で取れますし、Retry-After: 1 のとおり 1 秒後に引き直せばまず通ります。
旗は組み終わったところで戻すので、読むのが遅い相手 1 人が全員に 503 を返させることはありません。
費用は重い口に来たときの原子 1 回だけで、プロキシとしての転送 (forward / CONNECT) には 1 命令も足していません。
ホスト別統計には応答時間 (平均・p50・p95・最大 ms、CONNECT は接続確立までの時間) も入り、/metrics では
sorahost_host_request_duration_seconds ヒストグラムとして出ます。ダッシュボードのホスト表は要求数・遅い順 (p95)・
エラー率・名前解決 (合計)・確立の平均・転送量で並べ替えられ、「名前解決 / 接続 (ms)」と「v4 / v6」の列で
待ちの内訳が読めます (この並べ替えは受け取った 50 件の中での並び替えで、どの 50 件を切り出すかは
/status?sort= の側です)。
ダッシュボードの図は 11 枚で、上段の KPI に「CONNECT 確立 p50 (直近 1,024 本)」「利用者が待つ時間 p50」
「名前解決」(ミス率 = misses ÷ (hits + misses)、ミス 1 回の値段 miss_avg_ms、あれば先回りの回数)
「CPU の絞り」が出ます。
p50 の KPI は /status の recent_quantiles.connect (直近 1,024 本の実測。T14.31) で、
札に本数・下に p90 / p99 / 最大とその窓の秒数が付き、1 ms 未満も丸めません。
recent_quantiles を持たない版の /status (や --lite) では、今までどおり
直近 5 分 (60 標本) の区間のヒストグラムを足し合わせて補間した値に落ち、札が「直近 5 分」に戻ります
(図「CONNECT 確立 p50 / p95」は今までどおり区間の補間です — 時系列は標本ごとの分布からしか描けないため)。「接続中」のカードには
上限 240 · 山 218 (直近 5 分) · 503 0 の行が出ます (山は /history の直近 5 分の active_max の最大。
上限の 80% で黄、95% で赤)。その下の「悪いホスト (上位 10)」の表は /status?sort=errors と ?sort=dns の
2 枚を混ぜたもので、エラー数・原因の内訳・名前解決の平均 (dns_ms_sum ÷ dns_misses) と合計・確立の平均
(connect_ms_sum ÷ timed) が読めます (エラーも名前解決も無いホストは出しません)。
ヘッダーには動いている版と、どちらの窓か (起動から / 通算) が出ます。
外部ライブラリは 1 つも読み込まない 1 ページのままです。ブラウザの無い環境では
node scripts/check-dashboard.js [/history の出力] [/status の出力] [/profile の出力] [/snapshot の出力] が
「JS の構文」と「/history の配列の配列・/status の読み方が実出力と合っていること」を確かめます
(Node があるときだけの補助的な確認。引数を省くと scripts/testdata/ の見本を読みます)。
最後に匿名化したデプロイ先の実データ (scripts/testdata/deployed-2026-09-16.anon.json。T14.35) でも
同じ読み方を回すので、本物の分布 (ホスト 817 件・1,440 標本) で壊れたらここで気づきます。
dashboard.html の大きさの上限は 80 KiB です (T15.0 (14) で下の 5 枚を足して 81,673 B。T21.5 で重複したコメントを
削り、「最近のエラー」の回数と最後の時刻を足して 80,515 B。node scripts/check-dashboard.js が見張ります。外部ライブラリを
読み込まない 1 ページという方針を守るための歯止めなので、超えたら中身を削るか上限を上げるかを先に決めてください — 余白は 1,405 B です)。
次の判断に要る 5 枚 (T15.0 (14))。どれも新しい fetch を 1 本も増やしていません (既にある
2 秒 / 5 秒 / 30 秒の取り直しに相乗り) し、欄を持たない版の応答では「記録していません」と断って
空のまま描きます (--lite も同じ)。
| カード | 読む口 |
|---|---|
| CPU の絞り (KPI + 図) | /status の kernel.cgroup_cpu、/history の kernel |
| CPU を使っているスレッド (プロファイルの節の表) | /profile の threads_top |
| 動かないトンネル (「いまの接続」の下の表) | /connections |
| 名前解決の内訳 | /status の dns、/history の dns_warm |
| 受付待ち | /profile の stages.connect の queue と run_delay_us |
| 利用者が待つ時間 p50 (KPI + 図) | /status の recent_quantiles.wait、/history の wait_* |
それぞれの欄と、無い版のふるまい:
- CPU の絞り (KPI + 図) —
nr_throttled÷nr_periodsを % で (札のとおり cgroup の通算で、プロセスが起きる前を含みます)、下に直近 5 分・待たされた合計 (throttled_usec)・quota_cores(null なら「割り当て なし」)・since_start(起動からの増分)・path。図はcpu_nr_periods/cpu_nr_throttledを周期 / 秒で 2 系列- 無い版のふるまい:
kernel.cgroup_cpuか 分母のnr_periods(T15.0 (6) で足した欄) が無い版と、cgroup v2 の読めない環境では KPI が「–」
- 無い版のふるまい:
- CPU を使っているスレッド (プロファイルの節の表) —
tid(=/connectionsのtidと同じ番号)・comm・役割・CPU %・走っていた標本数。直近 5 分を tid で束ねて上位 8- 無い版のふるまい: 列を持たない版では 0 行
- 動かないトンネル (「いまの接続」の下の表) —
idle_secsが 300 秒以上の CONNECT だけを、止まっている長い順に 20 本。targetage_secsidle_secsbyteshalf_closed(+ 秒)spinsrevents(client / origin)tid。下の行に「空回りの合計」と「1 度も空回りしていない本数」(0 のままなら待っている・増え続けるなら回っている)- 無い版のふるまい:
idle_secsを持たない版では 0 件
- 無い版のふるまい:
- 名前解決の内訳 — warm な名前の数の推移 (図) と、ミスの種類別の横棒 1 本 (
misses_by_kind=cold/expired/warm_stale/negativeの起動からの通算。画面では差分を溜めません)。KPI の下にはrefresh_failures/refresh_late/ 引き直し 1 回の平均も出ます- 無い版のふるまい:
misses_by_kindを持たない版では横棒を出さない
- 無い版のふるまい:
- 受付待ち —
queueの段を 12 段の区間に開いた横棒 1 本 (二峰ならワーカー待ちで待たされています) と、件数・平均・p50 / p95 / 最大。下はrun_delay_us(全役割の合計) を us / 秒 の折れ線で- 無い版のふるまい:
run_delay_usがnull(schedstat の読めない環境) の標本では折れ線が切れる
- 無い版のふるまい:
- 利用者が待つ時間 p50 (KPI + 図) —
queue + client_read + dns + connectの和 (T15.0 (2))。札に本数・下に p90 / p99 / 最大。まだ外にあるのは accept から要求行が届くまでと、200 の後のfirst_relay- 無い版のふるまい:
recent_quantiles.waitが無ければ/historyのwait_*の区間の補間に落ち、それも無ければ「–」
- 無い版のふるまい:
/inspect は「調査」ページです (/dashboard/inspect も同じもの。T14.8)。/dashboard が「いま」を見る画面なのに対して、
こちらは起きたことを時間軸で読むための別のページで、外部ライブラリなしの 1 ページのままです。
大きさの上限は 96 KiB です (T14.8 は 64 KiB でしたが、T14.44 で「今日」「今週」「出来事と異常」の
3 枚を足して 58,076 B になり、64 KiB までの余白が 7 KiB しか残らなかったため上げました。
外部ライブラリを読み込まない 1 枚という方針は変えていません。node scripts/check-dashboard.js が見張ります)。
更新は個票 (/status /recent /events /history?summary=1) が 10 秒ごと、表と散布 (/bursts /clients
/hosts /hosts/series /daily /snapshots) は 30 秒ごとです (/hosts は上位 200 まで。
/daily と /snapshots は日に 1 回しか変わらないので重い方に置いています。開いたままにしても監視より重くならないように)。
描くのは 9 枚:
- タイムライン (
/recent): 横 = 時刻、縦 = 接続元 (宛先にも切り替えられます)、線 1 本が接続 1 本で、 長さ = 寿命・色 = 閉じた理由 (9 種。error:<原因>は 1 色に畳みます)・太さ = 運んだバイト。 範囲は 1 時間 / 6 時間 / 24 時間 (/recent?since=)。/eventsの出来事は縦の破線の印で重ねます (種類が増えても既定の色で描くだけなので壊れません) - 出来事と異常 (
/events?n=200。T14.11 / T14.23): タイムラインに重ねた印と同じ出来事を、 新しい順の表で読みます (印はeventMarks、表はeventRowsで別の関数です)。anomalyは色を変え、cleared: <種類>は立った出来事と対にして続いた長さを両方の行に出します (対の見つからない異常は「まだ続いています」)。知らない綴りが増えても既定の色で並ぶだけです - 起動からの窓:
/history?since=restart&summary=1(T14.24) を 1 要求で読み、「起動から」と「通算」を 切り替えます。?summary=1を持たない版や--liteでは/historyの標本をsince_start_secsで切って 手元で畳みます (どちらでも同じ 1 行になります) - 今日 (
/daily?n=14。T14.20): 日別の要求・転送・CONNECT・p50 / p95・名前解決のミス率・ミス 1 回・ エラー・山・RSS・版の表 (新しい順) と、いちばん新しい日の主な数字。/dailyは終わった日しか書かないので、 今日ぶんは上の「起動からの窓」で読みます。「見ていた」の列はsecs ÷ 24 時間で、 再起動した日は 100% に届きません。**この口を持たない版と--liteでは「記録していません」**と出ます - 今週 (
/dailyの 7 行 +/snapshots。T14.40 / T14.34): サーバーにweekly-report.pyは無いので、/dailyの 7 行をこのページの中で足して要求・転送・CONNECT・エラー (と率)・名前解決のミス率・ ミス 1 回 (ミスの数で重みを付けた平均)・最大同時・山・RSS を出します。p50 / p95 は日をまたいで 足せない (区間ヒストグラムが/dailyに無い) ので、日ごとの値をそのまま並べて幅だけ書きます (weekly-report.pyと同じ判断)。各日の行にはその日の雪像 (/snapshots。T14.34) へのリンクが付きます - 遅い接続 (上位 50) (
/recent?sort=slow): 段階 (queue/client_read/dns/connect/first_relay。T14.3) の 積み上げ横棒と、確立 − RTT の列 (T14.5。RTT では説明できない待ちがどれだけかを 1 列で読むため)。 宛先は/explain?host=(T14.36) へのリンクです (1 相手ぶんを 1 枚で読む口) - 山の写真 (
/bursts): 1 枚ずつ、接続元別・宛先別・状態別・種類別の内訳と、そのときのスレッド / fd - 接続元 (
/clients):User-Agent・宛先の種類・IP リテラル宛て・RTT・初回 / 最終 (RTT は標本が無ければ「–」です) - RTT × 接続時間の散布 (
/hosts): x = カーネルの平滑化 RTT の平均、y = 接続 1 回の平均 (connect_ms_sum ÷ timed)。対角線 (y = x) から上に離れた点が「RTT では説明できない待ち」で、 右の表に差の大きい順で 12 件出ます (rtt_msがnull= 標本 0 のホストと、接続を 1 度も測っていない ホストは描きません。接続の平均が 0 ms = 1 ms 未満のホストは y = 0 に描きます) - ホスト別の折れ線 (
/hosts/series?top=8。T14.22): この口を持っている版でだけ出る枠です (無ければ枠ごと出しません) - (ページの先頭に
/snapshotと/daily/snapshotsへのリンクがあります。個票を 1 要求で持ち帰るときはそちら)
描画関数 (timeline / slowRows / burstCards / clientRows / rttScatter / sinceStart / eventMarks /
seriesLines / dailyRows / weeklyRows / eventRows) は DOM に触らないので、
node scripts/check-dashboard.js が scripts/testdata/snapshot-local.json (手元のベンチで取った
/snapshot の実出力。宛先は 127.0.0.1 と localhost だけです) と
scripts/testdata/history-summary.json (同じく ?summary=1 の実出力)、
それに渡せばデプロイ先の /status /history でも回します。
「今日」「今週」「出来事と異常」の 3 つは、/daily と /snapshots の作り置き 9 日ぶん・
snapshot-local.json の本物の /events (異常入り)・匿名化した実データ (T14.35。この版の雪像には
/daily も /events も無いので**「無い版」の分岐**を実データで通し、/history?res=3600 を UTC の日で
束ねた週の足し算が weekly-report.py (T14.40) の週の数字と一致することも見ます) の 3 つで回ります。
/probe.html は「端末から測る」ページです (T14.33)。プロキシ側の計測は「プロキシに届いてから」しか見えないので、
利用者のブラウザから測ってプロキシ側の数字と突き合わせるための 1 ページ (外部ライブラリなし、64 KiB 以下) です。
開くと 3 つを順に測ります (回数は 3 / 5 / 9 回。読むのは中央値です — 1 回目は接続の確立を含んで遅く出るため):
- この端末 → プロキシ:
fetch('/status', {cache:'no-store'})を n 回。往復の中央値が 「端末 → プロキシの RTT +/statusを組んで返す時間」です (応答の頭が来るまでの時間と、読んだ文字数も出します) - プロキシ経由の取得:
http://の小さな URL (既定はhttp://example.com/) を n 回 (mode: no-corsなので中身は読みません。測るのは時間だけです) - プロキシ側から見たこの端末:
/clientsの自分の行 (T14.7) とrtt_ms(T14.5) を並べ、 (1) の往復との差 (往復 − カーネルの RTT) を出します
「このブラウザはこのプロキシを経由しているか」の判定は、プロキシの記録で見ます:
このプロキシは自分宛ての要求 (/status など) を clients[] に数えないので、(2) の前後で /status の
clients[] を比べて、自分の行の requests が増えていれば「経由している」、1 行も増えていなければ
「経由していない」 (ブラウザが自分で取りに行った)、**取得が 1 回も成功しなければ「判定できない」**です。
自分の IP は増えた行から分かります (増えた行が無いときは /clients?sort=recent の「最終が今」(10 秒以内) の
行を見当にします。同じ時間に他の接続元も動いていたときは、いちばん増えた行を採ったうえで「他にも増えた行があった」と
断ります)。「経由していない」と出たら、ブラウザのプロキシ設定か /proxy.pac を入れてもう一度測ってください。
測った値はサーバーへ送りません (端末の中だけです。このページがプロキシに出す要求は /status と /clients、
それに (2) の URL の取得だけで、結果を書き戻す口はありません)。rtt_ms は接続を閉じたときに 1 本ぶん読んだ
カーネルの平滑化 RTT (T14.5) なので、標本が無ければ「–」です (このページを開いている接続はまだ閉じていません)。
--lite でも 200 で開けますが、接続元を記録していないので (3) は空、(2) は判定できません。
関数 (median / pick / render) は DOM に触らないので、node scripts/check-dashboard.js の 11 番目の検査が
作り物の数列と /snapshot の中の /status の実出力で通します。
/status のトップレベルの version には動いているバイナリの版が出ます (-V と起動ログと同じ文字列)。
/status は 2 つの窓が混ざっているので、どちらの窓かが分かるように目印を出します:
since_start_secs から下 (total_requests / bytes_forwarded / cache_hits …) はこの起動から、
hosts[] と clients[] は状態ファイルに残る通算で、restored_since がその通算の始まり
(最も古い last_seen の epoch 秒。0 なら表が空) です。あわせてプロセス全体の数え物
threads (/proc/self/status の Threads。接続スレッドだけを数える live_threads とは別で、
監視・履歴・接続試行のスレッドも入ります) と fds / max_fds (/proc/self/fd の数と RLIMIT_NOFILE) も出ます。
/proc を読むのは /status と /metrics に来たときと 5 秒ごとの履歴の標本のときだけです。
/status には上限といまの混み具合も出ます: max_conns / max_threads (auto で決まった値。0 は無制限)、
live_threads (生きている接続スレッド) / idle_threads (そのうち仕事待ち) / queued_jobs (上限に当たって
待たせている仕事。捨てていません)。auto が何を選んだかは起動ログを見なくてもここで分かります。
同じ 5 つは /metrics にも gauge で出ます (sorahost_max_connections / sorahost_max_threads /
sorahost_threads{state="live"|"idle"} / sorahost_queued_jobs)。
接続スレッドの 2 つはラベル付きの 1 系列にそろえました。旧名 sorahost_live_threads /
sorahost_idle_threads はこの版だけ両方出るので、監視側は次の版までに移してください。
/metrics にはこのほか sorahost_connect_seconds(_bucket{le=} / _sum / _count。CONNECT 確立の
ヒストグラム。区間は /history と同じ 12 段。繋がった CONNECT だけを数えます — T20.4。0.18.0 までは失敗した 1 本も入っていました)、sorahost_dns_seconds_sum / _count (名前解決のミスに
かかった時間)、sorahost_errors_total{cause="dns|refused|unreachable|timeout|reset|tls|loop|other"}、
sorahost_rejected_requests_total{reason="request_line|header_too_large|method|no_host|bad_uri|body_framing"}
(読めずに 400 / 414 / 431 で断った要求。6 本で固定。T14.28)、
sorahost_fds / sorahost_max_fds / sorahost_process_threads、
sorahost_rtt_seconds_sum / _count ({side="client"|"origin"}。カーネルの平滑化 RTT。
標本は接続 1 本の終わりに 1 つで、ホスト別は出しません) が出ます。
ホスト別の応答時間ヒストグラム (sorahost_host_request_duration_seconds) は区間が 24 段になったので
上位 50 ホストまでです (数え上げの系列はこれまでどおり上位 100 ホスト)。ダッシュボードの「接続中」にも
スレッド 7 / 256 (空き 3) · 接続上限 1008 の 1 行が出ます。数えるには接続スレッドで共有している鍵が要るので、
/status と /metrics に来たときだけ数えます (要求ごとの仕事は増えません)。
cache の revalidations_dropped は、上限に当たって捨てた裏側の再検証の数です
(こちらは「後でやればいい仕事」なので待たせません)。cache の not_stored_rotations は
「保存されないと分かった URL」の記憶 (ブルームフィルタ) を入れ替えた回数です。
Grafana で段階と待ちを見る: /profile の段階は /metrics にも
sorahost_stage_seconds{kind="connect"|"forward",stage=...} の _bucket{le=} / _sum / _count として出ます
(CONNECT 7 段 = queue / client_read / dns / connect / first_relay / relay / park、
転送 6 段 = queue / client_read / origin / send / ttfb / body。区間は /history と同じ 12 段 + +Inf で、
le も _sum も秒)。累計は起動からです: Prometheus のヒストグラムは単調増加が前提なので、
/profile の窓 (1 時間 / 1 日で古い標本から落ちる) の和ではなく、起動からの累計を別に持っています
(再起動で 0 に戻るので、rate() / histogram_quantile() はそのまま使えます)。段階が累計に入るのは
5 秒ごとなので、最後の 5 秒ぶんは次の収集で入ります。--lite では段階を測っていないので 1 系列も出ません
(sorahost_kernel_* と同じ判断で、源が無いときに 0 を出しません)。ホスト別には出しません
(系列が増えすぎるため。ホスト別は /hosts と /status の hosts[] で見ます)。
あわせて sorahost_warm_names (keep-warm で裏から引き直し続けている名前の数。gauge) と
sorahost_lock_contention_total{lock="stats"|"dns"|"park"|"workers"}
(そのロックを取るときに本当に待たされた回数の累計。counter) が出ます。
canary の sorahost_canary_seconds{stage="dns"|"connect"|"ipv6_connect"} (最後の値。
ipv6_connect は繋がった回だけ出ます = 行が消えていること自体が「IPv6 が死んでいる」の印) と
sorahost_rtt_seconds_sum / _count{side=} は前からあるものです。
段階の 13 本で /metrics は 約 14 KB 増えます (ホスト表と接続元表が満杯のときで 243 → 257 KB。上限は 400 KiB)。
/status の rejected_requests は、要求を読めずに断った数を理由別に並べた欄です (T14.28)。
{"request_line":0,"header_too_large":0,"method":0,"no_host":0,"bad_uri":0,"body_framing":0,"total":0} の形で、
理由は上の /errors の bad_request:<reason> と同じ 6 種、total はその合計です。公開ポートには走査 (scanner) の
要求が来るので、何が来たかをこの 1 行で読むためのものです。エラー (5xx) ではないので errors /
errors_by_cause には混ぜていません。数えるのは断る経路だけで、通した要求は原子を 1 つも触りません。
誰がいつ送ってきたかは /errors の個票 (cause が bad_request:<reason>) で読めます。
この 2 つを足すときに応答が 2 か所だけ変わりました: 壊れた要求行には今までは何も返さずに閉じていましたが
400 Bad Request を返してから閉じます (返した状態コードを個票に正しく書くため)、
Content-Length と Transfer-Encoding: chunked が両方ある要求は今までは chunked として中継していましたが
400 で断ります (RFC 9112 §6.1 は中継してはならないと書いています。前段と後段で本文の切れ目が食い違う
「要求の密輸」を通さないため)。判定はどちらも既にある分岐の中なので、通る要求の費用は変わりません。
/status の hosts にはホスト (scheme://host:port、CONNECT は connect://host:port) ごとの要求数・ヒット・ミス・
バイパス・エラー・バイト数が要求数順に最大 50 件入ります (1000 ホストを超えた分は other にまとめます)。
バイト数は合計 (bytes) のほかに向き別の bytes_in / bytes_out が並びます (T14.26。bytes_in =
クライアント → オリジン = 上り、bytes_out = オリジン → クライアント = 下り)。上り主体の相手 (ログ送信) は
「利用者の回線の上り」が律速で、プロキシでもオリジンでもない — その切り分けに使います。
CONNECT は bytes == bytes_in + bytes_out ですが、forward の bytes は今までどおり応答のぶんだけなので
(欄の意味は変えていません)、要求本文のある相手では bytes_in + bytes_out の方が大きくなります。
数え直しはしていません (中継が方向ごとに持っている値と、要求本文 / 応答のバイトをそのまま渡すだけです)。
?sort=requests|errors|dns|slow でこの 50 件の切り出し方を変えられます (既定は requests = 今までどおりの要求数順。
errors はエラー件数、dns は名前解決に費やした合計 dns_ms_sum、slow は応答 (CONNECT は確立) の平均 avg_ms の
多い / 遅い順。知らない値は既定に倒します)。JSON の形も件数も変わらず、変わるのは hosts[] の並びだけです
(clients[] は要求数順のまま、/healthz は問い合わせを読みません)。要求数の上位 50 には「悪いホスト」が出てこない
のが動機で、デプロイ先の実測 (58.6 時間) ではエラー 99 件のうち 80 件 (名前解決の失敗) を抱えたホストが
1 つも上位 50 に居ませんでした。curl "http://127.0.0.1:8080/status?sort=errors" で見られます。
ホスト別の行にはさらに待ちの内訳が入ります: dns_ms_sum / dns_misses (名前解決を OS に聞いた合計時間と回数)、
connect_ms_sum (接続にかかった合計時間。名前解決のぶんは含みません)、v4_wins / v6_wins (確立した族)、
errors_by_cause ([dns, refused, unreachable, timeout, reset, tls, loop, other] の順の件数。
loop は自分の Via が付いて 508 で閉じたもの。複数の候補を並行に試して (Happy Eyeballs)
締め切りまで 1 本も確立できなかったときは timeout です — 2026-09-18 より前は、その間に 1 本だけ先に
返ってきた ECONNREFUSED などが最後のエラーとして残り、締め切りいっぱい待った接続が refused に
数えられていました。T15.0 (3))、rtt_ms ({"avg":…,"min":…,"samples":N}。
カーネルの平滑化 RTT (TCP_INFO)。標本は接続 1 本の終わりに 1 つなので timed (要求数) とは数が合いません。
1 本も閉じていなければ null) と retrans (その接続たちが再送したセグメントの通算)、
sni_mismatch (そのホスト宛ての CONNECT で、宛先のホストと覗いた SNI が食い違った本数。
T14.38。メモリだけなので再起動で 0 に戻ります。合計は /status の末尾の sni_mismatches)、
syn_retrans (そのホストへ繋ぐときに SYN を送り直した回数の合計。T14.46。確立の直後に
TCP_INFO を 1 回読んだ値で、retrans (接続の終わりに読んだ通算) と違って確立の失敗だけを数えます。
1 回で確立が約 1 秒、2 回で約 3 秒よけいにかかるので、avg_ms が飛んでいるホストはここを見てください。
メモリだけなので再起動で 0 に戻ります。合計は /status の末尾の syn_retrans_total)。
測るための費用は熱い経路に乗せていません:
名前解決の時計はキャッシュを外したときだけ読み、内訳はホスト別統計が既に取っている鍵の内側で足します
(原子操作もシステムコールも増えません。実測: forward の確保 8.03 → 8.03 回/要求、
--lite のシステムコール 5.00 → 5.00 回/要求)。dns には miss_ms_sum / miss_avg_ms (ミス 1 回の値段) と
refreshes (期限前に裏で引き直した回数) / negative_ttl_secs (失敗を覚えておく秒数) /
warm_secs (keep-warm の窓) / warm (いま warm な名前の数) /
changes (引き直しで答えの集合が変わった回数の合計) が出ます。
裏の引き直しはミスに数えません (利用者は待っていないので、misses と miss_avg_ms に混ぜると
「ミス 1 回の値段」が読めなくなる)。/metrics では sorahost_dns_lookups_total{result="refresh"} です。
さらに misses_by_kind (ミスの内訳。cold = 表にまだ答えが無い / expired = 答えは持っていたが
TTL を過ぎた / warm_stale = warm なのにミスした = 裏の引き直しが間に合っていない /
negative = 覚えている失敗の期限が切れたので引き直した。4 つの和は必ず misses と一致します) と、
裏の引き直しの様子 refresh_failures (引き直しが失敗した回数) / refresh_ms_sum /
refresh_ms_max (引き直しの getaddrinfo にかかった時間の合計と最大 ms) /
refresh_late (予定の時刻から 5 秒以上遅れて始まった引き直しの回数。引き直しは
dns-refresh スレッド 1 本が順にやるので、1 回 約 2 秒かかる名前が続くと後ろが詰まります。
要求の経路が頼んだ先回りは予定の時刻を持たないので数えません) が出ます。
末尾の warm_evicted (T16.0) は warm の枠 (同時に 32 件) が満杯で、新しく warm になる名前のために
最後の使用がいちばん古い名前を外した回数の起動からの通算です (/history の dns_warm は 5 秒ごとの瞬間値なので、
枠が埋まって押し出しが起きていたかはこれで読みます)。要求の経路の例外: 数えるのはその名前が窓の中で 2 回目に
使われ、かつ枠が満杯のときの枝だけで、既に握っている鍵の内側の原子の加算 1 つです (システムコールも確保も増えません)。
読み方: expired が主なら窓 (PROXY_DNS_WARM_SECS) の外で期限が切れている =
窓を延ばすと効く、warm_stale が出ていれば引き直しが間に合っていない = 窓ではなく
refresh_failures / refresh_late を先に見る、という順で読みます (どちらに手を入れるかは
この内訳でしか決まりません)。
clients[] にも同じ rtt_ms / retrans が出ますが、こちらはクライアント側 (利用者 → プロキシの往復) です。
bytes_in / bytes_out も同じ向き (bytes_in = その端末が上げた量) で出るので、「この端末は上りが主か下りが主か」が読めます。
/status の clients[] には接続元 IP ごとの要求数・転送量・拒否数・応答時間が要求数順に最大 50 件入り、
末尾に first_seen (初めて見た時刻。0 = この起動より前から居る) / agent (最後に見た User-Agent 1 つ。
無ければ null) / distinct_targets (宛先ホストの種類) / literal_targets (IP リテラル宛ての要求数) が付きます
(既存の欄の順は変えていません)。User-Agent を読むのは接続の最初の要求だけで、2 要求目からは旗で飛ばすので
要求ごとの費用は 0 です (--lite では読みません)。全接続元と残りの欄は /clients で見られます。
/metrics も同じ内容を sorahost_* 系列で出します。origin_connections にオリジンへの新規接続数と再利用回数、cache には各層の used_bytes / limit_bytes (現在の予算) / reserved_bytes (バラスト) /
keep_free_bytes (動的マージン) / mode (auto か fixed) と、system に直近の計測値 (メモリ総量と空き、
活性ページキャッシュ、cgroup 制限と使用量、PSI の有無、ディスク総量と空き、自プロセスの RSS) が入ります。
新しい版を置いたあといつ何を見ればよいかを 1 か所にまとめたものです。
数字の出どころと期待値は TODO.md の「再デプロイの手引き」にあります。
版はタスクの中で上げてあるので、リリースでは本体の版でタグを打つだけです (T21.6)。
scripts/crate-versions.py --task T21.3 # タスクの枝で、取り込む前に (main との分かれ目から中身が変わったクレートと本体・proxy-server)
scripts/crate-versions.py --task T21.3 --since HEAD^1 # 親が取り込んだあとに上げ忘れを見つけたとき (基準 = マージ前の main)
scripts/crate-versions.py --list # クレートごとに 今の版・中身を最後に変えたコミット・版の行を書いたコミット
scripts/crate-versions.py --check; echo "exit=$?" # 0 なら決まりに合う。本体が 0.21.3 なら v0.21.3 を打つci.yml と release.yml も同じ --check を回し、合わなければ名前と理由を出して落ちます (タグの上では、本体の版がタグと同じかも見ます)。
止める直前に scripts/collect-deployed.sh で雪像を 1 枚撮っておきます (次の版の判定の「前」になります。T17.19)。
# 起動せずに「この環境で何が読めるか」と「効いている設定」を印字して終わる
./rust-http-proxy --check; echo "exit=$?"capabilities の 9 行のうち終了コードに入る 7 行が [ok] で終了コードが 0 なら、
/profile (proc_syscall と proc_schedstat)・カーネルの RTT (tcp_info)・
CPU の絞りと PSI (cgroup_cpu / cgroup_pressure)・IPv6 (ipv6_route)・
統計ファイル (home_writable) が全部読めます (残る 2 行 resolver_ms と cgroup_cpu_path は
真偽ではないので終了コードに入りません)。
[NO] の行があると終了コードは 1 で、最後に check: N of 7 not readable (...) と出ます。
起動はできますが、その項目は /status や /history で null になります
(resolver_ms は 2 秒で答えが来なければ [--] です)。settings の一覧は source (default /
env / env_file / cli) つきなので、書いたのに効いていない設定がここで分かります。
起動したらすぐ scripts/collect-deployed.sh でもう 1 枚 (0 時間の雪像) 撮り、/status の version と起動時刻 (UTC) を TODO.md のその Phase の Tn.99 の前提に書きます (T17.19)。
# 起動ログの 2 行 (待ち受けと統計ファイル)
# rust-http-proxy 0.18.0+<commit> listening on [::]:8080 (IPv6 + IPv4) (backlog 1024, log level: INFO)
# state file ~/.rust-http-proxy.rrd (8192 KiB, converted from version 2 in 66 ms): history 720/1440/720 samples, 800 hosts, 2 clients restored
curl -i http://127.0.0.1:8080/healthz # 200 と "ok":true (503 ならどの検査が偽かが本文に出る)
curl http://127.0.0.1:8080/ # エンドポイントの案内 (この版で読める口の一覧)
curl http://127.0.0.1:8080/config > config-$(date -u +%Y%m%dT%H%M%SZ).json # そのときの設定を 1 枚残すbacklog は PROXY_LISTEN_BACKLOG の実効値です (既定は min(1024, somaxconn))。
state file の括弧が converted from version 2 in N ms なら版 2 の統計を版 3 に詰め直して引き継いだということで、
created と出たら引き継げずに作り直しています (通算の統計は消えています)。
隣の recent file ... (4096 KiB, opened): N closed connections, ... restored が前の版の個票です。
# ブラウザ: http://<proxy>/dashboard (グラフとホスト別統計) と http://<proxy>/inspect (個票の時間軸)
curl http://127.0.0.1:8080/status | python3 -m json.tool | less # dns / ipv6 / evicted_idle / recent_quantiles
curl "http://127.0.0.1:8080/dns?sort=misses" # warm と next_refresh_secs
curl "http://127.0.0.1:8080/profile?res=5" # 待ちの段階・スレッド・ロック
curl "http://127.0.0.1:8080/connections" # いま開いている接続 (tid と spins)見るのは dns.warm (keep-warm が掴んでいる名前の数。既定 (PROXY_DNS_WARM_SECS=0、T22.4) では常に 0。窓を設定して 0 なら効いていません) と
dns.misses ÷ CONNECT の本数、ipv6 の v4_first (true なら IPv6 が落ちている環境と判断済み)、
evicted_idle と rejected_overload (山が無い時間帯は 0)、recent_quantiles
(直近 1,024 本の実測の分位点。区間の補間ではありません)。
/profile の stages は CONNECT が queue / client_read / dns / connect / first_relay / relay / park、
forward が queue / client_read / origin / send / ttfb / body で、1 本の待ちがどこに消えたかが読めます。
T15.0 で足した欄 (次の判断 — 窓を伸ばすか・空回りが直ったか・確立の尾は誰のせいか — に要るもの):
| 口 | 欄 | 読み方 |
|---|---|---|
/status |
recent_quantiles.wait |
利用者が待つ時間 (queue + client_read + dns + connect)。connect は要求行を読んだ後からなので、基準線はこちら |
/status |
dns.misses_by_kind |
expired が主なら窓 (PROXY_DNS_WARM_SECS) が短い、warm_stale が出ていれば裏の引き直しが間に合っていない。隣の refresh_failures / refresh_late / refresh_ms_max を先に見ます |
/status |
kernel.cgroup_cpu |
割合で読む (nr_throttled ÷ nr_periods)。since_start はこのプロセスが始まってからの増分、path は読んでいる階層 |
/status |
memory.rings_used |
rings と同じ鍵で「いま埋まっているぶん」。rings は 0 時間でも 36.6 時間でも変わりません |
/profile |
threads_top / run_delay_us |
どの tid が回っているか (/connections の tid と同じ番号) と、走れるのに CPU に乗れなかった時間 |
/connections |
idle_secs / spins / revents / half_closed |
「回っているのか・待っているのか」。既定のままの欄は出さないので「無ければ既定値」と読みます |
/history |
key_kinds |
keys と同じ長さで、列ごとの読み方 (cumulative = 通算 / delta = 区間 / gauge / peak / buckets) |
/healthz |
checks.cpu |
直近 5 分に絞られた期間の割合。起動から 5 分に満たない間は null |
# 雪像を 1 枚取り、前回との差分と判定表つきの Markdown を 1 枚にする
scripts/collect-deployed.sh <host>:<port>
# 判定表の相手を再デプロイ直前の雪像にし、0 時間の雪像 (直後の 1 枚) も渡す (上の 1 と 2 で撮った 2 枚)
BEFORE=status/<前>-snapshot.json ZERO=status/<0 時間>-snapshot.json scripts/collect-deployed.sh <host>:<port>
curl http://127.0.0.1:8080/snapshots # プロキシ自身が 1 日 1 回残した雪像 (30 日ぶん)
curl "http://127.0.0.1:8080/daily?n=365" # 1 日 1 行の要約 (永久)
curl "http://127.0.0.1:8080/slo?days=7" # しきい (PROXY_SLO) を満たした時間の割合collect-deployed.sh は /snapshot を 1 回で取って保存し、前回の雪像があれば
snapshot-diff.py の差分 (再起動で切った平常時の前後・ホスト別・接続元別・名前解決・エラー・バースト) と、
手元から見た待ち (probe-deployed.sh) を続けて回します。保存先は既定でリポジトリの status/ で、
個票には接続元 IP と宛先が並ぶので .gitignore に入れてあり、コミットしません。
雪像の前に /status を 1 本取り、要約の RSS だけそちらの値を使います (/snapshot は 17 部・最大 4 MiB を
1 つの文字列に組むので、雪像を配ること自体が RSS を約 1.0 MB 押し上げます。ほかの通算は 1 秒差で
意味が変わらないので雪像の値のままです。T15.0 (15))。判定表の既定は CRITERIA=phase22 (T22.1。phase21 の 10 行 (/events の行は表示だけ) に、dns_slow が合計 1,000 ms 未満の窓で立っていないこと (T22.2) と keep-warm の既定を戻す条件 2 つ (stale_retries の割合、接続のエラーの接続 1 本あたり) と T22.4 の目安の 4 行を足し、平常時を「300 本と、その期間の 1 時間の本数の中央値の 3 倍の大きい方」未満で切るもの) です。CRITERIA=phase21 (T21.2。phase20 と同じ並びの 10 行で、平常時のミスを「表示だけ」(日ごとの幅と cold / expired の内訳)、conn 役の CPU/要求 を前か後の /profile が 12 時間に満たなければ「参考」、ipv6.request_probes を 0 時間の雪像から 3 時間以内の探りなら「満たした」にしたもの)・CRITERIA=phase20 (T20.1。下の phase18 と同じ並びの 10 行で、heap_used + mmap の増えから cache_memory を引き、discord.com のミス率・timeout・dns_warm の最大と warm_evicted の 3 行を「表示だけ」にしたもの)・CRITERIA=phase18
(phase17 の 8 行 = phase15 の 4 行 + T17.0a の 4 行 に、T18.2 の 2 行 = heap_used + mmap の 0 時間の雪像からの増えが 5 MB 未満・ipv6.request_probes が 0 を足した 10 行。conn 役の CPU/要求 の行には上で繋いだ -profile_res_60.json を --profile で、相手の雪像の隣にあればそれを --profile-before で渡します)・CRITERIA=phase17・CRITERIA=phase15 (T15.4 / T15.5 / T15.6 の 6 行)・CRITERIA=phase14 も今までどおり使えます。
判定表の相手は既定では直前の 1 枚です。再デプロイのあとはそれが 0 時間の雪像になるので、BEFORE=<再デプロイ直前の雪像> を渡すと判定表だけ相手がそちらになります (隣の同じ時刻の -profile_res_60.json が --profile-before。「前回との差分」とホスト別の相手は直前の 1 枚のまま)。ZERO=<0 時間の雪像> は snapshot-diff.py --zero に渡り、無ければ heap_used + mmap の行 (phase22 と phase21 では 0 回でない ipv6.request_probes の行も) は「判定できず」です。phase22・phase21・phase20・phase18 のときは保存先を --daily-snapshots にも渡すので、--from-server で取り寄せた日次の雪像のうち同じ版のものの表 (rss・heap_used・heap_free・mmap・rings_used.total・ipv6.attempts) が判定表の下に付きます。BEFORE と ZERO の相対パスはリポジトリの根からです (DIR と同じ)。取り忘れた日は
scripts/collect-deployed.sh --from-server <host>:<port> でプロキシ側の雪像から埋められます。
--full を付けると、雪像で truncated が立った部 (recent / hosts / profile) の続きを offset= で
next_offset が null になるまで追い、<UTC 時刻>-page<何枚目>-<部>.json に落とします (T15.0 (11)。
1 枚には /recent は 2,000 件中 615 件、/hosts は 1,000 件中 639 件、/profile?res=5 は 720 標本中 456 しか
入りません。T15.0 の行の形での実測で、T16.0 の欄のぶん少し減ります)。recent と hosts は T22.5 から --full が無くても追って雪像に繋ぐので
(上の段落)、--full で別ファイルに落ちるのは profile と、MAX_PAGES か FOLLOW_SECS で止めた残りだけです (続きは繋いだ部の next_offset から)。
--full --no-follow で前の --full (3 つとも別ファイル) になります。続きはどれも重い口で、重い口は同時 1 本 (上の「重い口は同時に 1 本だけ」) なので
順に引きます。1 つの部で追う枚数の上限は MAX_PAGES (既定 8)。
/recent?since=<前の雪像の取得時刻> で取らないのはわざとです: since は開いた時刻で絞るので、前の雪像より前に開いて後に閉じた長いトンネルがどちらの雪像にも入りません (それにリングは 2,000 件しか持たないので、since で窓は広がりません)。頁の間に閉じた接続で並びがずれて 2 枚に出た行は id (hosts は host) で落とします。hosts は要求数の順なので、頁の間に順位が入れ替わったホストが 1 つ出ないことはあります。
snapshot-summary.py に渡す雪像の形は変わりません (落とすのは別ファイルです)。
名前が page<何枚目>-<部> の順なのはわざとです: <部>-<何枚目> にすると
snapshot-diff.py --from-files と anonymize-snapshot.py が「<UTC 時刻>- の後ろが部の名前で始まれば
その部を 1 本ずつ取ったファイル」と見分けるので、続きの 1 枚を部そのものと取り違えます
(page2-hosts.json はどちらの道具も読み飛ばすので、--full を回した置き場に --from-files を掛けても
雪像 1 枚ぶんが混ざりません)。--full は --from-server とは併用できません (あちらは保存済みの雪像を
そのまま取り寄せるだけなので、続きを引く相手が居ません。両方付けると 1 行断って --from-server だけを行います)。
7 日ぶん溜まったら scripts/weekly-report.py が週次の 1 枚になります。
読むときの注意 (2026-09-18 に実際に判定して分かったこと):
- 判定表の「平常時」は本数で切っています (1 標本 300 本未満)。同時接続の山ではなく本数で切るので、
同時接続 32 の山が来た 1 時間を残し、同時接続 6〜8 で本数だけ多い時間を捨てることがあります。
実測では切り方を 9 通り変えると名前解決のミス率が 0.094〜0.171 に振れました。決まりどおりの 0.144 は
いちばん悪い値ではなく、本数の閾を 200 本 / 500 本にすると 0.156 / 0.171 で基準 0.15 を越えます。
切らずに全時間で読むと 0.147 (基準に対する余裕 2%、0.144 なら 4%)、同時接続で切ると 0.094 まで下がります。
判定がぎりぎりのときは切り方を変えて幅も見てください (内訳は
TODO.md§2 の「物差しの但し書き」)。 - 雪像の
droppedが[]でも欠けていないとは限りません。droppedは「部ごと落とした」の意味で、 部の中の打ち切り (1 部 256 KiB) は各部のtruncated/count/shownに出ます。2026-09-18 の雪像は/recent615/2,000・/hosts639/1,000・/profile?res=60362/1,440 が切れているのにdroppedは[]でした。 - **
/recentに残るのは「最後に閉じた N 本」**です。at(開始時刻) の最小で窓を切ると手前が抜けるので (2026-09-18 の雪像では 2 時間ぶん 85 本)、窓の左端はmin(at + secs)で取ってください。 - T15.0 で足した
/historyの 8 列は、再デプロイより前の標本では 0 です (waits/wait_ms_sum/wait_ms_max/wait_buckets/dns_warm/requests_delta/bytes_delta/active_peak)。版を上げずにレコードの余白へ足したので、前の版が書いた.rrdの レコードはそこがゼロ埋めで読み戻ります。再デプロイ直後の/historyにはその 0 が?res=5で最大 1 時間・?res=60で最大 1 日・?res=3600で最大 30 日ぶん並ぶので、tが最後の再起動 (/statusのuptime_secsから出せます) より前の標本ではこの 8 列を読まないでください (active_peak >= active_maxもそこでは成り立ちません)。waitの p50 を次の完了の定義の基準線にするときも、 見るのは再起動より後の標本だけです。scripts/snapshot-diff.pyは再起動の時刻で切った「後」の期間しか 判定に使わないので、この穴を踏みません (--criteria phase15)。
curl "http://127.0.0.1:8080/errors?n=100" # 直近のエラー (誰が・いつ・なぜ。403 も入る)
curl "http://127.0.0.1:8080/log?n=200" # 直近の warn 以上のログ
curl "http://127.0.0.1:8080/events?n=200" # 起動・再読込・IPv6 の切替・異常の検知
curl "http://127.0.0.1:8080/recent?n=200&sort=slow" # 遅かった接続から順に、段階と閉じた理由
curl "http://127.0.0.1:8080/explain?host=<name>" # 1 つの相手を 1 枚で (?client=<ip> も)/events の anomaly は自動で立った異常 (名前解決が遅い・ミスの率が高い・エラーが増えた・山が来た・
CPU が絞られ続けている・回りっ放しのトンネルがある・新しい接続元) で、
reload には .env で変えた名前と前後の値が入ります。
SIGTERM を送ったあと、ログに statistics saved to ... (N individual records appended) が出るまで待ってから
次の版を起動してください。待たずに起動すると最後の書き出しが間に合わず、
ホスト別・接続元別の通算が読み戻せません (次の起動のログが 0 hosts, 0 clients restored になります)。
再デプロイ後 24 時間の数字で TODO.md の §2 と §0 を書き直すのが、その Phase の Tn.99 (Phase 14 は T14.99、Phase 17 は T17.99、Phase 18 は T18.99) です。