私たちが出荷した IP 単位の制御は、すべてヘッダー 1 つで回避できた
私たちのアカウントロックアウトのカウンターは、ログイン失敗を 5 回までに制限していました。レートリミッターは、悪質なクライアントを抑え込んでいました。どちらもクライアントの IP アドレスをキーにしていました。キーにするなら当然それでしょう。そしてどちらも完全に回避可能で、その回避方法は、自分で設定できる HTTP ヘッダー 1 つでした。
理由はこうです。アプリがリバースプロキシの背後で動いているとき(私たちのアプリは Kubernetes 上の nginx の背後で動いています)、アプリから見える TCP 接続はユーザーから来たものではありません。プロキシから来たものです。どのリクエストも、ソケットのピアアドレスは同じ、つまりイングレスです。そのため本当のクライアント IP はヘッダーで運ぶ必要があり、それが X-Forwarded-For です。プロキシがこれを設定し、アプリがそれを読みます。ASP.NET Core にはまさにこのためのミドルウェアがあります。X-Forwarded-For を読み取り、接続のリモート IP をそれに合わせて書き換えるので、レートリミッターを含むコードの残りの部分には本当のクライアントが見えるようになります。
問題は、X-Forwarded-For がただのヘッダーにすぎないことです。誰でも送れます。アプリがそれを無条件に信頼していれば(私たちのアプリはどんな送信元からでもそれを信頼していました)、その値は攻撃者が制御できることになります。だから攻撃は巧妙なものではなく、たった 1 行です。
curl -H "X-Forwarded-For: 10.0.0.1" https://.../login
curl -H "X-Forwarded-For: 10.0.0.2" https://.../login
curl -H "X-Forwarded-For: 10.0.0.3" https://.../login
リクエストごとにヘッダーを変えれば、アプリは試行のたびにまったく新しいクライアントから来たと考えます。その IP をキーにしたロックアウトカウンターは、どの値についても 5 に達しません。レートリミッターのバケットは毎回まっさらです。パスワードを一日中総当たりでき、私たちの IP 単位の防御はどれも、のんきに 1 まで数えるだけです。攻撃者が設定する値をキーにした制御は、制御ではありません。
修正は簡単そうに聞こえます。自分のプロキシから来た X-Forwarded-For だけを信頼すればいい。原理的には簡単ですが、実際には厄介で、その厄介さが潜んでいるのが Kubernetes です。
単にヘッダーを読むのをやめるわけにはいきません。そうすると、すべてのリクエストがイングレスから来たように見えるので、今度は全クライアントが 1 つの IP を共有することになり、IP 単位の制御は逆方向に壊れます。悪用者がひとりいるだけで、全員がロックアウトされてしまうのです。X-Forwarded-For は読まなければなりません。ただし、リクエストが本当に信頼できるプロキシから来たときだけ、それを信じるのです。
ASP.NET の forwarded-headers ミドルウェアは、送信元によって信頼を決めます。既知のプロキシ IP のリスト、または CIDR で指定した既知のプロキシネットワークです。素朴なやり方は、イングレス Pod の IP を固定することです。AKS では、その IP は安定していません。イングレス Pod は再スケジュールされ、スケールし直され、そのたびにアドレスも入れ替わります。固定した IP はすぐに古くなり、正当なトラフィックを壊すか、古いフォールバックを残していれば穴を開け直すことになります。安定しているのは、Pod がアドレスを割り当てられるサブネットです。だから信頼するのは単一のアドレスではなく、ノードサブネットの CIDR です。正当にヘッダーを設定できるホップはすべてその範囲内にあり、範囲外のものは一切信じません。
次は数の問題です。ミドルウェアは X-Forwarded-For のリストを右から辿り、信頼できるホップを 1 つずつ剥がしていきます。信頼できるホップを剥がしたあとに残ったものが、クライアントとして扱われます。1 ホップでも辿りすぎると、自分のプロキシを踏み越えて、攻撃者が書いたヘッダー部分に足を踏み入れてしまいます。だから剥がすホップの数は、実際にヘッダーに追記するプロキシの数と正確に一致しなければなりません。私たちの経路では、それは 1 つ、nginx です。その前段にある Azure のロードバランサーはレイヤー 4 です。TCP を転送するだけで HTTP を解析せず、X-Forwarded-For のエントリも追加しません。したがって正しいフォワード上限は 1 です。デフォルト値でも、「念のため数個」でもありません。そのヘッダーに触れるプロキシが 1 つだから、1 なのです。
ノードサブネットを信頼し、ちょうど 1 ホップだけ剥がす。この組み合わせが修正のすべてです。ミドルウェアが渡してくるクライアント IP は、今では nginx が実際のソケットから書き込んだ値になりました。攻撃者が注入したエントリはその左側に並び、無視されます。そこに到達する前に辿るのをやめるからです。
ほかに応用できるのは数字そのものではなく、それらが自分たち固有のトポロジーについての数字だという点です。X-Forwarded-For はデータではなく、信頼の委任です。それを読むということは、「これを設定した誰かを信じる」と言うことです。その信頼は、リクエスト経路上の正確なホップに固定しなければなりません。広すぎても、狭すぎてもいけません。広く信頼しすぎれば偽装できます。狭く信頼しすぎれば、全クライアントがプロキシ 1 つに潰れます。しかもこの数はインフラと連動しているので、すべての前段に CDN を置いた日には 1 ホップ増えていて、昨日まで正しかったフォワード上限は 1 つ足りなくなります。修正は魔法の定数ではありません。経路上のプロキシを数え、それらだけを信頼し、経路が変わるたびに数え直す。それが修正です。
プロキシのホップを正しく数えるのは地味で、間違えやすく、それでいてレート制限にそもそも意味があるかどうかを決めます。Authagonal はその帳簿付けを代わりに引き受けるので、ロックアウトが数えるのはヘッダーではなく、クライアントです。