Conversation

Notices

1. Embed this notice
   HyoYoshikawa (hyoyoshikawa@toot.blue)'s status on Monday, 13-Feb-2023 11:05:51 JST HyoYoshikawa

   • かき@GNUsocialJP

   昨日の午後、14:00頃から19:30頃まで、当サーバーのCPU負荷が90%内外に張り付くという、異常な高まりを記録しました。

   特に夕方のラッシュ時間帯でアクセスが重いことや、配信の遅延を実感された方も多かったと思います。

   その時間帯でsidekiq（配信を受け持つサービス） の遅延はほとんど発生していないこと、ネットワーク流量も小さかったこと他、諸々の数値から、ほぼ同時刻付近に回復したpawooからの集中フィードを捌くためのDB負荷だろうと理解しています。
   それに数時間を費やしたと考えるのが妥当かと思われます。（断定ではありません）

   一般的にメガサーバーの停止と復活は他のサーバーにも大きな影響を与えます。（その時間帯は投稿を控えようというのは、あまりにも微弱な影響しかありませんからそれは気になさいませんよう）

   また、ここのところ参加者の方がかなり増えていますが、昨日の状況はそれとは無関係だと思っています。蒼象のパフォーマンスにはまだ十分な余力があります。続

   • 翠明倫 repeated this.
   • Embed this notice
     HyoYoshikawa (hyoyoshikawa@toot.blue)'s status on Monday, 13-Feb-2023 11:06:54 JST HyoYoshikawa

     in reply to

     • かき@GNUsocialJP

     今後のスケールを、負荷目線で考えると夕方のピーク＋インシデント（今回のようなトピック）が重なった場合に生じる遅延やアクセスの重さ等にどこまで耐えられるか。が一つの目安になりそうです。

     AWS運用なので、ほとんど無停止でスケールを上げていくことが可能ですが、単独のスケールアップを多少行っても目覚ましい進捗が得られるのかどうかは疑問です。マストドン世界は繋がっており、メガサーバーの現状を見ていても著しい改善は難しいかなと思いますので、（特に夕刻発生するかもしれない）遅延の発生はあまりにも酷くなければご理解頂ければ幸いです。

     一方で、モデレーションの質のキープと、ある程度快適に過ごしていただくためのアクティブユーザーの閾値のほうが、負荷の限界よりも早く訪れそうです。その場合には招待制の導入など、改めて早めにご案内する予定です。よろしく引き続きご理解とご支援をお願いします。