お客様より先に異変に気づく
障害が小さいうちに知らせる監視とアラートを整え、安定した状態をどれだけ維持できているかを数値で示します。
Apache・NginxでWebサイト40件を管理
Apache・Nginxを使用するUbuntu Linuxホスティングサーバー上で40件のWebサイトを管理し、高い可用性と性能を維持した。
Ubuntu Linux上のApache・Nginxで40件のWebサイトの可用性と性能を維持し、顧客が運用を気にせずに済むホスティングを提供した。
地図製品を最初から運用まで支える
2年間にわたり、インフラ、データ処理、地図アプリケーションを設計・開発・支援し、ソフトウェアの提供と運用保守の両方を担当した。
2年間にわたりインフラ、データ処理、地図アプリケーションを設計・構築・支援し、開発成果の提供と運用保守を担った。
切り替えと配信ログを備えるメール機能を構築
メール送信をプラットフォームの共通機能として構築。3つのプロバイダーによるフェイルオーバー、配信Webhook、送信・配信ログ、テンプレート、キャンペーンを備え、送信手段がなければ起動を拒否する検査を設けた。
3プロバイダーのフェイルオーバー、配信Webhook、送信・配信ログ、テンプレート、キャンペーン一斉送信を備える共通メール機能を構築した。
数年後も稼働するインフラを構築
社内外のシステム向けに新たなインフラ機能を計画・実装し、数年後も最小限の変更で稼働し続ける仕組みを構築した。
社内向けと社外向けのシステムを支える、耐久性のあるインフラを計画し、構築した。数年が経過した後も、最小限の変更だけで稼働を続けた。
遅い処理をRiverジョブキューへ移行
時間のかかる処理をリクエスト経路からRiverジョブキューへ移し、15個のワーカーモジュール、8件の定期タスク、20件のpg_cronジョブにより、背後の作業が続く間も応答を返せるようにした。
遅い処理をRiverキューへ移し、15ワーカーモジュール、8定期タスク、20件のpg_cron保守ジョブでリクエスト経路を軽くした。
独自のエラー監視・トレースを構築
ペイロードの無害化、急増・再発の検知、シンボル解決、擬似ハートビートを備える独自のエラー監視とOpenTelemetryトレースを外部購入せず構築し、11画面の運用ビューから扱えるようにした。
無害化、急増検知、シンボル解決、ハートビートを備える独自のエラー監視とOpenTelemetryトレースを、11の運用画面から提供した。
異常時拒否のレート制限・不正利用対策を構築
Redisによる22個のレートリミッター、Cloudflare Turnstile、リクエストの冪等性、オリジン制限を備え、異常時は拒否する不正利用対策を構築し、呼び出し元を無条件に信頼せずボットや大量アクセスを排除した。
Redisによる22レートリミッター、Cloudflare Turnstile、リクエストの冪等性、オリジン制限を備える、異常時拒否の不正利用対策を構築した。
macOSアプリのイベントパイプラインに上限を設定
毎秒41 MBの増加と、36 GB端末で111 GBの圧縮ページを記録したmacOSの障害を受け、イベントバッファとログ出力に上限を設定。記録された全テスト実行では、コアのログ行が610,996から1,411へ減った。
障害記録には全テスト実行の比較があり、コアのログ行が610,996から1,411へ、取得ログ量が63 MBから388 KBへ減った。記録されたテスト実行の測定であって、本番トラフィックのベンチマークや修正後メモリーの実測ではない。ログ変更だけでは別の終了タイムアウトを直せず、それには別の修正が必要だった。
6収集処理が省略した入力を明示
6つのレポート収集処理が、未読ファイル、未導入の検査、認識できなかったjournal行など、読み取れなかった入力範囲を明示するよう変更。収集不能と正常なホストが同じページになると確認し、116件の実測サンプルから閾値を定めた。
数値ページに結果と死角が並ぶようになった。自己測定は品質ゲートではなく、時間上限もないため2倍になっても見えるだけで止めないと明記した。上限には実ホストの基準が必要で、今回意図的に創作しなかった。既存のしきい値は日平均に適用されるため、1分間のピークが平均に埋もれることがある。