Linux・サーバー
社内初のオブザーバビリティダッシュボードを構築
社内初のオブザーバビリティダッシュボードを開発・公開し、オフィスの大型テレビでシステム性能とデータをリアルタイムに把握できるようにした。
社内初のオブザーバビリティダッシュボードでシステムをリアルタイムに可視化し、障害の検知と解決を40%迅速化した。
UbuntuでPostgre・MS SQLサーバー10台を運用
Ubuntu Linux VPS上にPostgreSQL・MS SQLサーバー10台を設計・デプロイ・保守し、性能と信頼性を維持した。
Ubuntu Linux VPSでPostgreSQL・MS SQLサーバー10台を設計・保守し、稼働率99.9%と、調整によるクエリの30%高速化を達成した。
Linuxサーバーを守る1,000件のRBACルールを作成
開発者、アプリケーションインスタンス、PostgreSQL、MS SQL、その他のLinuxサーバーに1,000件のRBACルールを実装して不正アクセスを防ぎ、データセキュリティを強化。Ansibleによる自動化として記録した。
開発者、アプリケーション、データベース、Linuxへのアクセスに、記録上1,000のRBACルールを実装。Ansible設定を文書化した。
Ubuntu Linux VPSインスタンス30台を管理
Ubuntu Linux VPSインスタンス30台を管理し、災害復旧方針の実装とネットワーク構成の最適化を行った。
検証済みの災害復旧方針と適切なネットワーク構成を備えたUbuntu Linux VPSインスタンス30台を管理し、成長を支える回復力のある基盤を整えた。
WireGuard・IPsec VPN接続8本を管理
WireGuard VPN・IPsec VPNの8接続を管理して問題に対処し、Google CloudとLinuxシステム間の安全な通信を確保した。
Google Cloud・Linux間のWireGuard・IPsec VPN接続8本を管理して問題に対処し、繰り返す接続障害を解消した。
ネットワークインフラを管理
1,000台を超えるサーバーのネットワークインフラを管理し、適切なシステム構築、セキュリティ、障害対応を行った。
1,000台以上のサーバーのネットワークインフラを管理し、確実な構築、適切なセキュリティ、迅速な問題解決を支えた。
Dockerアプリ100個のSSL/TLS証明書を自動化
Dockerアプリケーション100個のSSL/TLS証明書の作成を自動化し、Ubuntu Linuxホスト上での安全な接続を確保した。
Ubuntu Linux上のDockerアプリ100個のSSL/TLS証明書を自動化し、手動更新と期限切れによる停止を解消した。
ベアボーンサーバー100台を管理
ベアボーンサーバー100台、物理ネットワーク、IP電話システムを管理し、会社の成長を支えるインフラを維持した。
ベアボーンサーバー100台に加え、物理ネットワークとIP電話の管理を担当した。会社が成長を遂げるうえで土台となる、堅牢なインフラ基盤を提供した。
Apache・NginxでWebサイト40件を管理
Apache・Nginxを使用するUbuntu Linuxホスティングサーバー上で40件のWebサイトを管理し、高い可用性と性能を維持した。
Ubuntu Linux上のApache・Nginxで40件のWebサイトの可用性と性能を維持し、顧客が運用を気にせずに済むホスティングを提供した。
約1,000台のIPTV/OTTサーバーを24/7で支援
中国、米国、ドイツの世界各地の顧客に向け、IPTV/OTT配信プラットフォームのインフラを24/7体制で支援し、約1,000台のサーバーと顧客所有のシステムを管理した。
中国、米国、ドイツのIPTV/OTT配信基盤で、約1,000台のサーバーと顧客システムを24/7で支援した。
IPTV配信信号の連続稼働を維持
配信ネットワークとIP電話を昼夜問わず監視・保守し、供給元と顧客の間でIPTV信号の途切れない配信を維持した。
配信ネットワークとIP電話を24/7で監視・保守し、供給元と顧客間のIPTV配信を途切れさせず維持した。
リポジトリで定義するインフラ
12,065行のYAMLにわたる19本のAnsible プレイブックと34個のロールで自社インフラを構築し、すべてのプレイを冪等にして、稼働中のホストを宣言した状態へ収束させた。
リポジトリには宣言した環境の再構築に使う設定があり、誰かが覚えていたから成立していた部分が、失敗する検証へ変わった。サーバーのファイルを直接編集するより毎変更は遅く、途中まで適用される実行は最初から拒否するより悪いという、実際の費用もあった。そのため後に事前検査を置いた。意図的な交換条件として選び、維持した。
小型サーバー上の公開サービス
利用可能メモリー464 MBを設計制約として、512 MB・1コアのホストで自社の公開サービスを運用。gitホスティング、7ドメインのWebサーバー、Tor、2つの代替プロトコルサーバー、不正接続元の遮断を備え、バックアップ自動化は別の実装として扱った。
昼食より安い月額のマシンで、記録された公開サービス構成を動かし、単なる節約以上に規律で設計が良くなった。気軽に追加する余裕を失ったため、メールは意図的に載せていない。必要な余力をこのマシンは使い切っており、別ホスト待ちの導入ひな形とした。後で発見するのでなく、その判断を記録した。
3つあったが、どれも機能していなかった防御
一度も機能していなかったSSH総当たり攻撃対策を3件発見・修正。デーモンが1986番で待ち受けるのに22番を監視する遮断jail、上位の広いルールに隠されたレート制限、バイナリを解決できず遮断を一度も実行できなかったアクションを直した。
一度も働いていなかった3対策が動くようになり、故障しても正常報告を続ける類の不具合を、基盤の検査が捉えるようになった。3つとも起動初日から無効なのに、見ていた場所ではすべて正常だった。それこそが長く残った理由だった。
SSHの24設定項目を検証・堅牢化
SSHの24設定項目を、候補ファイル、統合済み設定、デーモン自身の読み戻しによる3段階で検証するよう堅牢化。読み戻しによって、稼働中のサーバーが24項目のうち2項目を黙って上書きしていたことを検出した。
SSHの状態はリポジトリの主張でなくデーモンの回答になった。その違いは仮説でなく、検査時点ですでに2項目あった。効果を見られない収束処理は安全策を検証しておらず、設定名の文字列検索は、書いたことしか証明しない。
実行ごとに侵入元の遮断を実証
堅牢化の実行ごとに、予約済みテストアドレスを遮断し、生成されたカーネルルールを読み、必ず実行する後処理で遮断を解除する一連の検証を設け、jailの故障が正常報告ではなく実行失敗になるようにした。
故障した遮断経路が正常報告を続けず、収束を失敗させるようになった。それが必要な性質だった。毎回数秒を要し、本番のファイアウォールへルールを書いて撤回する介入はある。それでも別の方法の悪さをすでに実証したため、受け入れた。
ファイアウォールルールを位置で検証
存在するルールが実際のパケットに到達されるとは限らないため、番号付きルール一覧と稼働中のパケットフィルターチェーンを読み、ファイアウォールルールを存在だけでなく位置で検証した。
パケットが実際に経験する形で検証できるようになった。最も有用だったのは検査そのものより、それ以前の報告について明らかになったことだった。すべてのツールが1年間正しくレート制限を表示していても、重要な唯一の問いを誰も尋ねていなかった。
復元方法を明示したバックアップ自動化
resticのバックアップを、保持期間、整合性検査、毎月の復元テストとともに自動化し、ストレージの有効化と実環境での復元検証を別の運用手順として記録した。
リポジトリにはバックアップと復元テストの実装があり、有効化の前提条件も記録されている。2026-10-27付の実装記録では、リポジトリ未設定のためタイマーは無効で、実環境での復元完了も記録されていない。この日付付きの証拠は自動化の仕事を裏づけるが、現在の稼働状態、災害復旧の成功、復旧時間の約束を示すものではない。
デッドマンズスイッチによるホスト監視を構築
メモリーとディスクが正常な間だけ通知を送るデッドマンズスイッチ監視を構築し、ホストの悪化を通知の停止で知らせるようにした。また、正しく測っていた「available」を「free」と記す変数名を6件発見。464 MBのホストでは両者に1桁の差があった。
期待した信号が届かなければ警報を出す仕組みを設け、誤解を招く変数名も修正した。信号の受信は、スクリプトが動作し、利用可能メモリーと空きディスク容量が設定した閾値の条件を満たしたことを確認する。ホスト全体の健全性や、サイトが配信できていることを証明するものではない。
Ansibleチェックモードを実態に即した検証に
Ansibleのcommandモジュールが--checkでコマンドを省略しながら成功を返すため、ホストから得ていない値で判断していた6個の検査を修正し、プラットフォーム全体のチェックモードが実態を伝えるようにした。
試行は測るか、測らなかったと言うかになり、以前の第3の状態はなくなった。同時に開発指針へ、チェックモードは嘘をつかず、見えない検査はそれを知らせ、見えないことから判定を推定してはならないと記した。
全ユニットのsystemdサンドボックス露出を低減
この基盤が導入するすべてのユニットのsystemdサンドボックスの露出度を低減。デッドマンズスイッチのサービスを9.6 UNSAFEから1.5へ、インターネット公開のgitホスティングを8.3 EXPOSEDから1.5へ改善し、3つのユニットテンプレートで黙って無視されていた設定名の誤記を受け、収束時の構文検査を加えた。
必要な権限だけで各ユニットが動き、数値は主張でなく実測となった。誤記で制御が静かに欠ける不具合が、実行失敗になった。測定の限界も隣に記録し、次の読み手が緑の表示を過信しないようにした。
読み取り専用のホストレポートロールを7個構築
事実、アクセス、git、指標、トラフィック、セキュリティ、プロバイダー資産を、稼働ホストからMarkdownにまとめる7個の読み取り専用レポートロールを構築し、実行で測定していない数値は出力しない規則を設けた。
必要に応じリポジトリから環境を説明でき、無効な安全策2件、未宣言ポート、最後に回収した時点までしかトラフィックの保管がないことを発見した。最後の限界には、回収の間にローテーションで失い、どこにも存在しない1サイトの16日分という具体的な損失も記した。
自社サーバーでコードを管理
Web管理画面を持たず、初期状態で非公開のSoft Serveによる自社gitホスティングを導入。SSHポートを踏み台ホストの背後のループバックに限定し、入口のページを手作業の複製ではなく主サイトのビルド成果物にした。
自社ハードウェアでコードを保持し、入口も測定でしか見えないずれを生まず、主サイトの全検査を引き継ぐようになった。差をつけることは可能だが、今後は明示して記す必要がある。
PodmanとQuadletでコンテナを運用
Dockerの既定のブリッジネットワークでのポート公開がUFWルールを迂回する場合があるため、systemd配下のPodman・Quadletでコンテナ基盤を構築。デプロイにはrootではなく、固定コマンド1つを使う非特権ユーザーを用いた。
既存の信頼済み管理機構の下、宣言済みファイアウォールの背後で動き、通常のリリースはrootシェルを使わず、実行範囲を限定したコマンド1つで行う。次の人は読む記事すべてから標準を勧められるため、標準に逆らう選択以上に、その理由を記したことが重要だった。
すべての運用秘密情報をホストごとに分離
2ホストで1つのデッドマンズスイッチを共有すると2つのスイッチより監視能力が下がり、バックアップのパスフレーズ共有では、リポジトリが別々でも、そのパスフレーズを入手し、両リポジトリの暗号化データと鍵ファイルを読める相手が2ホストのバックアップを復号できることを確認し、ホストごとの運用秘密情報4つを分離した。
仕組み上ホストごとの秘密情報となり、共有による2つの故障形態を次の編集者が読む場所に残した。空欄は、接続の仕組みはあるが値がないという、キー欠落とは違う有用な情報であり、維持する意味があった。
gitホスティングCIを試し2不具合を発見
gitホスティング側のCIフックを予行実行し、ファイルを読むだけでは到達できない2件の不具合を発見。解決不能な引数を入力へ渡すフォールバックと、検査先に引き継がれ19テストを失敗させるgit自身の環境変数を修正した。
両経路が動き、実際のpushが遭う前に2件を直した。ただし予行は模擬であり、1種類のpushを証明するだけで、本番が見る強制更新やブランチ削除などは含まないという限界を残した。
読みやすいTor onionミラーを公開
engineerで始まる読みやすいTor onionアドレスでサイトのミラーを公開。鍵はホスト外で生成し、このリポジトリにもノートパソコンにも置かず、4つの入口のうち計測しない唯一の入口にした。
1ビルドへの4入口のうち、これだけは計測しない。Geminiは要求、Gopherは接続を日別に、アドレス・パスなしで数えるが、onionにはカウンターも追加フラグもない。このサイトはその読者を意図的に数えず、その見えなさを報告不足ではなく方針の代償として受け入れている。