ArgoCD 3.x로 올린 다음 날 아침, 슬랙 #alerts 채널에 1,247개의 메시지가 쌓여 있었다.
올해 1분기에만 tj-actions/changed-files, Trivy, Nx가 연쇄로 뚫렸다. 세 건 모두 같은 벡터 — 뮤터블 태그 참조.
5월 7일 저녁 7시 20분, 버지니아 북부의 AWS 데이터센터 한 홀에서 냉각 장치 여러 대가 동시에 멈췄다. 서버 랙 온도가 임계치를 넘기자 열 보호 시스템이 EC2 인스턴스와 EBS 볼륨을 자동으로 내렸다.
빌드가 끝나지 않았는데 배포가 시작됐다. 2026년 3월 1일, 옵저버빌리티 스타트업 Firetiger의 인제스트 파이프라인에서 벌어진 일이다.
3월 31일, HCP Terraform(구 Terraform Cloud)의 레거시 무료 플랜이 공식 종료됐다. HashiCorp이 2023년 8월 BSL로 라이선스를 바꾼 데 이어, IBM이 64억 달러에 인수를 마무리한 뒤 일어난 일이다.
7월 셋째 주, GitHub Actions 워크플로우 583개가 동시에 돌았다. 빌드도 테스트도 아니었다.
OpenAI 엔지니어 한 명이 하루에 트리거하는 빌드가 평균 660회다. 1,500명이 동시에 돌리면 하루 빌드만 거의 100만 건.
우리 팀도 올해 초 Backstage를 도입했다. 서비스 카탈로그에 마이크로서비스 37개를 등록하고, 골든 패스 템플릿 3개를 만들고, 위키에 "플랫폼 엔지니어링 도입 완료" 문서를 올렸다.
보안 도구를 믿고 파이프라인에 넣었는데, 그 도구가 AWS 키를 빼돌리고 있었다면? 올해 3월에 실제로 벌어진 일이다.
올해 2월, Clerk의 온콜 엔지니어는 대시보드가 전부 녹색인 상태에서 90분짜리 장애를 겪었다. 아침 8시 11분, 429 응답률이 치솟기 시작한다.
7월 27일, Grafana Labs가 첫 AI Week를 열고 6개 AI 도구를 GA로 풀었다. Grafana Assistant Investigations, Workspace, Automations, Grafana Cloud MCP 서버, GCX, Agent Observability.
PR을 올렸더니 리뷰어가 이미 코멘트를 달아놨다. 근데 그 리뷰어가 사람이 아니다.
7월 14일 오후 12시 37분(ET), Coinbase 엔지니어가 "저위험" 설정 변경을 프로덕션 K8s 클러스터에 밀어 넣었다. 새 서비스 배포 모델 마이그레이션의 일부였고, 변경 자체는 루틴이었다.
어제(7월 20일) GitHub Code Quality가 정식 출시됐다. 프리뷰 기간 동안 10,000개 이상 기업이 써봤고, 이제부터는 활성 커미터당 월 $10에 AI 기능은 사용량 별도 과금이다.
3월 12일 오후 2시 17분, AWS 3개 리전에서 동시에 5xx 알림이 쏟아지기 시작했다. 원인은 DDoS도 아니고 코드 배포도 아니었다 — cert-manager 크론잡 하나가 Let's Encrypt에 14,000개의 인증서 발급 요청을 90초 만에 쏟아부은 게 전부였다.
지난주 슬랙에서 한 DevOps 엔지니어의 한탄을 봤다. "Copilot이 PR을 하루에 35개 쏟아내는데, 러너가 20개 동시밖에 못 돌아서 큐가 계속 밀린다.