WRITING

운영에서 내린 판단을 기록합니다.

실제로 돌아가는 시스템에서 내린 기술 판단과 그 이유를 씁니다. 모든 수치와 코드는 운영 중인 코드베이스 기준입니다.

• INCIDENT RESPONSE · TODARI OPS

  새벽 3시의 OOM을 시스템으로 되돌리기

  복구는 재부팅 한 줄이었습니다. 진짜 작업은 스왑과 경보, CloudWatch 자동 복구까지, 같은 장애가 사람 없이 끝나게 만드는 일이었습니다.

  읽기 ↗

• EXTERNAL API AT SCALE · FORCLETTER

  토큰 4,800개의 수명주기

  토큰 값이 아니라 상태가 진실입니다. 외부 장애가 사용자의 의도를 덮어쓰지 못하게 만든 상태 머신과 서킷 브레이커 이야기.

  읽기 ↗

• ZERO-DOWNTIME OPS · FORCLETTER

  단일 EC2에서 blue-green 무중단 배포 직접 만들기

  실패한 배포의 기본값을 무해로 만드는 헬스체크 게이트, Nginx upstream 스위치, 태그 기반 롤백으로 구성했습니다.

  읽기 ↗

• DATA AT SCALE · FORCLETTER

  5,000만 행 시계열을 일상 조회가 가능한 상태로 유지하기

  계정 4,800여 개의 메트릭이 5,000만 행으로 자라는 동안 스키마와 인덱스, JSON 컬럼 백필에서 내린 판단들을 정리했습니다.

  읽기 ↗

• REALTIME SYNC · 메트로놈들

  떨어져 있는 기기들의 박자를 하나로 맞추기

  시계 세 개와 네트워크 지연 위에서 같은 클릭을 재생하기. RTT 중앙값으로 오프셋을 추정하고 Web Audio에 50ms 앞서 예약합니다.

  읽기 ↗