낙숫물이 바위를 뚫듯이.

[AWS] VPC CNI와 Node/Pod IP 할당, Subnet IP 소비 이해하기
·
DevOps/DevOps
개요최근 Subnet IP 관련 작업을 진행하면서 AWS VPC 관점에서 IP들이 어떻게 관리되는지 살펴보았다. 이 과정에서 특히 EKS 네트워크 관점에서의 VPC CNI, 노드/파드 관점에서의 IP 할당 이슈들을 알게되어서, 오래 기억하고 실무에 활용하기 위해 글로 정리해본다!! 1. AWS 네트워크 간략 정리 (VPC, Subnet, IP)1.1. VPC와 서브넷VPC는 리전에 생성하는 논리적 네트워크 공간, 서브넷은 VPC 내부의 논리적 네트워크 공간으로, VPC CIDR 공간을 다시 일정 크기로 나눠서 점유한다. EC2, RDS와 같이 ENI(Elastic Network Interface)가 필수로 붙는 리소스들이 서브넷이라는 공간에 만들어진다.1.2. 서브넷 특징서브넷은 VPC CIDR을 나눠서..
[Istio] Mesh 밖 클라우드 서비스와의 통신, ServiceEntry
·
DevOps/DevOps
개요사내에서 진행하는 Istio Study 마지막 세션. 내 주요 업무는 클라우드 서비스와 연관되어 있기에, Istio와 클라우드 서비스를 엮어서 마지막 발표를 준비했다. 지금까지는 클러스터 내부에서 Pod 간 통신에서의 Istio/envoy를 살펴봤다면, 이번 글에서는 (클라우드 파트 업무와 엮어서) Istio 외부 즉, Mesh 밖으로 나가는 트래픽을 위주로 학습해보려고 한다. 1. Mesh의 경계는 Service Registry가 정한다.1.1. Service RegistryEnvoy는 istiod가 내려주는 설정 즉, Service Registry에 있는 목적지만 알아본다. 쿠버네티스 Service를 만들면 이 Service Registry라는 목록에 자동으로 올라간다. 그래서 cobinding..
[Istio] GW/VS/DR을 apply하면 Envoy에는 무슨 일이 생길까?
·
DevOps/DevOps
개요지난 글에서는 Service Mesh를 타는/타지 않는 경우에 대한 트래픽 흐름을 살펴보았다. Mesh를 타는 흐름 즉, Envoy를 통해 트래픽이 오갈 때 Gateway, Virtual Service, Destination Rule이 주는 영향을 직접 단계별로 살펴보자. 1. 들어가며 : K8S Architecture와 CRD(Gateway, VirtualService, DestinationRule) GW, VS, DR은 내장 리소스가 아니라 istio가 CRD(커스텀 리소스!)로 등록한 것이다. CRD를 등록하는 순간 API Server가 그 타입을 이해하게 되고, 그 뒤로는 내장 리소스(Deployment, Service 등)와 완전히 동일하게 동작한다. CRD kubectl apply 후, ..
[Istio] Service Mesh를 탈 때/타지 않을 때 요청 흐름 비교
·
DevOps/DevOps
개요이 글은 클러스터로 들어온 요청이 앱 컨테이너에 도달하기까지의 전체 경로를 탐색한다. 지난 글에서 사이드카가 어떤 원리로 주입되고 트래픽을 가로채는지 확인했다면, 이번엔 사이드카에 실제 요청이 어떻게 통과하는지를 살펴본다. 1. 환경 준비1.1. 클러스터와 istio이전 글의 k8s-lab 클러스터를 그대로 쓰되, 이번에는 클러스터 밖에서 게이트웨이로 들어가는 경로가 필요하다. 그런데 Kind에서는 이 경로가 기본적으로 막혀있다. 왜 막혀 있는지부터 살펴보자. Kind는 EKS와 달리 Docker 컨테이너가 하나의 노드 역할을 한다. Docker는 컨테이너를 내부 사설 네트워크(Bridge)에 붙이기 때문에, 노드는 172.18.0.2와 같은 브리지 안의 사설 주소를 할당 받는다. [Docker Do..
[Istio] Sidecar (Native, Ambient)
·
DevOps/DevOps
개요이 글은 Istio의 Data Plane, 그중에서도 사이드카에 집중한다. 사이드카가 어떤 원리로 앱 Pod에 주입되고, 어떻게 앱의 트래픽을 가로채 처리하는지를 실제 kind 로컬 클러스터(bobae-labs) 위에서 명령어 레벨로 확인한다. Service Mesh와 Istio의 전체 구조는 이전 글에서 다뤘고, 이 글을 단독으로 읽어도 되도록 필요한 부분만 짧게 복습하고 시작해보자!Service Mesh: 모든 서비스 간 트래픽을 프록시로 한 번 통과시켜, 통신 제어(라우팅·재시도·mTLS·telemetry)를 앱 코드 밖으로 빼내는 구조. 정책을 선언하는 Control Plane과 실제 트래픽을 처리하는 Data Plane으로 나뉜다.Istio: Control Plane은 istiod, Data..
[Istio] Service Mesh와 Istio
·
DevOps/DevOps
개요Service Mesh와 Istio에 대해 이해한다. 1. Service Mesh1.1. Service Mesh가 필요한 이유MSA 환경에서는 서비스가 수십 개로 쪼개지면서, 서비스 간 통신에 필요한 일들 (retry, timeout, 라우팅, mTLS(서비스 간 암호화) 등)을 모두 앱이 각자 코드로 떠안아야 하는 문제가 생긴다. 파편화되는 만큼 Request의 추적이 어렵고 서비스 간의 순환 호출 등의 문제가 발생해 장애 여파가 커지기도 한다. 1.2. Service Mesh를 통해 해결할 수 있는 것핵심은 단순하게 모든 서비스 간 트래픽이 프록시(Envoy)를 한 번 거치게 된다는 것이다. 트래픽이 반드시 지나야 하는 길목이 생기면, 그 길목에서 통신을 제어하고 들여다보는 일이 전부 가능해진다..
[PromQL] PromQL 사용을 위한 필수 기초 & Basic Method 이해하기
·
Monitoring/PromQL & Grafana
들어가며PromQL 작성의 어려움Alert Rule을 설정하거나 Grafana 대시보드를 만들다 보면 "이 쿼리가 정말 내가 모니터링하려는 대상을 정확하게 표현하고 있을까?"라는 고민이 들곤 했다. AI가 PromQL을 꽤 잘 작성해주기는 하지만, 결국 좋은(정확한) 쿼리를 작성하려면 무엇을 관측하려는지 명확히 정의하고, 메트릭의 특성을 이해한 뒤 적절한 함수를 조합하는 것이 중요하다고 느꼈다. 이를 위해서는 먼저 메트릭이 어떤 특성(Counter, Gauge 등)을 가지는지 이해해야 한다. 또한, 같은 메트릭이라도 관측하려는 목적에 따라 쿼리가 달라질 수 있다. ✔ 경험상 아래 세 가지가 PromQL 정확도, 가시화에 도움되었다.메트릭 타입(Metric Type): Counter, Gauge, Hist..
[K8S] Mac Mini(Ubuntu)에 kind 기반 로컬 K8S Cluster 환경 구축하기
·
DevOps/DevOps
개요Ubuntu가 설치된 Mac Mini에 kind 기반 k8s를 구축하는 과정을 소개한다. (들어가며 - Local K8S Cluster 간략 소개)로컬 K8S 도구는 kind를 선택했다. 대표적으로 kind, minikube, kubeads 등이 있는데 해당 글에서 자세히 소개하진 않겠다. [k8s docs] 나는 EKS와 동작이 가까워야 사내 인프라에 대한 학습 효과가 좋다고 판단해서 kind를 선택했다. kind는 노드를 docker 기반으로 띄운다. 1. Network 환경 구성SRE가 된 지 어느덧 1년이 지났다. 그간 K8S 지식·운영에 대해 얼마나 성장했을까 돌이켜보면 부끄럽지만 아직 한참 부족한 점이 많았다. 리더와 이 고민을 공유했을 때 가지고 계신 구형 맥미니에 Ubuntu 서버를 설..
[Redis] 운영환경에서 AWS ElastiCache(Valkey)를 사용할 때 알아야 할 지식: 기본 구조, ClusterMode, MultiAZ, 업그레이드 동작방식
·
DB/In-Memory DB
개요 최근 Redis To Valkey 업그레이드 전환을 주도하면서 실제 작업을 통해 배운 운영 환경에서의 ElastiCache 사용방법에 대해 정리한다. 1. ElastiCache 기본 구조1.1. Shard와 NodeElastiCache를 생성할 때 Cluster Mode로 생성하면, Shard, Node 구성을 선택해야 한다. Shard와 Node(Replicas Per Shard)의 역할은 각각 다음과 같다.1.1.1. Shard데이터를 여러 샤드에 나눠 저장하여 CPU, 메모리 사용량을 분산한다.각 Shard는 데이터에 대한 Slot을 나눠서 가진다.key-value Store인 ElastiCache는 각 key에 대해 Hash Slot을 할당하고, Slot Number를 기준으로 key-val..
[BackEnd] Index를 통해 DB 조회 성능 1.2만배 개선하기
·
Dev/Backend
개요 어느 날부터 리소스를 조회하는 GET 요청에 대해 적게는 20초 많게는 120초까지 조회가 오래 걸리는 현상이 생겼다. 이를 해결하기 위해 했던 작업들과 개선 결과를 정리한다. 1. 간단한 프로젝트 구조 설명사내 배포 플랫폼에 기여하며 인프라 & 개발 업무 경험을 쌓고 있다. 주업무 중 하나는 AWS 리소스 관련 CRUD 개발인데, 프레임워크는 FastAPI를 사용하고 대부분의 요청은 Celery Task를 통해 동작한다. AWS 생성과 같은 요청은 본질적으로 느리고 실패할 수 있는 작업이다. S3 버킷, Redis 클러스터, EC2 인스턴스 등 생성에 수십 초~수 분 소요되며, 특히 Redis의 경우 여러 단계를 순서대로 실행해야 하는 복잡한 워크플로우를 따라야 한다. (ex. Subnet Gr..
[Redis] Redis 운영 지식: redis-cli 명령어 정리
·
DB/In-Memory DB
개요자주 사용하는 redis-cli를 미리 정리해두고, 장애 대응이나 모니터링 상황 시에 활용하자. 1. ElastiCache Endpoints1.1 Connection Endpoints각 엔드포인트의 역할을 잘 이해하고, 특히 클러스터 모드일 때의 접근 방법을 기억하자. 필자의 상황은 클러스터 모드를 활성화하고 샤드 2, 노드 2 구성을 가진 ElastiCache Engine을 하나 준비해두었다. 이와 같이 클러스터 모드가 활성화된 엔진이라면, 위 이미지처럼 Configuration Endpoint를 주로 활용한다. 참고로, 클러스터 모드를 비활성화한 경우는 Primary Endpoint가 생성되고, 해당 엔드포인트를 활용한다. 이와 같이 Shards and nodes 섹션에서 각 노드들의 Endpoi..
[AWS] EC2 EBS와 Instance Storage, Root/Local/Ephemeral
·
DevOps/AWS
개요EC2 관련 작업을 도맡으면서 서버 운영을 위해서는 Storage 개념을 잘 이해하고 있어야 한다는 점을 알게되었다. 운영 관점에서 고려해보니 루트 볼륨, 이퍼머럴 스토리지, 부팅 디스크 등등 여러 용어도 확실히 알아야 겠다 싶어서 이번 포스팅을 통해 정리해보려 한다. 1. EC2 Storage: EBS와 Instance StoreEC2에 연결할 수 있는 스토리지는 크게 다음과 같다. 이 포스팅에서는 EBS, Instance Store를 중점적으로 알아본다. EC2 스토리지 ├── * EBS (Elastic Block Store) │ ├── 루트 볼륨 (부팅용) │ └── 추가 볼륨 (데이터용) │ ├── * Instance Store (Ephemeral / Local Storag..
cobinding
Cobinding Tech Blog
상단으로

티스토리툴바