AWS 기술 블로그
백패커의 Amazon EKS 운영 최적화 여정 2부: 운영 심화 및 장애 대응 사례
백패커는 국내 최대 핸드메이드 마켓 플레이스인 아이디어스와 크라우드 펀딩 플랫폼 텀블벅를 운영하고 있습니다. 2022년 백패커는 지속적으로 성장 중인 서비스를 안정적이고 유연하게 운영하기 위하여 안정성, 확장성, 보안성, 비용절감, MSA 환경에 보다 친화적인 컨테이너 환경을 제공하는 Amazon EKS를 도입하여 현재까지 사용자에게 안정적으로 서비스를 제공하고 있습니다. 지난 블로그 <백패커의 Amazon EKS 운영 최적화 여정 1부: 운영 핵심 요소 […]
AWS가 제공하는 클라우드 기반의 양자 컴퓨팅 서비스, 아마존 브라켓 -1
양자 컴퓨팅은 아직 초기 단계에 있지만, 잠재적인 혁신 가능성으로 인해 많은 기업과 연구 기관의 관심이 집중되고 있습니다. AWS는 이러한 시장의 요구에 부응하기 위해 포괄적인 양자 컴퓨팅 포트폴리오를 구축하고 있으며, 고객들이 양자 컴퓨팅을 쉽게 이해하고 활용할 수 있도록 다양한 솔루션을 제공합니다. 이번 블로그 시리즈에서는 본 블로그를 포함하여 3 회에 걸쳐 AWS에서 제공하는 클라우드 기반의 양자 컴퓨팅 […]
백패커의 Amazon EKS 운영 최적화 여정 1부: 운영 핵심 요소 최적화
백패커는 국내 최대 핸드메이드 마켓 플레이스인 아이디어스와 크라우드 펀딩 플랫폼, 텀블벅을 운영하고 있습니다. 2022년, 백패커는 지속적으로 성장 중인 서비스를 안정적이고 유연하게 운영하기 위하여 안정성, 확장성, 보안성, 비용절감, MSA 환경에 보다 친화적인 컨테이너 환경을 제공하는 Amazon EKS를 도입하여 현재까지 사용자에게 안정적으로 서비스를 제공하고 있습니다. 특히 아이디어스는 한국 서비스에서 글로벌 서비스로 확장되면서 인프라 서비스의 유연성이 점점 더 […]
Amazon OpenSearch Service 의 LTR 플러그인을 활용한 검색 품질 개선
개요 Amazon OpenSearch Service는 BM25(Best Match 25)라는 확률론적 순위 알고리즘을 사용하여 문서와 검색 키워드간 관련성 점수를 계산합니다. 문서에 고유 키워드가 더 자주 나타난다면 BM25 알고리즘은 해당 문서에 더 높은 점수를 부여합니다. 이는 검색 서비스에서 사용하는 인기 있는 알고리즘으로 사용자의 검색 의도에 맞게 키워드의 가중치를 조정하여 결과를 정렬합니다. 하지만, 이 알고리즘은 CTR(Click-through rate)과 같은 사용자의 행위는 […]
AWS DataZone에서 OpenLineage 기반의 Airflow 데이터 계보 그리기
배경 Airflow는 데이터 마트(Data Mart)를 포함한 데이터 파이프라인 구축 및 관리에서 매우 널리 사용되는 도구입니다. 이러한 Airflow에서 데이터 계보가 중요한 이유는 데이터의 출처와 변환 과정을 명확히 추적할 수 있어 데이터의 신뢰성을 보장하고, 문제 발생 시 원인을 빠르게 파악할 수 있기 때문입니다. 또한, 데이터 계보는 규제 준수와 감사 요구사항을 충족시키는 데 도움을 주며, 데이터 파이프라인의 변경이 […]
AWS Lambda와 PyIceberg 로 Amazon S3 Tables 시작하기
2024년 AWS re:Invent에서 Amazon S3 Tables가 새롭게 공개되었습니다. S3 Tables는 Amazon S3에 Apache Iceberg 형식의 테이블을 관리할 수 있는 완전 관리형 기능으로, 데이터 레이크 테이블 관리의 복잡성을 크게 줄여줍니다. Iceberg를 통해 S3에 저장된 데이터를 마치 데이터베이스 테이블처럼 다룰 수 있으며, Athena, EMR(Spark), Redshift, Glue 등 다양한 분석 엔진과 통합됩니다. 특히 S3 Tables를 활용하면 자체 관리하는 […]
디프로모션의 DynamoDB, zero-ETL, ElastiCache Serverless 도입기
서비스의 간단한 소개 및 특징 브랜드의 중요한 순간을 함께 만들어가는 파트너. 디프로모션은 누구나 쉽고 빠르게 디지털 캠페인과 프로모션을 만들 수 있도록 돕는 서비스입니다. 직관적인 온라인 디자인 에디터를 통해 룰렛, 스크래치, 틀린그림찾기, 퀴즈, 래플 등 다양한 유형의 이벤트를 손쉽게 생성할 수 있으며, 당첨자 선정과 리워드 지급까지 하나의 플랫폼에서 관리하여 브랜드가 목표로 하는 마케팅 결과를 효과적으로 달성할 […]
토스증권의 Nasdaq Smart Options 실시간 제공 사례
들어가며 Viva Republica의 모바일 금융 플랫폼 ‘토스’는 2015년 간편송금 서비스를 시작으로 누구에게나 평등한 금융을 선보이고 있습니다. 토스는 소비자의 관점에서 더 좋은 가치를 담은 서비스를 제공하겠다는 신념 아래 은행, 증권, 결제, 통신 등 다양한 영역에서 서비스를 선보이며 성장해 왔습니다. 그 결과 2024년 기준 월간 활성 이용자(MAU) 수 2,480만 명을 돌파하며 대한민국 대표 핀테크 플랫폼으로 자리매김했습니다. 2025년 […]
RDS PostgreSQL 트랜잭션 ID 랩어라운드 방지를 위한 autovacuum 모니터링에 postgres_get_av_diag() 사용하기
이 글은 AWS Database Blog에 게시된 Prevent transaction ID wraparound by using postgres_get_av_diag() for monitoring autovacuum by Naga Appani을 한국어 번역 및 편집 하였습니다. Amazon RDS for PostgreSQL 데이터베이스로 구동되는 대규모 트래픽 애플리케이션을 관리하고 있다고 가정해봅시다. 모든 것이 순조롭다가 갑자기 사용자들이 트랜잭션을 수행할 수 없다고 보고하고, 모니터링 도구에서 경고가 쏟아지기 시작합니다. 로그를 검토해보니 문제의 원인을 발견했습니다: autovacuum이 지연되어 성능 문제가 […]
Amazon DataZone에서 Custom Asset Type을 활용하여 외부 자산(Tableau) 통합 및 데이터 계보 관리하기
배경 데이터 중심 조직은 AWS 내 서비스와 Tableau, MicroStrategy 같은 외부 BI 도구를 함께 활용하는 하이브리드 환경에서 운영되는 경우가 많습니다. 이러한 환경에서 조직들은 다음과 같은 니즈를 가지고 있습니다. 통합 데이터 자산 카탈로그 : Tableau 대시보드와 같은 외부 자산도 함께 등록하여 모든 데이터 자산을 한 곳에서 검색 및 관리 End-to-End 데이터 계보(Lineage) : Tableau 대시보드가 어떤 […]