쌓인 기록에서 찾기
무엇을 찾으세요?
날짜를 몰라도 됩니다. 제목·Key Point·요약·태그를 한꺼번에 뒤집니다.
검색 범위부터 2026년 10월 30일 (금)까지3636건
11건 · "분산시스템"조건 지우기 ×
001▲ 120 · 댓글 30결정적 동시성 프로그래밍을 위한 'Lingua Franca' 출시Lingua Franca는 다중 스레드, 분산 시스템, 시간-민감한 응용을 위한 조정 언어로, 스레드 관리, 동기화, 경쟁 조건 문제를 자동으로 해결한다.인프라 · 데브옵스 · Intuitive concurrent programming in any language
Key Point기존 동시성 프로그래밍의 경쟁 조건과 타이밍 이슈를 언어 수준에서 자동으로 제거하는 새로운 접근법으로, 임베디드·실시간·분산 시스템 개발자들의 개발 방식을 크게 단순화할 수 있다.
핵심 요약
- Lingua Franca는 다중 스레드, 분산 시스템, 시간-민감한 응용을 위한 조정 언어로, 스레드 관리, 동기화, 경쟁 조건 문제를 자동으로 해결한다.
- 결정적 동시성을 구현해 예측 가능한 동작을 보장하며, 타이밍 의미론이 언어 핵심에 내장되어 있어 복잡한 타이밍 로직 없이 시간-민감 작업을 처리할 수 있다.
- 단일 시스템에서 분산 시스템으로의 전환이 최소한의 수정만으로 가능하며, 분산 시스템 프로그래밍의 복잡성을 추상화한다.
전체 요약 6문장 읽기 →AI · 머신러닝 · Learning Self-Orchestration in Decentralized Agent Swarms
Key Point중앙 조율 없이 에이전트가 스스로 입찰로 역할을 나누고 학습하는 방식이 성능, 적응성, 견고성에서 모두 우수해 대규모 분산형 시스템 운영 방식을 바꿀 수 있다.
핵심 요약
- 기존 다중 에이전트 시스템은 고정된 조율 구조 내에서 학습하면서 개별 능력과 집단 행동의 조직화를 분리하는 문제가 있었다.
- 연구팀이 시장 기반 사후훈련(MPT) 프레임워크를 제안했으며, 이는 분산형 에이전트 군집에서 행동 정책과 자기-조율을 동시에 학습한다.
- 에이전트들은 입찰을 통해 참여 의사를 표현하고, 이것이 누가 행동하는지와 집단 결과가 어떻게 개별 학습 신호를 제공하는지를 결정한다.
전체 요약 9문장 읽기 →AI · 머신러닝 · NeMo-DCR: Bit-Exact Delta-Compressed Refit for Scalable Agentic RL at Trillion-Parameter Scale
Key Point조 개 매개변수 모델의 정책 리핏 시간을 87분에서 2~3분으로 단축하는 기술로, 대규모 에이전트형 강화학습의 실제 운영 가능성을 크게 높인다.
핵심 요약
- 에이전트형 강화학습에서 정책 업데이트 후 롤아웃 클러스터로 전송하는 1조 개 매개변수 체크포인트가 현재 87.5분이 걸린다.
- 매개변수 수정(refit) 시 BF16 학습에서 단계당 약 1%의 가중치만 변한다는 측정을 기반으로, NeMo-DCR은 변경값만 전송하면서 비트 단위로 정확히 일치하는 결과를 보장한다.
- 학습 샤드에서의 변경을 고정 아핀 매핑으로 체크포인트의 정규 좌표계로 투영하고, 잔여 변환으로 나머지를 처리하며, 수신 런타임의 기본 로더가 모든 변경을 저장소에 배치한다.
전체 요약 6문장 읽기 →인프라 · 데브옵스 · hydra-db/hydradb · Rust
Key Point클라우드 네이티브 데이터베이스 구축에서 객체 스토리지 기반 설계와 스토리지-컴퓨트 분리가 어떻게 구현되는지 보여주는 사례로, 인프라 엔지니어와 데이터베이스 설계자에게 참고할 만한 오픈소스 구현이다.
핵심 요약
- S3 호환 객체 스토리지를 기반으로 하는 분산 그래프 데이터베이스로, 저장소와 연산을 완전히 분리한 아키텍처다.
- 데이터 노드와 인덱서가 독립적으로 확장되며, 메모리와 로컬 스토리지는 일시적 상태만 유지하므로 교체나 스케일링 시 그래프 데이터를 옮길 필요가 없다.
- OpenCypher 쿼리, Neo4j 호환 Bolt 연결, HTTP JSON API를 지원하고 모든 쿼리는 단일 스냅샷에서 실행되는 일관성을 보장한다.
전체 요약 5문장 읽기 →인프라 · 데브옵스 · You can run Git on object storage if you re-make packfiles
Key PointGit을 객체 스토리지에서 효율적으로 구동하기 위해 팩파일 구조를 근본적으로 재설계한 사례로, 마이크로서비스 아키텍처와 클라우드 네이티브 환경에서 Git 기반 인프라를 구축하는 방식이 달라질 수 있음을 시사합니다.
핵심 요약
- Git 저장소를 객체 스토리지 위에서 구동하는 오픈소스 프로젝트 개발 중이며, 처음엔 파일시스템 추상화 계층을 사용했으나 대규모 저장소에서 성능 문제 발생.
- Git의 팩파일은 로컬 스토리지와 mmap을 전제로 설계돼 있어서, 네트워크 왕복 지연(최소 10ms)이 파일시스템 캐시(10ns)보다 백만 배 느린 것이 병목.
- 객체 스토리지에 최적화된 새로운 팩파일 포맷을 칼럼형 저장소로 구현했고, 클라이언트 수정 없이 Linux 커널 같은 대규모 저장소(1천1백만 개 객체)에서도 효과적으로 동작하도록 해결.
인프라 · 데브옵스 · Saving another 100TB of RAM
Key Point수십 테라바이트 규모의 메모리 최적화를 통해 확장 가능한 분산 시스템 설계에서 알고리즘 개선의 영향력을 직접 볼 수 있는 사례입니다.
핵심 요약
- Cloudflare가 로드 밸런싱 서비스인 Pingora Backend Router의 메모리 사용량을 줄이는 과정을 소개했다.
- 내부적으로 사용 중인 일관성 해싱(consistent hashing) 알고리즘이 서버 간 작업을 골고루 분배하는 원리를 설명한다.
- 해시 함수의 출력을 32비트 정수 범위로 표현한 뒤 각 서버와 작업을 이 범위에 매핑해 작업을 할당한다.
전체 요약 6문장 읽기 →오픈소스 · 도구 · temporalio/temporal · Go
Key Point분산 시스템에서 장애 대응과 재시도 로직을 자동으로 처리해야 하는 개발자라면 기존 방식보다 생산성을 크게 높일 수 있는 솔루션이다.
핵심 요약
- Temporal은 개발자가 확장 가능한 애플리케이션을 구축할 수 있게 해주는 지속 가능한 실행 플랫폼이다.
- 워크플로우라 불리는 애플리케이션 로직 단위를 복원력 있게 실행하며, 일시적 장애를 자동으로 처리하고 실패한 작업을 재시도한다.
- Uber의 Cadence에서 파생된 성숙한 기술이며, Cadence 개발자들이 설립한 Temporal Technologies에서 개발 중이다.
전체 요약 5문장 읽기 →인프라 · 데브옵스 · nats-io/nats-server · Go
Key Point클라우드·엣지 환경에서의 메시징 인프라를 구축할 때 고성능·저지연 요구사항이 있는 개발자와 아키텍트가 검토할 수 있는 선택지다.
핵심 요약
- NATS는 디지털 시스템, 서비스, 기기를 위한 고성능 메시징 시스템으로 CNCF에 속해 있다.
- 40개 이상의 클라이언트 언어를 지원하며 온프레미스, 클라우드, 엣지, 라즈베리파이에서 실행 가능하다.
- Trail of Bits가 수행한 보안 감사 보고서(2025년 4월)가 공개되었으며 Apache 2.0 라이선스를 사용한다.
전체 요약 4문장 읽기 →인프라 · 데브옵스 · Distributed Systems Classics (2017)
Key Point분산 시스템을 깊이 있게 학습하려는 개발자와 연구자가 핵심 논문 10편을 체계적으로 접근할 수 있는 로드맵을 제공합니다.
핵심 요약
- 분산 시스템 연구를 주도한 영향력 있는 논문들을 선별한 리스트입니다.
- Lamport의 논리적 시계, 비잔틴 장군 문제, 분산 스냅샷부터 합의 불가능성 증명, Paxos, Bitcoin, CRDT, Raft까지 포함됩니다.
- 각 논문은 DOI나 원문 링크와 함께 연도별로 정렬되어 1978년부터 2014년까지의 이론적 기초를 제시합니다.
인프라 · 데브옵스 · 118M Queries per Second on Neki
Key PointPlanetScale이 대규모 분산 데이터베이스의 선형 확장성을 입증함으로써 초고처리량 데이터 시스템 구축의 실현 가능성을 보여준다.
핵심 요약
- PlanetScale이 플랫폼 프리뷰 단계의 새로운 데이터베이스 Neki로 118.5백만 초당 쿼리 처리 능력을 실증했다.
- 512개 샤드와 1.22 PiB 데이터를 사용해 16분간 지속적으로 이 성능을 유지했으며, 샤드 개수 증가에 따라 처리량이 선형으로 확장되었다.
- 각 샤드마다 Postgres 주 인스턴스(r8g.16xlarge)를 두고 480개의 라우터로 관리했으며, 클라이언트 지연 시간은 p99 기준 13.95ms였다.
전체 요약 4문장 읽기 →인프라 · 데브옵스 · Neki – Sharded Postgres
Key Point단일 Postgres 머신의 한계에 도달한 대규모 워크로드가 유지보수 창 없이 진정한 Postgres 기능을 유지하면서 수평 확장할 수 있는 선택지가 생겼다.
핵심 요약
- PlanetScale이 Postgres 샤딩 솔루션 'Neki'를 플랫폼 프리뷰로 공개했다.
- 표준 Postgres 와이어 프로토콜을 사용하는 Neki 라우터를 통해 연결하면 기존 드라이버·ORM·연결 문자열이 그대로 작동하며, 각 샤드는 3개 가용 영역에 걸친 프라이머리 1개와 레플리카 2개 이상을 갖춘 완전한 Postgres 클러스터다.
- 데이터 토폴로지 JSON 설정으로 테이블을 물리 샤드에 매핑하고, 스키마 변경·버전 업그레이드·페일오버·리샤딩 등이 모두 온라인 워크플로우로 진행되어 유지보수 창이 불필요하다.
전체 요약 6문장 읽기 →