쌓인 기록에서 찾기
무엇을 찾으세요? 날짜를 몰라도 됩니다. 제목·Key Point·요약·태그를 한꺼번에 뒤집니다.
검색 범위 2026년 8월 13일 (목) 부터 2026년 11월 1일 (일)까지 3728건
12건 · "DuckDB"조건 지우기 ×
001 06:11 ▲ 100 · 댓글 25 로컬 개발 환경용 Databricks 에뮬레이터 MiniLake 공개 Databricks API를 로컬 머신에서 에뮬레이션하는 오픈소스 도구 MiniLake를 출시했다. SQL은 DuckDB에서, Delta 테이블은 실제 파일로, 작업은 컨테이너의 spark-submit으로 실행된다. 인프라 · 데브옵스 · MiniLake Is a Local Databricks API Emulator with SQL, Delta Lake and Spark
Key Point 개발자는 실제 Databricks 코드를 작성·테스트하지만 로컬에서 가짜 API로 거치고 싶을 때가 많은데, 이제 진정한 Delta 파일과 Spark 작업을 로컬 머신에서 돌릴 수 있게 되었다.
핵심 요약
Databricks API를 로컬 머신에서 에뮬레이션하는 오픈소스 도구 MiniLake를 출시했다. SQL은 DuckDB에서, Delta 테이블은 실제 파일로, 작업은 컨테이너의 spark-submit으로 실행된다. databricks-sdk, Databricks CLI, Terraform, MCP 에이전트를 localhost:8000으로 가리켜 사용할 수 있으며 어떤 토큰도 인증된다. pip install이나 docker run으로 설치하고 초기화된 SQL 워크스페이스 UI에 접근할 수 있다. Unity Catalog은 CRUD 지원 카탈로그·스키마·테이블·볼륨을 제공하며 각 카탈로그는 자체 DuckDB 데이터베이스 파일이므로 세 부분 주소 지정이 기본으로 작동한다. 전체 요약 15문장 읽기 → 002 03:11 ▲ 242 · 댓글 27 DuckDB 2.0 LTS 출시, 클라이언트-서버와 비동기 I/O 지원 DuckDB 2.0.0 LTS '시나몬 틸'을 발표했으며, 1.5 이후 약 20,000개 커밋으로 개발된 최대 규모 기능 릴리스다. 오픈소스 · 도구 · DuckDB 2.0.0 LTS “Cinnamon Teal”
Key Point 클라이언트-서버 지원, 비동기 I/O, AI 에이전트 모드는 DuckDB 사용 환경을 크게 확장하고, 트리거와 확장 저장소는 엔터프라이즈 채택 장벽을 낮춘다.
핵심 요약
DuckDB 2.0.0 LTS '시나몬 틸'을 발표했으며, 1.5 이후 약 20,000개 커밋으로 개발된 최대 규모 기능 릴리스다. Quack 프로토콜을 완성해 전통적인 클라이언트-서버 구조를 지원하고, 새로운 CONNECT 문으로 원격 데이터베이스에 한 번에 연결할 수 있다. 비동기 I/O를 도입해 Parquet과 CSV 파일 읽기 시 여러 요청을 병렬로 처리해 S3 같은 객체 스토리지에서의 쿼리 속도를 크게 향상시킨다. 전체 요약 13문장 읽기 → 003 09:11 ▲ 124 · 댓글 43 DuckDB 2.0이 2~3배 빨라진 이유 DuckDB 2.0 알파가 출시됐으며, S3 쿼리, 깊은 계층 구조 처리, JSON 저장소에서 주요 성능 향상을 달성했다. 인프라 · 데브옵스 · Why DuckDB 2.0 is faster
Key Point S3 쿼리가 2~3배 빨라지고 깊은 계층 구조 처리는 100배 이상 빨라지는 등 실제 데이터 파이프라인의 병목을 직접 해결하는 기능들이 핵심이다.
핵심 요약
DuckDB 2.0 알파가 출시됐으며, S3 쿼리, 깊은 계층 구조 처리, JSON 저장소에서 주요 성능 향상을 달성했다. 비동기 I/O 기능: 별도 스레드 풀이 데이터를 미리 다운로드하면서 CPU와 네트워크를 동시에 활용하며, S3에서 2.2GB 파일 읽기가 18.8초에서 7.7초로 단축됐다. read_ahead_depth 설정(기본값 -1)으로 자동 활성화되며, 이전 동작으로 돌리려면 0으로 설정하면 된다. 전체 요약 12문장 읽기 → 004 09:11 ▲ 106 · 댓글 14 DuckDB, SQL 기반 레이크하우스 포맷 DuckLake 공개 DuckDB가 SQL과 Parquet 기반의 오픈소스 레이크하우스 포맷 DuckLake를 확장으로 공개했다. 인프라 · 데브옵스 · DuckDB Ducklake
Key Point DuckDB가 Iceberg·Delta Lake 같은 경쟁 포맷들과 달리 SQL 우선 철학으로 레이크하우스를 구축하는 새로운 선택지를 제시했으며, 타임 트래블·스키마 진화 같은 현대적 기능을 표준 SQL로 단순하게 구현했다.
핵심 요약
DuckDB가 SQL과 Parquet 기반의 오픈소스 레이크하우스 포맷 DuckLake를 확장으로 공개했다. DuckLake는 메타데이터를 카탈로그 데이터베이스에, 데이터를 Parquet 파일로 저장하며, DuckLake 확장을 통해 DuckDB에서 직접 읽고 쓸 수 있다. INSTALL 명령어로 설치하고 ATTACH 문법으로 데이터베이스를 연결한 후 표준 SQL로 테이블 생성·수정·쿼리가 가능하다. 전체 요약 6문장 읽기 → 005 18:30 당일 +176 온톨로지 변경을 증명으로 검증하는 오픈소스 도구 프로덕션 온톨로지 변경을 계획·적용·롤백할 수 있으며, 영향 범위 보고서와 감사자가 검증 가능한 증명을 제공하는 Rust 기반 도구다. 오픈소스 · 도구 · fabio-rovai/open-ontologies · Rust
Key Point 온톨로지 변경의 모든 결과를 사전에 확인하고, 누구나 검증할 수 있는 증명을 함께 제공함으로써 프로덕션 환경에서의 신뢰성 문제를 근본적으로 해결하는 접근 방식이다.
핵심 요약
프로덕션 온톨로지 변경을 계획·적용·롤백할 수 있으며, 영향 범위 보고서와 감사자가 검증 가능한 증명을 제공하는 Rust 기반 도구다. 한 줄의 삼중항(triple) 변경이 901개의 새로운 결과를 만드는 경우, 텍스트 diff로는 볼 수 없는 의미론적 차이를 드러내는 형태 diff(shape diff) 보고서를 생성한다. 도구가 생성한 증명 파일(asserted.tsv, derivations.tsv)은 Lean 4 검증기로 검수할 수 있으며, 검증 명령어 oo-cert는 JVM 없이 독립적으로 실행 가능하다. 전체 요약 12문장 읽기 → 006 18:33 ▲ 459 · 댓글 101 Polars 2.0 출시, SQL 지원 강화하고 스트리밍 엔진 기본화 Polars 2.0이 출시됐으며, 스트리밍 엔진을 기본값으로 설정해 메모리와 성능을 크게 개선했다. 오픈소스 · 도구 · Polars 2.0
Key Point SQL 엔진 표준화와 메모리 초과 상황 대응이라는 데이터 분석 도구의 핵심 문제를 해결한 메이저 업데이트로, 스트리밍과 OOC 기본화로 많은 사용자가 즉시 성능 향상을 체험할 것이다.
핵심 요약
Polars 2.0이 출시됐으며, 스트리밍 엔진을 기본값으로 설정해 메모리와 성능을 크게 개선했다. SQL을 1급 지원 대상으로 승격시켰으며, 쿼리 재정렬과 공통-부분계획 제거, 다이나믹 프레디케이트/블룸 필터 등 옵티마이저 개선을 통해 성능을 강화했다. TPC-H와 TPC-DS 벤치마크에서 Polars SQL이 DuckDB 1.5.6, DuckDB 2.0 알파, DataFusion 54.0.0을 비교한 결과 16 vCPU와 192 vCPU 환경에서 대부분의 쿼리에서 가장 빠른 성능을 보였다. 전체 요약 11문장 읽기 → 007 21:11 당일 +124 Neuro-sama 같은 AI 캐릭터를 직접 만드는 오픈소스 프로젝트 AIRI Neuro-sama 같은 자체호스팅 가능한 AI 동반자를 만드는 오픈소스 프로젝트로, TypeScript 기반 웹 기술과 네이티브 기술을 함께 사용한다. AI · 머신러닝 · moeru-ai/airi · TypeScript
Key Point Neuro-sama 같은 AI 가상 캐릭터를 누구나 직접 구축할 수 있는 완전한 오픈소스 플랫폼이 나왔고, 게임 플레이부터 음성 채팅까지 놀라운 수준의 기능을 갖추고 있다.
핵심 요약
Neuro-sama 같은 자체호스팅 가능한 AI 동반자를 만드는 오픈소스 프로젝트로, TypeScript 기반 웹 기술과 네이티브 기술을 함께 사용한다. 브라우저, macOS, Windows 데스크톱, 모바일 PWA 등 다양한 플랫폼에서 실시간 음성 채팅이 가능하며, Minecraft, Factorio, Kerbal Space Program 등 여러 게임을 플레이할 수 있다. WebGPU, WebAssembly, Web Workers 등 웹 기술로 그래픽과 레이아웃을 처리하면서도, NVIDIA CUDA와 Apple Metal을 통한 네이티브 추론으로 성능을 확보하는 하이브리드 아키텍처를 채택했다. 전체 요약 12문장 읽기 → 008 03:10 당일 +108 브라우저에서 GIS 분석, GeoLibre 오픈소스 공개 지리공간 데이터 시각화·분석을 위한 클라우드 네이티브 GIS 플랫폼 GeoLibre를 공개했다. 오픈소스 · 도구 · opengeos/GeoLibre · TypeScript
Key Point 지리공간 데이터 분석이 필요한 개발자와 연구자에게 설치 없이 바로 사용 가능한 오픈소스 도구가 생겼으며, 브라우저 기반 처리로 데이터 프라이버시를 보장한다.
핵심 요약
지리공간 데이터 시각화·분석을 위한 클라우드 네이티브 GIS 플랫폼 GeoLibre를 공개했다. 웹 브라우저, 데스크톱, 모바일, Jupyter 노트북 등 모든 환경에서 동일한 인터페이스로 실행된다. 1,000개 이상의 지리처리 도구를 WebAssembly로 브라우저에서 직접 실행하며, 서버 설치 없이 데이터가 로컬에 남는다. 전체 요약 5문장 읽기 → 009 08:25 ▲ 233 · 댓글 96 MinIO 대체 도구들로 로컬 S3 구성하기 MinIO 회사가 2025년 말 서비스를 중단해 데모와 검증 파이프라인에 문제가 생겼다. 인프라 · 데브옵스 · Alternatives to MinIO for single-node local S3
Key Point MinIO 단종으로 인해 로컬 S3 테스트 인프라가 필요한 개발자들이 즉시 대안을 찾아야 하기 때문입니다.
핵심 요약
MinIO 회사가 2025년 말 서비스를 중단해 데모와 검증 파이프라인에 문제가 생겼다. 로컬 S3 에뮬레이션 용도로 사용할 수 있는 대체 도구들을 비교 검토했다. S3Proxy(Apache 2.0, 5M+ 풀), RustFS(1.0.0-alpha.79, GUI 지원), SeaweedFS(4.06, 5M+ 풀) 등이 Docker 이미지와 S3 호환성을 제공한다. 전체 요약 6문장 읽기 → 010 15:10 ▲ 117 · 댓글 66 팬더스를 넘어서, 중급 데이터 분석 도구의 시대 팬더스는 수십 GB 규모 데이터를 처리할 때 메모리 부족과 느린 성능 문제에 직면해 스파크나 스노우플레이크 같은 고가의 분산 시스템으로 넘어가게 한다. 기타 · Pandas Should Go Extinct
Key Point 대부분의 데이터 분석가가 팬더스 성능 문제로 불필요한 복잡성의 분산 시스템으로 이동하는 악순환에서 벗어날 수 있는 실질적 대안을 제시합니다.
핵심 요약
팬더스는 수십 GB 규모 데이터를 처리할 때 메모리 부족과 느린 성능 문제에 직면해 스파크나 스노우플레이크 같은 고가의 분산 시스템으로 넘어가게 한다. 아마존이 공개한 레드시프트 분석에 따르면 고객 데이터의 94.68%는 100GB 미만, 쿼리의 86.9%는 80GB 이하 데이터를 다루기 때문에 대부분의 실무 환경은 진정한 빅데이터 솔루션이 필요하지 않다. 폴라스와 덕디비 같은 단일 머신 기반 고성능 도구가 100GB 전후 '중급 데이터' 영역을 효율적으로 채워 팬더스와 분산 시스템 사이의 격차를 해소한다. 전체 요약 4문장 읽기 → 011 09:10 ▲ 139 · 댓글 25 Planet Labs, 위성 궤도 데이터 공개 공급 Planet Labs는 Ephemerides 서비스를 통해 자사의 위성 97개 궤도 위치 데이터를 공개했다. 하드웨어 · 시스템 · Planet Labs' open satellite feed
Key Point 상용 위성 회사가 실시간 궤도 데이터를 공개함으로써 개발자들이 위성 추적, 영상 획득 시간대 예측 등에 자유롭게 활용할 수 있는 기반이 마련되었다.
핵심 요약
Planet Labs는 Ephemerides 서비스를 통해 자사의 위성 97개 궤도 위치 데이터를 공개했다. TLE(Two-Line Element) 형식으로 제공되는 이 데이터는 wget으로 다운로드 가능하다. NORAD ID를 이용해 GCAT 위성 카탈로그와 연계해 SkySat, Flock, Pelican 위성의 상세 정보를 조회할 수 있다. 전체 요약 5문장 읽기 → 012 21:11 당일 +143 20MB 데이터베이스 클라이언트 DBX, 90개 이상 DB 지원 Rust로 만든 가볍고 빠른 크로스플랫폼 데이터베이스 클라이언트 DBX가 MySQL, PostgreSQL, SQLite, Redis, MongoDB, DuckDB 등 90개 이상의 데이터베이스를 지원한다. 인프라 · 데브옵스 · t8y2/dbx · Rust
Key Point Java 의존성 없이 초경량 설치 용량으로 90개 이상 데이터베이스를 한 번에 관리할 수 있으며, AI 쿼리 생성과 MCP 연동으로 개발 워크플로우를 통합할 수 있다.
핵심 요약
Rust로 만든 가볍고 빠른 크로스플랫폼 데이터베이스 클라이언트 DBX가 MySQL, PostgreSQL, SQLite, Redis, MongoDB, DuckDB 등 90개 이상의 데이터베이스를 지원한다. Java JRE나 Python venv 같은 런타임 의존성 없이 20MB의 단일 바이너리로 배포되며, DBeaver와 달리 별도의 환경 설정 없이 즉시 사용할 수 있다. 테이블을 선택하고 원하는 동작을 설명하면 AI가 SQL을 생성해주는 기능을 제공하며, Claude, OpenAI, Ollama 로컬 모델을 지원하고 AI 생성 SQL 실행 전 안전성 검토가 내장되어 있다. 전체 요약 5문장 읽기 → 
