쌓인 기록에서 찾기
무엇을 찾으세요?
날짜를 몰라도 됩니다. 제목·Key Point·요약·태그를 한꺼번에 뒤집니다.
검색 범위부터 2026년 10월 30일 (금)까지3636건
16건 · "음성 생성"조건 지우기 ×
001새 버전올라마 0.40.11, 음성 생성과 의사결정 AI 모델 추가ollama run 명령어로 텍스트나 채팅 모델의 응답을 macOS에서 음성으로 변환해 재생할 수 있게 되었다.AI · 머신러닝 · ollama/ollama@v0.40.11

Key Point로컬 LLM 실행 플랫폼 올라마가 음성 출력 기능과 구조화된 의사결정 모델을 갖추면서 실무 적용 가능성이 크게 넓어진다.
핵심 요약
- ollama run 명령어로 텍스트나 채팅 모델의 응답을 macOS에서 음성으로 변환해 재생할 수 있게 되었다.
- OpenAI 호환 /v1/audio/speech 엔드포인트를 통해 애플리케이션이 생성되는 오디오를 스트리밍으로 받을 수 있다.
- d3 의사결정 모델이 추가되어 텍스트, 구조화된 상태, 이미지를 입력받아 분류·yes/no 판정·확률 기반 채점을 수행한다.
전체 요약 5문장 읽기 → 002▲ 15 · 댓글 2StyleStream 2.0, 음성 스타일 변환 속도 2배 높이고 텍스트 제어 추가StyleStream 2.0은 음성의 음색, 억양, 감정을 대상 화자에 맞춰 변환하면서 음성 내용을 보존하는 스트리밍 음성 스타일 변환 시스템이다.AI · 머신러닝 · StyleStream 2.0: Fast and Controllable Streaming Voice Style Conversion

Key Point제로샷 음성 스타일 변환의 실시간성을 개선하고 자연어 기반 음성 설계·편집 기능을 추가해 음성 생성의 실용성과 제어 가능성을 크게 높였다.
핵심 요약
- StyleStream 2.0은 음성의 음색, 억양, 감정을 대상 화자에 맞춰 변환하면서 음성 내용을 보존하는 스트리밍 음성 스타일 변환 시스템이다.
- 이전 버전인 StyleStream 1.0의 문제점을 해결했다: 소비자급 GPU에서 약 1초의 레이턴시를 520ms로 단축(2배 속도 개선)하고, 대상 음성을 설계·편집할 텍스트 기반 인터페이스를 추가했다.
- 레이턴시 감소를 위해 몇 단계의 픽셀 MeanFlow 모델을 학습하고 Self Forcing에서 영감을 받은 자기회귀 피드백으로 세부 조정하여 스트리밍 추론 견고성을 개선했다.
전체 요약 6문장 읽기 → 003▲ 12 · 댓글 1낮은 대역폭에서 음성 품질 지키는 적응형 음성 코덱 공개신경망 기반 음성 코덱은 음성을 이산 토큰으로 변환하는데, 프레임 레이트가 낮을수록 토큰 시퀀스가 짧아지지만 각 토큰이 더 많은 정보를 담아야 한다.AI · 머신러닝 · RubatoCodec: Budgeted Adaptive Speech Tokenization with Streaming Decoding

Key Point저대역폭 음성 생성에서 품질과 안정성을 동시에 확보하는 새로운 접근법으로, 음성 AI 모델 개발자들이 토큰 예산을 명확히 제어하면서도 높은 음질을 유지할 수 있게 한다.
핵심 요약
- 신경망 기반 음성 코덱은 음성을 이산 토큰으로 변환하는데, 프레임 레이트가 낮을수록 토큰 시퀀스가 짧아지지만 각 토큰이 더 많은 정보를 담아야 한다.
- 기존 가변 프레임 레이트 코덱은 임계값 기반 할당으로 콘텐츠에 따라 토큰 개수가 달라져 생성 모델이 예측해야 할 시퀀스 길이가 불안정하다.
- RubatoCodec은 X-Codec-2 기반의 가변 프레임 레이트 음성 코덱으로, 발화 단위의 명시적 이벤트 예산과 스트리밍 디코딩을 지원한다.
전체 요약 10문장 읽기 → 004▲ 216 · 댓글 53미스트랄, 음성 AI 에이전트 'Voxtral 3' 공개미스트랄이 음성 에이전트 SDK와 음성 모델 Voxtral 3을 발표했다.AI · 머신러닝 · Voxtral 3

Key Point음성 AI 에이전트는 콜센터·가상 비서·자동화 시스템에서 실제 운영되는 필수 기술인데, 이전까지는 낮은 정확도와 부자연스러운 응답이 문제였다. Voxtral 3은 저렴한 가격에 다국어·고감정 표현 능력으로 프로덕션 레벨의 음성 에이전트 구축을 현실화한다.
핵심 요약
- 미스트랄이 음성 에이전트 SDK와 음성 모델 Voxtral 3을 발표했다.
- 음성 인식, 추론, 도구 호출, 음성 생성을 하나의 실시간 스트리밍 파이프라인으로 통합한다.
- 음성-텍스트 모델 Voxtral Transcribe 3은 50개 이상 언어 지원, 화자 분석(diarization), 문맥 기반 정확도 향상(context-biasing), 발화 종료 감지 기능을 제공한다.
전체 요약 10문장 읽기 → 005새 버전OpenAI Python SDK, Realtime API 기능 확대OpenAI Python SDK v3.32.0이 릴리스됐다.AI · 머신러닝 · openai/openai-python@v3.32.0

Key PointRealtime API 기반 라이브 음성 애플리케이션을 개발 중이라면, 새로운 음성 생성·재생·의사결정 기능으로 더 복잡한 대화형 서비스를 구축할 수 있게 됐다.
핵심 요약
- OpenAI Python SDK v3.32.0이 릴리스됐다.
- API 캐시 설정과 키 옵션, 지역별 데이터 처리 위치 설정을 추가했다.
- Realtime Live 세션에서 음성 녹음 재생(audio fixture playback)과 의사결정 기능(Decisions)을 지원하기 시작했다.
전체 요약 6문장 읽기 → 006▲ 18 · 댓글 2Fish Audio Drama 3, 자연어 지시로 성우 같은 음성 생성텍스트를 연기하는 형태의 음성으로 변환하는 오픈소스 모델 Fish Audio Drama 3을 공개했다.AI · 머신러닝 · Fish Audio Drama 3 Technical Report

Key Point단일 모델로 음성 복제, 자연어 지시, 멀티턴 편집, 장면 더빙을 모두 지원하며 파라미터 대비 빠른 추론 속도를 달성한 기술적 진전이 실제 음성 생성·편집 워크플로를 어떻게 단순화할지 확인할 수 있다.
핵심 요약
- 텍스트를 연기하는 형태의 음성으로 변환하는 오픈소스 모델 Fish Audio Drama 3을 공개했다.
- 35B 파라미터 혼합 전문가 구조에 토큰당 3B 파라미터만 활성화하며, 여러 참조에서 목소리를 복제하고 자연어 지시에 따른다.
- 다음 턴의 피드백으로 테이크를 수정하고, 여러 캐릭터 장면에 음성을 부여하며, 기존 음성을 인필로 편집하고 장시간·스트리밍 오디오를 합성한다.
전체 요약 8문장 읽기 → 007▲ 111 · 댓글 57이미 구독 중인 OpenAI로 오디오북 만드는 도구OpenAI나 Claude 구독으로 PDF를 오디오북으로 변환하는 PDF TO MP3 서비스를 출시했다.AI · 머신러닝 · Show HN: Use your OpenAI subscription to create audiobooks

Key Point기존 AI 구독료를 활용해 추가 비용 없이 오디오북을 만들 수 있는 새로운 방법을 제시하므로, OpenAI나 Claude 사용자에게 실질적인 가치가 있다.
핵심 요약
- OpenAI나 Claude 구독으로 PDF를 오디오북으로 변환하는 PDF TO MP3 서비스를 출시했다.
- 사용자가 이미 보유한 AI 구독을 문서 처리에 활용하고, 음성 생성 비용만 별도 API 키로 지불하는 방식이다.
- Claude의 경우 MCP 서버를 통해 Settings → Plugins → Add MCP server에서 연결하며, Google 또는 OpenAI의 음성 API 키를 추가로 설정해야 한다.
전체 요약 5문장 읽기 → 008▲ 55 · 댓글 3AR·VR용 입체 음성 생성, 화면 움직임과 동기화기존 영상-음성 생성 모델은 의미 대응과 시간 동기화는 잘했지만, AR/VR·인터랙티브 게임에 필요한 입체 음성 생성은 미흡했다.AI · 머신러닝 · Hear the World in Stereo: Learning Dynamic Spatial Correspondence for Immersive Joint Video-Audio Generation

Key PointAR·VR과 게임 등 몰입형 미디어에서 필수인 입체 음성을 화면 움직임과 동기화하는 기술 공백을 처음 정의하고 해결했으며, 평가 기준도 함께 제시했다.
핵심 요약
- 기존 영상-음성 생성 모델은 의미 대응과 시간 동기화는 잘했지만, AR/VR·인터랙티브 게임에 필요한 입체 음성 생성은 미흡했다.
- 입체 음성은 음원이 인지되는 방향이 화면 속 음원의 움직임과 일치해야 하는데, 이를 '동적 공간 대응'이라고 정의했다.
- StereoBind는 모션 트랙을 활용해 시각적 움직임과 입체 음성을 연계하는 프레임워크로, 시각 움직임 바인딩·공간 트랙 인코더·상대 움직임 모델링 세 가지 메커니즘을 사용한다.
전체 요약 5문장 읽기 → 009새 버전OpenAI Python SDK v3.26.1, 커스텀 음성 생성 버그 수정OpenAI의 Python 공식 SDK 버전 3.26.1이 릴리스됐다.오픈소스 · 도구 · openai/openai-python@v3.26.1

Key PointOpenAI Python SDK를 사용하는 개발자들이 커스텀 음성 생성 기능을 정상적으로 사용할 수 있게 되었다.
핵심 요약
- OpenAI의 Python 공식 SDK 버전 3.26.1이 릴리스됐다.
- 커스텀 음성 생성 API의 파라미터 관련 버그를 수정했다.
010새 버전OpenAI Python 클라이언트 3.24.0 출시OpenAI Python SDK 3.24.0 버전이 공개됐다.AI · 머신러닝 · openai/openai-python@v3.24.0

Key PointOpenAI API를 Python으로 사용하는 개발자라면 음성 생성과 에이전트 기능 지원으로 할 수 있는 일이 확대된다.
핵심 요약
- OpenAI Python SDK 3.24.0 버전이 공개됐다.
- 주요 추가 기능은 커스텀 음성 생성(custom voice creation)과 에이전트 세션 이벤트(agent session events) 지원이다.
- Python 요청 라우팅 필드의 우선순위를 개선했다.
전체 요약 4문장 읽기 → 011▲ 17 · 댓글 2감정 음성 생성, 재학습 없이 정밀도 높이는 기법감정 조건부 음성합성(TTS) 모델이 요청한 감정을 제대로 표현하지 못하는 문제를 해결하기 위해 재학습 없이 내부 표현을 수정하는 벡터 스티어링 기법을 연구했다.AI · 머신러닝 · EmoRES-TTS: Residual-Enhanced Vector Steering for Emotional Speech Generation

Key Point감정 음성합성에서 모델을 재학습하지 않고도 감정 표현 정확도를 최대 35% 향상시킬 수 있는 새 방법으로, 리소스가 제한된 음성 AI 개발에 실질적 이점을 제공한다.
핵심 요약
- 감정 조건부 음성합성(TTS) 모델이 요청한 감정을 제대로 표현하지 못하는 문제를 해결하기 위해 재학습 없이 내부 표현을 수정하는 벡터 스티어링 기법을 연구했다.
- 기존 CoCoEmo 방식은 감정 벡터를 하나의 단일 강도로 제어하는 방향으로만 보아 감정 정확도가 제한적이었다.
- 연구팀은 감정 벡터가 음성을 중립 표현에서 벗어나게 하는 공유 성분과 요청한 감정으로 생성을 유도하는 잔여 성분으로 분해될 수 있음을 발견했다.
전체 요약 8문장 읽기 → 012▲ 215 · 댓글 4실시간 음성·영상 대화 AI, 풀듀플렉스 상호작용 시스템 공개Hugging Face가 실시간 쌍방향 대화가 가능한 Realtime-Venus 시스템을 발표했다.AI · 머신러닝 · Realtime-Venus: A full-duplex interaction system with asynchronous delegation

Key Point자연스러운 실시간 음성·영상 대화를 처리하는 시스템이 대규모 벤치마크에서 경쟁 모델을 앞선 성과를 보이고 있으며, 음성 중단과 배경음 같은 현실적 상황에서의 응답 능력이 실용성을 높입니다.
핵심 요약
- Hugging Face가 실시간 쌍방향 대화가 가능한 Realtime-Venus 시스템을 발표했다.
- 영상 상호작용용 Realtime-Venus-Omni과 음성 상호작용용 Realtime-Venus-Audio 두 개의 9B 모델로 구성되며, 각각 연속적 인지, 대화 제어, 음성 생성을 통합한다.
- 사용자 입력·모델 출력·작업 위임을 공유 타임라인으로 관리하며, 별도의 런타임이 백그라운드 작업을 비동기로 처리하면서 전면 상호작용을 이어간다.
전체 요약 5문장 읽기 → 013당일 +168AI 에이전트로 유튜브 채널 자동운영하기오픈소스 AgentTube는 AI 에이전트가 영상 제작부터 발행까지 유튜브 채널을 전면 자동화한다.AI · 머신러닝 · darkzOGx/youtube-automation-agent · JavaScript

Key Point자신의 기준과 브랜드를 유지하면서 유튜브 채널을 24/7 운영할 수 있는 오픈소스 도구가 공개됐으며, 승인 우선 워크플로우로 AI 자동화의 품질 문제를 해결했다.
핵심 요약
- 오픈소스 AgentTube는 AI 에이전트가 영상 제작부터 발행까지 유튜브 채널을 전면 자동화한다.
- 주제 연구·시나리오 작성·음성 생성·편집·메타데이터 최적화·검수·예약·발행·분석 학습을 자동으로 처리한다.
- Gemini·OpenAI 등 여러 LLM과 video 제너레이션 모델을 지원하며, 코딩 불필요하게 웹 대시보드로 운영된다.
전체 요약 5문장 읽기 → 014당일 +120중국 음성 생성 모델 LongCat-Video, 장시간 영상 생성에 특화미투안이 개발한 LongCat-Video는 137억 개 파라미터 기반 통합 영상 생성 모델이다.AI · 머신러닝 · meituan-longcat/LongCat-Video · Python

Key Point기존 영상 생성 모델의 색감 저하·품질 감소 문제를 장시간 생성으로 해결하고, 음성 기반 인물 애니메이션까지 확장한 첫 번째 오픈소스 통합 모델이기 때문에 영상 생성 분야의 기술 진화를 보여준다.
핵심 요약
- 미투안이 개발한 LongCat-Video는 137억 개 파라미터 기반 통합 영상 생성 모델이다.
- 텍스트-투-비디오, 이미지-투-비디오, 비디오 연속 생성을 하나의 모델로 처리한다.
- 분단위 장시간 영상을 색감 저하나 품질 손실 없이 생성하며, 720p 30fps 영상을 분 단위로 생성할 수 있다.
전체 요약 6문장 읽기 → 015당일 +1,793ElevenLabs 대체 오픈소스, 로컬에서 음성 변환·더빙·받아쓰기VoiceStudio는 646개 언어를 지원하는 오픈소스 음성 생성 도구로, 음성 클로닝·음성 디자인·동영상 더빙·받아쓰기·오디오북 제작을 모두 로컬에서 처리한다.오픈소스 · 도구 · debpalash/VoiceStudio · Python

Key Point클라우드 서비스 의존 없이 모든 음성 작업을 로컬에서 처리할 수 있는 완성도 높은 오픈소스가 등장했으며, 엔진 유연성과 다국어 지원이 개발자와 콘텐츠 제작자에게 실질적인 선택지가 된다.
핵심 요약
- VoiceStudio는 646개 언어를 지원하는 오픈소스 음성 생성 도구로, 음성 클로닝·음성 디자인·동영상 더빙·받아쓰기·오디오북 제작을 모두 로컬에서 처리한다.
- TTS 16개, ASR 11개 엔진을 탑재했으며 엔진 간 전환이 자유롭다.
- 계정·API 키·구독료 없이 자신의 하드웨어에서 동작하며, macOS·Windows·Linux·Docker를 지원한다.
전체 요약 6문장 읽기 → 016당일 +121음성 클론부터 AI 에이전트 연동까지, 로컬 기반 AI 음성 스튜디오오픈소스 AI 음성 스튜디오 Voicebox는 ElevenLabs와 Whisper Flow의 기능을 하나로 통합한 로컬 우선 솔루션으로, 모든 데이터가 기기에서만 처리된다.AI · 머신러닝 · jamiepine/voicebox · TypeScript

Key Point클라우드 의존을 벗어나 개인 기기에서 음성 클론, 생성, 인식, AI 연동을 모두 제어할 수 있는 완전한 로컬 솔루션이 등장했기 때문이다.
핵심 요약
- 오픈소스 AI 음성 스튜디오 Voicebox는 ElevenLabs와 Whisper Flow의 기능을 하나로 통합한 로컬 우선 솔루션으로, 모든 데이터가 기기에서만 처리된다.
- 음성 클론, 음성 생성(23개 언어 지원), 딕테이션, AI 에이전트 음성 출력까지 완전한 음성 입출력 스택을 7개 TTS 엔진으로 제공한다.
- Qwen3-TTS, Qwen CustomVoice, LuxTTS, Chatterbox 시리즈, HumeAI TADA, Kokoro 등 각 엔진이 서로 다른 강점을 가지며, Chatterbox Turbo만 [laugh], [sigh] 같은 감정 태그를 해석한다.
전체 요약 6문장 읽기 →