Skip to content

Commit 2e137b3

Browse files
committed
chore: Notion 동기화 2026-06-05 14:00
1 parent 285b104 commit 2e137b3

4 files changed

Lines changed: 18 additions & 32 deletions

docs/poc/.notion-sync.json

Lines changed: 9 additions & 9 deletions
Original file line numberDiff line numberDiff line change
@@ -1,10 +1,10 @@
11
{
22
"367e15b4-0359-80c9-885a-ea288010356f": {
3-
"file": "docs/poc/poc-기획안-초고속초고품질-다국어-ai-자막-생성-시스템-구축.md",
4-
"last_edited": "2026-05-28T10:32:00.000Z",
5-
"content_hash": "f81b6f8074ce1f3ab0769f900c4ac48740b1c5cafd6b84dd7c835845d254e104",
6-
"order": 2,
7-
"parent_id": null
3+
"file": "docs/poc/audio-bench/poc-기획안-초고속초고품질-다국어-ai-자막-생성-시스템-구축.md",
4+
"last_edited": "2026-06-05T04:51:00.000Z",
5+
"content_hash": "55826e7eba0f262ec43d43538a77ca8626aa5a6e365aa521586bb4bbfc20e874",
6+
"order": 1,
7+
"parent_id": "audio-bench"
88
},
99
"368e15b4-0359-81cb-9b9b-d555dbfd19e3": {
1010
"file": "docs/poc/vision-bench/1편-멀티모달-llm-한국-방송-6초-클립-영상-이해-벤치마크-파이프라인-구축.md",
@@ -23,8 +23,8 @@
2323
"36ee15b4-0359-80b6-97c6-f628f0347d36": {
2424
"file": "docs/poc/audio-bench/한국어-콘텐츠-lid-정확도-비교-whisper-vs-voxlingua107.md",
2525
"last_edited": "2026-06-04T07:20:00.000Z",
26-
"content_hash": "62bafb244e80c4c7ae70a3f77c43e9ca592a739a5a7ea85c0fbd6c2550a208bd",
27-
"order": 1,
26+
"content_hash": "580fc1167e9b85313a4dcb854c923f497e664a24bc956dcc2b92afa414f3b838",
27+
"order": 2,
2828
"parent_id": "audio-bench"
2929
},
3030
"373e15b4-0359-8150-88f3-eedc5ebd727b": {
@@ -36,7 +36,7 @@
3636
},
3737
"365e15b4-0359-80d4-8f38-d8a5c80ae5d0": {
3838
"file": "docs/poc/audio-bench/index.md",
39-
"last_edited": "2026-06-02T07:58:00.000Z",
39+
"last_edited": "2026-06-05T04:51:00.000Z",
4040
"content_hash": "e3b0c44298fc1c149afbf4c8996fb92427ae41e4649b934ca495991b7852b855",
4141
"order": 1,
4242
"parent_id": null
@@ -45,7 +45,7 @@
4545
"file": "docs/poc/vision-bench/index.md",
4646
"last_edited": "2026-06-02T08:15:00.000Z",
4747
"content_hash": "e3b0c44298fc1c149afbf4c8996fb92427ae41e4649b934ca495991b7852b855",
48-
"order": 3,
48+
"order": 2,
4949
"parent_id": null
5050
},
5151
"373e15b4-0359-813e-b9cb-fcd1ccefc0c4": {

docs/poc/poc-기획안-초고속초고품질-다국어-ai-자막-생성-시스템-구축.md renamed to docs/poc/audio-bench/poc-기획안-초고속초고품질-다국어-ai-자막-생성-시스템-구축.md

Lines changed: 4 additions & 18 deletions
Original file line numberDiff line numberDiff line change
@@ -1,13 +1,13 @@
11
---
22
id: poc-기획안-초고속초고품질-다국어-ai-자막-생성-시스템-구축
33
title: "[PoC 기획안] 초고속·초고품질 다국어 AI 자막 생성 시스템 구축"
4-
sidebar_position: 2
5-
slug: "2"
4+
sidebar_position: 1
5+
slug: "1"
6+
last_update:
7+
date: 2026-06-05
68
---
79

8-
<br />
910

10-
<br />
1111

1212
**프로젝트 성격:**
1313

@@ -17,12 +17,10 @@ slug: "2"
1717

1818
NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
1919

20-
<br />
2120

2221
## 1. 프로젝트 개요 (Overview)
2322

2423
- **목적:** 배경음악, 효과음, 관중 함성 등이 섞인 미디어 파일에서 인간의 대사(Dialogue)만 고립시켜, 자막의 오인식 및 AI 환각(Hallucination) 현상을 원천 차단하고 단 3분 만에 1시간짜리 영상을 완벽한 다국어 자막으로 변환하는 시스템 검증.
25-
2624
- **핵심 목표:**
2725
- 음성 향상(Speech Enhancement)을 통한 단어 오차율(WER) 최소화
2826

@@ -55,15 +53,13 @@ NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
5553
규격화된 최종 SRT 자막을 출력합니다.
5654
```
5755

58-
<br />
5956

6057
## 2. 사전 조사
6158

6259
#### **2.1. 음성 인식 엔진: WhisperX (Turbo vs Large-v3)**
6360

6461

6562
- **결론:** 전사(Transcription) 중심의 초고속 시스템을 위해 `Turbo (Large-v3-Turbo)` 모델 채택.
66-
6763
- **이유:** Large-v3 가 최고 성능을 내지만 정확도 손실은 1% 내외 이고 속도는 Turbo 가 3배 이상 빠름. 음성 데이터를 전처리를 해서 원본 품질을 높이는게 정확도+속도 면에서 유리하다고 판단
6864

6965
| **비교 항목** | **WhisperX Large-v3** | **WhisperX Turbo** | **비고 및 비즈니스 영향** |
@@ -78,7 +74,6 @@ NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
7874
#### 2.2 노이즈 제거
7975

8076
- **결론:** 방송, 영화, 스포츠 해설 등 다채로운 소음 환경에서 대사(Dialogue)만 초고속으로 고립시키기 위해 `DeepFilterNet v3` 를 전처리 메인 엔진으로 채택.
81-
8277
- **이유:** BGM 제거에 특화된 음악 분리 모델(RoFormer, MDX)과 달리, 인간의 성대 구조 주파수 외의 모든 소리(효과음, 함성, 배경음)를 '잡음'으로 인지해 완벽히 제거함. 특히 RTX 4090 환경에서 1시간 분량을 단 10초대에 끊어내는 압도적인 인프라 비용 절감 효과를 가짐.
8378

8479
| **비교 대상 모델** | **DeepFilterNet v3 (채택)** | **BS-RoFormer (Vocal)** | **MDX23C (Kim Vocal 2)** | **HTDemucs v4** |
@@ -91,19 +86,15 @@ NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
9186
| **단점 및 한계** | 대사보다 BGM 볼륨이 극도로 큰 일부 예능에서는 음악 소리가 미세하게 새어 나올 수 있음. | 모델이 무거워 대량 처리 시 병목 우려. 대사가 왜곡되어 Whisper가 씹을 가능성 존재. | 영화 효과음이나 스포츠 관중 소리를 '악기'로 인지하지 못해 걸러내지 못함. | 속삭이는 작은 대사를 '소음'으로 오인해 통째로 지워버리는 경우가 있음. |
9287
| **PoC 최종 지위** | **메인 파이프라인 확정** | 특수 장르(예능)용 서브 픽 | 대량 고속 처리용 후보 픽 | 스포츠 중계용 검증 픽 |
9388

94-
<br />
9589

9690
---
9791

98-
<br />
9992

10093
## 3. 테스트
10194

10295
### 3.1 테스트 방법
10396

104-
<br />
10597

106-
<br />
10798

10899
### 3.2 테스트 데이터
109100

@@ -131,12 +122,10 @@ NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
131122
> yt-dlp -f "bv*[height<=720]+ba/b[height<=720]" "<URL">
132123
```
133124

134-
<br />
135125

136126
##### 영상 변환)
137127

138128
- 다운로드 받은 영상으로 부터 음성만 분리 한다.
139-
140129
- 음성은 압축이 되지 않는 wav 파일 형태로 받고 Noise 제거를 위해서 아래 옵션은 중요함
141130
- -vn : 비디오 제외(Video No)
142131

@@ -152,9 +141,6 @@ NVIDIA RTX 4090 (24GB) 1장 기반 기본 가속 환경
152141
ffmpeg -y -i <input.mp4> -vn -ac 1 -ar 48000 -c:a pcm_s16le <audio.wav>
153142
```
154143

155-
<br />
156144

157-
<br />
158145

159-
<br />
160146

docs/poc/audio-bench/한국어-콘텐츠-lid-정확도-비교-whisper-vs-voxlingua107.md

Lines changed: 4 additions & 4 deletions
Original file line numberDiff line numberDiff line change
@@ -1,8 +1,8 @@
11
---
22
id: 한국어-콘텐츠-lid-정확도-비교-whisper-vs-voxlingua107
33
title: "한국어 콘텐츠 LID 정확도 비교 — Whisper vs VoxLingua107"
4-
sidebar_position: 1
5-
slug: "1"
4+
sidebar_position: 2
5+
slug: "2"
66
last_update:
77
date: 2026-06-04
88
---
@@ -177,7 +177,7 @@ poc-lid-bench/
177177
| `torch` | `>=2.4,&lt;2.9` | cu128 wheel, 상한은 DF 호환성 |
178178
| `torchaudio` | `&gt;=2.4,&lt;2.9` | 동일 |
179179

180-
&gt; torch/torchaudio 상한 `&lt;2.9``torchaudio.backend.common.AudioMetaData`
180+
&gt; torch/torchaudio 상한 `<2.9``torchaudio.backend.common.AudioMetaData`
181181
가 2.9 에서 제거되며 DF 의 import 가 깨지는 문제 회피용. 검증된 조합:
182182
`torch==2.8.0+cu128` .
183183

@@ -204,7 +204,7 @@ poc-lid-bench/
204204

205205
```javascript
206206
# log.py 에서 로그파일 위치 적절히 수정
207-
&gt; .venv/bin/python main.py
207+
> .venv/bin/python main.py
208208
```
209209

210210

docs/poc/vision-bench/_category_.json

Lines changed: 1 addition & 1 deletion
Original file line numberDiff line numberDiff line change
@@ -1,6 +1,6 @@
11
{
22
"label": "Vision-bench",
3-
"position": 3,
3+
"position": 2,
44
"link": {
55
"type": "generated-index",
66
"slug": "/poc/vision-bench"

0 commit comments

Comments
 (0)