KyeongminandClaude Opus 4.8
b836e79ee1
- src: phase_z2 composition/mapper/pipeline/placement_planner/retry, ai_fallback(prompts/schema/validate), mdx_text_atoms 신규 - Front: PipelineTracePanel 신규, FramePanel/SlideCanvas/Home/designAgentApi 등 갱신 + 테스트 4종 추가 - templates/phase_z2: catalog(component_expansion_registry, node_slot_mapping 신규), frames, families, slide_base 갱신 - tests/matching: phase2~26 매칭 실험 스크립트·리포트·온톨로지 전체 (미커밋 진행분) - tests: b4_v4 evidence, task5~28.5 시리즈, regression(imp95 baseline) 등 신규 테스트 대량 추가 - docs/reference: MDX 구조 인벤토리, MDX→Frame 구조 계약 문서 - scripts: mdx 계약/parity/coverage/viewport 체크, gitea comment, run sync 유틸 - .gitignore: tmp*.json, chromedriver, .orchestrator, *.pkl, Front_test* 등 임시/스냅샷 제외 미완성 작업의 보존용 스냅샷 커밋 (2026-07-02) Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
10 KiB
10 KiB
Phase 10 — 타이틀 ONLY 매칭 실험
질문: 본문 제외, 대제목+중제목(+소제목)만 vs Figma ## 타이틀 섹션만 매칭 시?
구성 확인
| 유닛 | MDX 쿼리 (타이틀 only) | 정답 Frame 타이틀 |
|---|---|---|
| 1. (MDX 1) 팝업 — DX와 BIM의 구분 | 건설산업 DX의 올바른 이해 / 2. 용어간 상호관계 |
BIM과 DX의 이해 (Frame 18) |
| 2. (MDX 2) 2.2 DX 시행 주체별 기대효과 | DX의 시행 목표 및 기대효과 / 2. DX 기반 Process 혁신에 따른 주체별 기대효과 / 2.2 DX 시행 주체별 기대효과 |
발주자 목표 시공자 목표 설계자 목표 (Frame 14) |
| 3. (MDX 03) 1. DX 시행을 위한 필수요건 | DX 실행 체계 구축 방안 / 1. DX 시행을 위한 필수 요건 |
필수조건 (Frame 13) |
| 4. (MDX 03) 2. Process 혁신과 Product 변화 | DX 실행 체계 구축 방안 / 2. Process의 혁신과 Product의 변화 |
과정 (Process)의 혁신 결과 (Products)의 혁신 (Frame 29) |
타이틀 ONLY — 1순위 정답률
| 방법 | MDX1 팝업(18) | MDX2 2.2(14) | MDX03-1(13) | MDX03-2(29) | 합계 |
|---|---|---|---|---|---|
| TF-IDF | ✓ | ✗(20) | ✗(20) | ✗(20) | 1/4 |
| Char 3-gram | ✗(12) | ✗(29) | ✓ | ✓ | 2/4 |
| Kiwi+BM25 | ✓ | ✗(18) | ✗(20) | ✓ | 2/4 |
| Distinctive-Kiwi | ✗(07) | ✗(20) | ✗(20) | ✓ | 1/4 |
| 청킹+SBERT | ✓ | ✗(29) | ✗(10) | ✓ | 2/4 |
| 청킹+E5 | ✓ | ✗(29) | ✗(10) | ✓ | 2/4 |
| Cross | ✓ | ✗(29) | ✓ | ✓ | 3/4 |
| BM25 → Cross rerank | ✓ | ✗(29) | ✓ | ✓ | 3/4 |
유닛별 전략 Top-3 상세
1. (MDX 1) 팝업 — DX와 BIM의 구분 — 정답 Frame 18
| 방법 | 1순위 | 2순위 | 3순위 |
|---|---|---|---|
| TF-IDF | ⭐  18 BIM과 DX의 이해 |
 01 |
 02 Engineering S/W… |
| Char 3-gram |  12 건설산업의 목표 (BIM의 … |
⭐ 18 BIM과 DX의 이해 |
 30 산업별 현황 |
| Kiwi+BM25 | ⭐ 18 BIM과 DX의 이해 |
12 건설산업의 목표 (BIM의 … |
30 산업별 현황 |
| Distinctive-Kiwi |  07 |
⭐ 18 BIM과 DX의 이해 |
 20 디지털 전환(DX)은 S/W… |
| 청킹+SBERT | ⭐ 18 BIM과 DX의 이해 |
02 Engineering S/W… |
12 건설산업의 목표 (BIM의 … |
| 청킹+E5 | ⭐ 18 BIM과 DX의 이해 |
02 Engineering S/W… |
12 건설산업의 목표 (BIM의 … |
| Cross | ⭐ 18 BIM과 DX의 이해 |
 21 Solution Engn. … |
 14 |
| BM25 → Cross rerank | ⭐ 18 BIM과 DX의 이해 |
12 건설산업의 목표 (BIM의 … |
 31 산업별 특성 과 발전방향 |
2. (MDX 2) 2.2 DX 시행 주체별 기대효과 — 정답 Frame 14
| 방법 | 1순위 | 2순위 | 3순위 |
|---|---|---|---|
| TF-IDF | 20 디지털 전환(DX)은 S/W… |
18 BIM과 DX의 이해 |
 29 좌측 배너 과정 (Proce… |
| Char 3-gram | 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
 15 정책목표 |
| Kiwi+BM25 | 18 BIM과 DX의 이해 |
20 디지털 전환(DX)은 S/W… |
29 좌측 배너 과정 (Proce… |
| Distinctive-Kiwi | 20 디지털 전환(DX)은 S/W… |
29 좌측 배너 과정 (Proce… |
07 |
| 청킹+SBERT | 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
01 |
| 청킹+E5 | 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
01 |
| Cross | 29 좌측 배너 과정 (Proce… |
⭐ 14 |
18 BIM과 DX의 이해 |
| BM25 → Cross rerank | 29 좌측 배너 과정 (Proce… |
⭐ 14 |
18 BIM과 DX의 이해 |
3. (MDX 03) 1. DX 시행을 위한 필수요건 — 정답 Frame 13
| 방법 | 1순위 | 2순위 | 3순위 |
|---|---|---|---|
| TF-IDF | 20 디지털 전환(DX)은 S/W… |
 10 현장 실효성 증대 위한 **… |
01 |
| Char 3-gram | ⭐  13 필수조건 |
18 BIM과 DX의 이해 |
10 현장 실효성 증대 위한 **… |
| Kiwi+BM25 | 20 디지털 전환(DX)은 S/W… |
18 BIM과 DX의 이해 |
⭐ 13 필수조건 |
| Distinctive-Kiwi | 20 디지털 전환(DX)은 S/W… |
18 BIM과 DX의 이해 |
07 |
| 청킹+SBERT | 10 현장 실효성 증대 위한 **… |
18 BIM과 DX의 이해 |
20 디지털 전환(DX)은 S/W… |
| 청킹+E5 | 10 현장 실효성 증대 위한 **… |
⭐ 13 필수조건 |
18 BIM과 DX의 이해 |
| Cross | ⭐ 13 필수조건 |
10 현장 실효성 증대 위한 **… |
20 디지털 전환(DX)은 S/W… |
| BM25 → Cross rerank | ⭐ 13 필수조건 |
10 현장 실효성 증대 위한 **… |
20 디지털 전환(DX)은 S/W… |
4. (MDX 03) 2. Process 혁신과 Product 변화 — 정답 Frame 29
| 방법 | 1순위 | 2순위 | 3순위 |
|---|---|---|---|
| TF-IDF | 20 디지털 전환(DX)은 S/W… |
07 |
01 |
| Char 3-gram | ⭐ 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
 22 Model에 특화된 Engn… |
| Kiwi+BM25 | ⭐ 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
20 디지털 전환(DX)은 S/W… |
| Distinctive-Kiwi | ⭐ 29 좌측 배너 과정 (Proce… |
07 |
20 디지털 전환(DX)은 S/W… |
| 청킹+SBERT | ⭐ 29 좌측 배너 과정 (Proce… |
01 |
18 BIM과 DX의 이해 |
| 청킹+E5 | ⭐ 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
10 현장 실효성 증대 위한 **… |
| Cross | ⭐ 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
 17 현황 및 문제점 |
| BM25 → Cross rerank | ⭐ 29 좌측 배너 과정 (Proce… |
18 BIM과 DX의 이해 |
20 디지털 전환(DX)은 S/W… |