wip: phase_z2 evidence 파이프라인 + matching 실험(phase2~26) + 프론트 trace 패널 진행분 스냅샷
- src: phase_z2 composition/mapper/pipeline/placement_planner/retry, ai_fallback(prompts/schema/validate), mdx_text_atoms 신규 - Front: PipelineTracePanel 신규, FramePanel/SlideCanvas/Home/designAgentApi 등 갱신 + 테스트 4종 추가 - templates/phase_z2: catalog(component_expansion_registry, node_slot_mapping 신규), frames, families, slide_base 갱신 - tests/matching: phase2~26 매칭 실험 스크립트·리포트·온톨로지 전체 (미커밋 진행분) - tests: b4_v4 evidence, task5~28.5 시리즈, regression(imp95 baseline) 등 신규 테스트 대량 추가 - docs/reference: MDX 구조 인벤토리, MDX→Frame 구조 계약 문서 - scripts: mdx 계약/parity/coverage/viewport 체크, gitea comment, run sync 유틸 - .gitignore: tmp*.json, chromedriver, .orchestrator, *.pkl, Front_test* 등 임시/스냅샷 제외 미완성 작업의 보존용 스냅샷 커밋 (2026-07-02) Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
This commit is contained in:
Claude Opus 4.8
@@ -0,0 +1,88 @@
|
||||
# Phase 11 — Asymmetric & Ensemble 실험
|
||||
|
||||
**신규 A 안**: MDX 제목만 × Figma 전체(전처리됨) — 비대칭 매칭
|
||||
**신규 B 안**: BM25(MDX전체×Figma전체) + Cross(MDX제목×Figma제목) 점수 합산
|
||||
|
||||
### 전략 × 4유닛 — 1순위 정답률
|
||||
|
||||
| 전략 | MDX1 팝업(18) | MDX2 2.2(14) | MDX03-1(13) | MDX03-2(29) | 합계 |
|
||||
|------|---------------|--------------|-------------|-------------|------|
|
||||
| BM25: MDX제목 × Figma전체 | ✗(20) | ✗(16) | ✗(20) | ✗(20) | **0/4** |
|
||||
| Cross: MDX제목 × Figma전체 | ✓ | ✗(16) | ✗(15) | ✗(20) | **1/4** |
|
||||
| SBERT-청크: MDX제목 × Figma전체 | ✗(13) | ✗(20) | ✗(10) | ✗(20) | **0/4** |
|
||||
| E5-청크: MDX제목 × Figma전체 | ✗(16) | ✗(20) | ✗(20) | ✗(20) | **0/4** |
|
||||
| BM25→Cross: MDX제목 × Figma전체 | ✓ | ✗(16) | ✗(15) | ✗(20) | **1/4** |
|
||||
| Ensemble α=0.3 (A=BM25본문×전체 + B=Cross제목×제목) | ✓ | ✗(29) | ✓ | ✓ | **3/4** |
|
||||
| Ensemble α=0.5 (A=BM25본문×전체 + B=Cross제목×제목) | ✓ | ✗(29) | ✓ | ✓ | **3/4** |
|
||||
| Ensemble α=0.7 (A=BM25본문×전체 + B=Cross제목×제목) | ✓ | ✓ | ✓ | ✓ | **4/4** |
|
||||
| [기준] BM25: MDX전체 × Figma전체 (Phase 9) | ✓ | ✓ | ✗(15) | ✓ | **3/4** |
|
||||
| [기준] Cross: MDX전체 × Figma전체 (Phase 9) | ✓ | ✓ | ✗(20) | ✗(26) | **2/4** |
|
||||
| [기준] BM25→Cross: MDX전체 × Figma전체 (Phase 9) | ✓ | ✓ | ✗(20) | ✓ | **3/4** |
|
||||
|
||||
---
|
||||
|
||||
## 유닛별 전략 Top-3 상세
|
||||
|
||||
### 1. (MDX 1) 팝업 — DX와 BIM의 구분 — 정답 Frame **18**
|
||||
|
||||
| 전략 | 1순위 | 2순위 | 3순위 |
|
||||
|------|-------|-------|-------|
|
||||
| BM25: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**14**<br> |
|
||||
| Cross: MDX제목 × Figma전체 | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**16**<br> |
|
||||
| SBERT-청크: MDX제목 × Figma전체 | <br>**13**<br>필수조건 | <br>**12**<br>건설산업의 목표 (BIM의 … | ⭐ <br>**18**<br>BIM과 DX의 이해 |
|
||||
| E5-청크: MDX제목 × Figma전체 | <br>**16**<br> | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**14**<br> |
|
||||
| BM25→Cross: MDX제목 × Figma전체 | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**14**<br> |
|
||||
| Ensemble α=0.3 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
| Ensemble α=0.5 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
| Ensemble α=0.7 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
| [기준] BM25: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
| [기준] Cross: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
| [기준] BM25→Cross: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**18**<br>BIM과 DX의 이해 | <br>**16**<br> | <br>**17**<br>현황 및 문제점 |
|
||||
|
||||
### 2. (MDX 2) 2.2 DX 시행 주체별 기대효과 — 정답 Frame **14**
|
||||
|
||||
| 전략 | 1순위 | 2순위 | 3순위 |
|
||||
|------|-------|-------|-------|
|
||||
| BM25: MDX제목 × Figma전체 | <br>**16**<br> | <br>**15**<br>정책목표 | <br>**13**<br>필수조건 |
|
||||
| Cross: MDX제목 × Figma전체 | <br>**16**<br> | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… |
|
||||
| SBERT-청크: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**29**<br>좌측 배너 과정 (Proce… | <br>**27**<br> |
|
||||
| E5-청크: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**29**<br>좌측 배너 과정 (Proce… | <br>**15**<br>정책목표 |
|
||||
| BM25→Cross: MDX제목 × Figma전체 | <br>**16**<br> | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… |
|
||||
| Ensemble α=0.3 (A=BM25본문×전체 + B=Cross제목×제목) | <br>**29**<br>좌측 배너 과정 (Proce… | ⭐ <br>**14**<br> | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
| Ensemble α=0.5 (A=BM25본문×전체 + B=Cross제목×제목) | <br>**29**<br>좌측 배너 과정 (Proce… | ⭐ <br>**14**<br> | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
| Ensemble α=0.7 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**14**<br> | <br>**29**<br>좌측 배너 과정 (Proce… | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
| [기준] BM25: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**14**<br> | <br>**12**<br>건설산업의 목표 (BIM의 … | <br>**29**<br>좌측 배너 과정 (Proce… |
|
||||
| [기준] Cross: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**14**<br> | <br>**23**<br>Application S/W… | <br>**30**<br>산업별 현황 |
|
||||
| [기준] BM25→Cross: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**14**<br> | <br>**29**<br>좌측 배너 과정 (Proce… | <br>**08**<br>효율적인 정보의 관리와 활용 |
|
||||
|
||||
### 3. (MDX 03) 1. DX 시행을 위한 필수요건 — 정답 Frame **13**
|
||||
|
||||
| 전략 | 1순위 | 2순위 | 3순위 |
|
||||
|------|-------|-------|-------|
|
||||
| BM25: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**15**<br>정책목표 | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| Cross: MDX제목 × Figma전체 | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**16**<br> |
|
||||
| SBERT-청크: MDX제목 × Figma전체 | <br>**10**<br>현장 실효성 증대 위한 **… | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| E5-청크: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**15**<br>정책목표 | <br>**16**<br> |
|
||||
| BM25→Cross: MDX제목 × Figma전체 | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**16**<br> |
|
||||
| Ensemble α=0.3 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**13**<br>필수조건 | <br>**15**<br>정책목표 | <br>**10**<br>현장 실효성 증대 위한 **… |
|
||||
| Ensemble α=0.5 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**13**<br>필수조건 | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… |
|
||||
| Ensemble α=0.7 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**13**<br>필수조건 | <br>**15**<br>정책목표 | <br>**20**<br>디지털 전환(DX)은 S/W… |
|
||||
| [기준] BM25: MDX전체 × Figma전체 (Phase 9) | <br>**15**<br>정책목표 | ⭐ <br>**13**<br>필수조건 | <br>**20**<br>디지털 전환(DX)은 S/W… |
|
||||
| [기준] Cross: MDX전체 × Figma전체 (Phase 9) | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**18**<br>BIM과 DX의 이해 | <br>**15**<br>정책목표 |
|
||||
| [기준] BM25→Cross: MDX전체 × Figma전체 (Phase 9) | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**18**<br>BIM과 DX의 이해 | <br>**15**<br>정책목표 |
|
||||
|
||||
### 4. (MDX 03) 2. Process 혁신과 Product 변화 — 정답 Frame **29**
|
||||
|
||||
| 전략 | 1순위 | 2순위 | 3순위 |
|
||||
|------|-------|-------|-------|
|
||||
| BM25: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**15**<br>정책목표 | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| Cross: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**16**<br> |
|
||||
| SBERT-청크: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**12**<br>건설산업의 목표 (BIM의 … | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… |
|
||||
| E5-청크: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
| BM25→Cross: MDX제목 × Figma전체 | <br>**20**<br>디지털 전환(DX)은 S/W… | <br>**16**<br> | <br>**15**<br>정책목표 |
|
||||
| Ensemble α=0.3 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**18**<br>BIM과 DX의 이해 | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
| Ensemble α=0.5 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**12**<br>건설산업의 목표 (BIM의 … | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| Ensemble α=0.7 (A=BM25본문×전체 + B=Cross제목×제목) | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**12**<br>건설산업의 목표 (BIM의 … | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| [기준] BM25: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**12**<br>건설산업의 목표 (BIM의 … | <br>**18**<br>BIM과 DX의 이해 |
|
||||
| [기준] Cross: MDX전체 × Figma전체 (Phase 9) | <br>**26**<br> | <br>**20**<br>디지털 전환(DX)은 S/W… | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… |
|
||||
| [기준] BM25→Cross: MDX전체 × Figma전체 (Phase 9) | ⭐ <br>**29**<br>좌측 배너 과정 (Proce… | <br>**15**<br>정책목표 | <br>**12**<br>건설산업의 목표 (BIM의 … |
|
||||
Reference in New Issue
Block a user