wip: phase_z2 evidence 파이프라인 + matching 실험(phase2~26) + 프론트 trace 패널 진행분 스냅샷
- src: phase_z2 composition/mapper/pipeline/placement_planner/retry, ai_fallback(prompts/schema/validate), mdx_text_atoms 신규 - Front: PipelineTracePanel 신규, FramePanel/SlideCanvas/Home/designAgentApi 등 갱신 + 테스트 4종 추가 - templates/phase_z2: catalog(component_expansion_registry, node_slot_mapping 신규), frames, families, slide_base 갱신 - tests/matching: phase2~26 매칭 실험 스크립트·리포트·온톨로지 전체 (미커밋 진행분) - tests: b4_v4 evidence, task5~28.5 시리즈, regression(imp95 baseline) 등 신규 테스트 대량 추가 - docs/reference: MDX 구조 인벤토리, MDX→Frame 구조 계약 문서 - scripts: mdx 계약/parity/coverage/viewport 체크, gitea comment, run sync 유틸 - .gitignore: tmp*.json, chromedriver, .orchestrator, *.pkl, Front_test* 등 임시/스냅샷 제외 미완성 작업의 보존용 스냅샷 커밋 (2026-07-02) Co-Authored-By: Claude Opus 4.8 (1M context) <noreply@anthropic.com>
This commit is contained in:
Claude Opus 4.8
@@ -0,0 +1,176 @@
|
||||
<!DOCTYPE html>
|
||||
<html lang="ko">
|
||||
<head>
|
||||
<meta charset="UTF-8">
|
||||
<title>Phase 5 — Case 2 (세부 단위 7개 방법)</title>
|
||||
|
||||
<style>
|
||||
body {
|
||||
font-family: -apple-system, 'Segoe UI', 'Malgun Gothic', sans-serif;
|
||||
max-width: 1800px;
|
||||
margin: 0 auto;
|
||||
padding: 24px;
|
||||
line-height: 1.6;
|
||||
color: #1e293b;
|
||||
background: #f8fafc;
|
||||
}
|
||||
h1 { color: #1e293b; border-bottom: 3px solid #2563eb; padding-bottom: 12px; }
|
||||
h2 {
|
||||
color: #1a365d;
|
||||
background: #e0e7ff;
|
||||
padding: 10px 16px;
|
||||
border-radius: 6px;
|
||||
margin-top: 32px;
|
||||
}
|
||||
hr { border: none; border-top: 1px solid #cbd5e1; margin: 24px 0; }
|
||||
table {
|
||||
border-collapse: collapse;
|
||||
width: 100%;
|
||||
margin: 12px 0 24px;
|
||||
background: #fff;
|
||||
box-shadow: 0 2px 6px rgba(0,0,0,0.05);
|
||||
}
|
||||
th, td {
|
||||
border: 1px solid #e2e8f0;
|
||||
padding: 10px;
|
||||
text-align: left;
|
||||
vertical-align: top;
|
||||
}
|
||||
th {
|
||||
background: #1e293b;
|
||||
color: #fff;
|
||||
font-weight: 700;
|
||||
text-align: center;
|
||||
width: 120px;
|
||||
}
|
||||
td:first-child {
|
||||
background: #f1f5f9;
|
||||
font-weight: 600;
|
||||
text-align: center;
|
||||
width: 120px;
|
||||
}
|
||||
td img {
|
||||
max-width: 260px;
|
||||
height: auto;
|
||||
display: block;
|
||||
margin: 0 auto 6px;
|
||||
border: 1px solid #cbd5e1;
|
||||
border-radius: 4px;
|
||||
}
|
||||
td br + strong { color: #2563eb; }
|
||||
</style>
|
||||
|
||||
</head>
|
||||
<body>
|
||||
<h1>Phase 5 — Case 2. 세부 단위(팝업·표) 매칭 통합표</h1>
|
||||
<p><strong>비교 대상</strong>: 7개 방법 (키워드 3 + 구조 1 + 의미 3)
|
||||
- 의미 매칭은 <strong>SBERT 한 모델에 3가지 전처리 전략</strong> 적용 (원본/축약/청크)
|
||||
- 세부 단위(팝업·표)가 키워드 vs 의미 매칭 성능 차이를 드러내는지 확인용</p>
|
||||
<p>정답 프레임은 ⭐로 표시했습니다.</p>
|
||||
<table>
|
||||
<thead>
|
||||
<tr>
|
||||
<th>콘텐츠</th>
|
||||
<th>TF-IDF</th>
|
||||
<th>Char 3-gram</th>
|
||||
<th>Kiwi+BM25</th>
|
||||
<th>구조 메타</th>
|
||||
<th>ko-srobert</th>
|
||||
<th>축약+srobert</th>
|
||||
<th>청킹+srobert</th>
|
||||
</tr>
|
||||
</thead>
|
||||
<tbody>
|
||||
<tr>
|
||||
<td><strong>6. MDX01-2-details</strong> (팝업+표)<br>정답 = Frame <strong>18</strong></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>1순위</strong></td>
|
||||
<td>⭐ <img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (91%)<br>BIM과 DX의 이해</td>
|
||||
<td>⭐ <img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (47%)<br>BIM과 DX의 이해</td>
|
||||
<td>⭐ <img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (128.9)<br>BIM과 DX의 이해</td>
|
||||
<td><img alt="17" src="../../data/figma_previews/17.png" /><br><strong>17</strong> (80%)<br>현황 및 문제점</td>
|
||||
<td>⭐ <img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (89%)<br>BIM과 DX의 이해</td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (76%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td>⭐ <img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (83%)<br>BIM과 DX의 이해</td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>2순위</strong></td>
|
||||
<td><img alt="16" src="../../data/figma_previews/16.png" /><br><strong>16</strong> (14%)<br></td>
|
||||
<td><img alt="22" src="../../data/figma_previews/22.png" /><br><strong>22</strong> (6%)<br>Model에 특화된 Engn…</td>
|
||||
<td><img alt="16" src="../../data/figma_previews/16.png" /><br><strong>16</strong> (44.0)<br></td>
|
||||
<td><img alt="01" src="../../data/figma_previews/01.png" /><br><strong>01</strong> (65%)<br></td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (84%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="19" src="../../data/figma_previews/19.png" /><br><strong>19</strong> (64%)<br><strong>설계방식의 왜곡</strong>은 엔…</td>
|
||||
<td><img alt="09" src="../../data/figma_previews/09.png" /><br><strong>09</strong> (76%)<br>시공 전 모델 기반 시공상세…</td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>3순위</strong></td>
|
||||
<td><img alt="24" src="../../data/figma_previews/24.png" /><br><strong>24</strong> (12%)<br>Engn. S/W의 구성 과…</td>
|
||||
<td><img alt="30" src="../../data/figma_previews/30.png" /><br><strong>30</strong> (5%)<br>산업별 현황</td>
|
||||
<td><img alt="17" src="../../data/figma_previews/17.png" /><br><strong>17</strong> (33.3)<br>현황 및 문제점</td>
|
||||
<td><img alt="05" src="../../data/figma_previews/05.png" /><br><strong>05</strong> (60%)<br>보상현황·민원 관리</td>
|
||||
<td><img alt="30" src="../../data/figma_previews/30.png" /><br><strong>30</strong> (80%)<br>산업별 현황</td>
|
||||
<td><img alt="20" src="../../data/figma_previews/20.png" /><br><strong>20</strong> (62%)<br>디지털 전환(DX)은 S/W…</td>
|
||||
<td><img alt="25" src="../../data/figma_previews/25.png" /><br><strong>25</strong> (76%)<br>3rd Party</td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>12. MDX02-2.2-table</strong> (표)<br>정답 = Frame <strong>14</strong></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
<td></td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>1순위</strong></td>
|
||||
<td>⭐ <img alt="14" src="../../data/figma_previews/14.png" /><br><strong>14</strong> (61%)<br></td>
|
||||
<td>⭐ <img alt="14" src="../../data/figma_previews/14.png" /><br><strong>14</strong> (20%)<br></td>
|
||||
<td>⭐ <img alt="14" src="../../data/figma_previews/14.png" /><br><strong>14</strong> (114.8)<br></td>
|
||||
<td><img alt="17" src="../../data/figma_previews/17.png" /><br><strong>17</strong> (80%)<br>현황 및 문제점</td>
|
||||
<td>⭐ <img alt="14" src="../../data/figma_previews/14.png" /><br><strong>14</strong> (89%)<br></td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (64%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="07" src="../../data/figma_previews/07.png" /><br><strong>07</strong> (84%)<br></td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>2순위</strong></td>
|
||||
<td><img alt="12" src="../../data/figma_previews/12.png" /><br><strong>12</strong> (37%)<br>건설산업의 목표 (BIM의 …</td>
|
||||
<td><img alt="12" src="../../data/figma_previews/12.png" /><br><strong>12</strong> (7%)<br>건설산업의 목표 (BIM의 …</td>
|
||||
<td><img alt="12" src="../../data/figma_previews/12.png" /><br><strong>12</strong> (67.8)<br>건설산업의 목표 (BIM의 …</td>
|
||||
<td><img alt="01" src="../../data/figma_previews/01.png" /><br><strong>01</strong> (65%)<br></td>
|
||||
<td><img alt="07" src="../../data/figma_previews/07.png" /><br><strong>07</strong> (85%)<br></td>
|
||||
<td><img alt="08" src="../../data/figma_previews/08.png" /><br><strong>08</strong> (59%)<br>효율적인 정보의 관리와 활용</td>
|
||||
<td><img alt="18" src="../../data/figma_previews/18.png" /><br><strong>18</strong> (74%)<br>BIM과 DX의 이해</td>
|
||||
</tr>
|
||||
<tr>
|
||||
<td><strong>3순위</strong></td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (19%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (6%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (59.3)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="05" src="../../data/figma_previews/05.png" /><br><strong>05</strong> (60%)<br>보상현황·민원 관리</td>
|
||||
<td><img alt="29" src="../../data/figma_previews/29.png" /><br><strong>29</strong> (82%)<br>좌측 배너 과정 (Proce…</td>
|
||||
<td><img alt="15" src="../../data/figma_previews/15.png" /><br><strong>15</strong> (57%)<br>정책목표</td>
|
||||
<td><img alt="09" src="../../data/figma_previews/09.png" /><br><strong>09</strong> (73%)<br>시공 전 모델 기반 시공상세…</td>
|
||||
</tr>
|
||||
</tbody>
|
||||
</table>
|
||||
<hr />
|
||||
<h2>관찰 포인트</h2>
|
||||
<ol>
|
||||
<li><strong>세부 단위에서는 키워드 > 의미</strong>: 팝업·표처럼 구체적 텍스트가 많은 유닛에서는 TF-IDF/Char/Kiwi+BM25 모두 1위 정답. 직접 단어 겹침이 크기 때문.</li>
|
||||
<li><strong>구조 메타</strong>는 두 유닛 모두 동일 결과 (17/01/05) — 세부 단위는 구조적 특징이 거의 같아서 변별력 없음.</li>
|
||||
<li><strong>축약+srobert 전략은 세부 단위에 부적합</strong>: 제목/볼드만 뽑으면 팝업·표의 핵심 내용이 날아감. 두 유닛 모두 실패.</li>
|
||||
<li><strong>청킹+srobert</strong>: 블릿·섹션 구조가 명확한 팝업(6번)은 성공, 표만 있는 12번은 청크 나누기가 애매해 실패.</li>
|
||||
<li><strong>ko-srobert 원본</strong>: 의미 방법 중 세부 단위에 가장 적합. 두 유닛 모두 1위 정답.</li>
|
||||
</ol>
|
||||
</body>
|
||||
</html>
|
||||
Reference in New Issue
Block a user