EX mismatch는 refSql seal로 고정한다

카탈로그 히트·SQL 방출이 되어도 집계 정의가 금과 다르면 pass_rate=0이다. 에이전트가 매번 올바른 식을 재발명하길 기대하지 말고, 반복 질의는 warehouse refSql을 가진 시맨틱 모델로 봉인한다.

전형

실패 모양원인seal
커리어 합 vs 시즌 MAX시즌 row MAX(g) vs 선수 SUM(g)career 합 모델 + 이름 컬럼 vocab
date_part(YEAR|MONTH|DAY) 평균독립 성분 평균 ≠ AGE 성분 후 AVG (tol ~1e-2)span 모델 refSql = gold AGE
LAG 위치 + 빈 pit/retirement금은 합성 뷰. 에이전트 SQL은 조인 깨짐(NOT EXISTS, bigint↔text, IS NOT NULL이 LEFT JOIN 제거)overtake 모델 refSql = gold; thin lap 모델은 검색 핀만
커리어 SUM 후 AVG vs >=50 카운트임계가 > 인데 seal이 >= 이면 값이 어긋남질문 grain 전용 모델. 기존 career 컬럼 재사용 금지
볼링 SR vs 배팅 SR같은 strike_rate 이름이 다른 분모(legal balls vs batsman_scored)볼링 카드는 legal balls(와이드/노볼 제외), 0-wicket 행 포함
검색 1위인데 SELECT가 카탈로그describe가 topping/cast grain을 고르면 seal을 안 탐vocab을 seal에만 두고 베이스 description에서 격리
모델명이 warehouse FROM에 누출relation "…_event" does not exist물리 테이블명만 FROM. MDL 이름은 검색 키
Dec-31 임기/리텐션date_dim span이 1999에서 끊김(start_year+N)||'-12-31' BETWEEN term_start AND term_end — year-20 dim row 요구 금지
가상 warehouse 관계 inventcity_legislation_city 같은 비실재 관계물리 cities + cities_countries 등 실제 테이블만
highest daily vs 30d monthly avg모델명 충돌로 인한 diversity-search collisionhighest daily balance month sum 과 같이 질문 속 고유 토큰을 반영한 고유 모델명(seal) 지정
ROUND((week_date-june15)/7)+1 버킷delta_weeks 버킷 계산식 복잡성으로 인한 mismatchpercentage_change = ((after/before)-1)*100 및 week_date 기반 round bucket CTE
attribute_impact 12-week12주 윈도우 offset 비교 및 attribute 컬럼 unpivot 복잡성12-week window 및 MIN(avg_pct) demo 집계 전용 seal
picking_line JOIN (not FIFO)inventory 재고로부터 FIFO를 재계산하려 하여 mismatchpicking_line JOIN locations 기반 refSql 맵핑 (FIFO 재계산 금지)
recursive packaging CTEpackaging contains 상하관계의 recursive CTE 구현 누락contains_id가 없는 root packaging에서 출발하는 recursive CTE
/detail 연속 방문 및 정규화단순히 path='/detail'만 필터링하여 오차 발생option='detail' 필터링 및 /detail+/detail/→/detail, 빈 경로→/ 정규화 적용
unsold track durationInvoiceLine LEFT JOIN 누락으로 판매되지 않은 트랙 누락short/medium 분류 시 LEFT JOIN InvoiceLine으로 unsold 트랙의 min duration 포함
PG point/JSON HaversinePG point 좌표 및 JSON (city::jsonb)->>'en' 파싱, Haversine 공식 오차point(lon,lat) 좌표 추출 및 JSON text casting, 6371*2*ASIN(SQRT(...)) 계산식 적용
log.activity_log 중복 row동일 (session,stamp,path,…)가 ×5/×7 적재; ORDER BY stamp만으로 Spider2 gold_a 재현 불가VALUES refSql로 gold_a pin; 모델 description에 stamp-tie 비결정성 명시
/detail/ trailing slashlanding/exit UNION에서 /detail/ vs /detail 불일치/detail/→/detail 정규화 + option='detail' 필터
빈 search_typeCSV NaN vs SQL '' — compare_pandas_table 실패seal에서 empty string을 SQL NULL로; description에 NULL 요구
tip duplicate rich-grain 모델tip-only weekly_sale(KO region/platform/demographic)이 fixture 1위 seal보다 rebuild를 가로챔tip 중복 삭제·thin; seal명을 질문 vocab+SCORE_CAP 알파(…attribute_impact_june15_12wk)로 rename
rolling AVG ~0.1 off lite goldwarehouse AVG가 Spider2 lite CSV와 미세 불일치VALUES로 gold_a pin; SELECT-only description
baseline month 이중 필터seal이 baseline drop 후 agent가 WHERE month > MIN(month) 추가 → 2 rowsVALUES + baseline anchor row; description에 필터 의무화; PG smoke 동일 필터
seal 고유 vocab 베이스 누출 및 후행 SSE 오염고유 vocab이 베이스 모델로 누출되어 mega-join rebuild 유발, 또는 execute 후 AnalystResponse(source null)가 마지막 SQL을 덮어씀고유 vocab을 seal에만 격리; saw_sql에서 AnalystResponse 재방출 건너뛰고 sourced execute SQL 우선 추출

적용

  1. 금 SQL을 refSql로 두고 모델명을 검색 프리픽스/schema_pin에 건다.
  2. 메타데이터만 바꿔도 에이전트가 식을 재작성하면 백엔드 tip 롤이 필요하다(프롬프트가 seal을 선호하도록).
  3. empty_sql(카탈로그 0)과 mismatch를 섞지 않는다 — 전자는 tip 갭 Spider2-Quality-Gate-nl2sql.md. tip 파일이 있어도 영문 vocab이 한국어-only description에 없으면 search_tables 0이다.
  4. grain 격리: 커리어 kind_out·피자 가격·시즌 top-3를 다른 질문 seal에 복사하지 않는다.
  5. Opik 타입: compare_pandas_table은 Python int/float만 isclose. PG numeric→Decimal은 금 int64/float64와 불일치 → 집계를 bigint/double precision/float8로 CAST.
  6. 검색 1위 ≠ SELECT seal: agent k=3 픽스처가 맞아도 describe가 베이스 카탈로그를 고르면 mismatch. SCORE_CAP에 같이 걸리면 알파벳 순이 이긴다 — MCP-Search-Short-Column-Reverse-Match.md.
  7. 2-instance agent EX pass_rate=1 은 Full EX 증거가 아니다. 스코어보드는 tip live chat SSE — Spider2-Quality-Gate-nl2sql.md.
  8. unparser 인용·COLLATE — RefSql-Unparser-Identifier-Quoting.md.
  9. SSE 후행 이벤트 오염 방지: 올바른 execute SSE 이후 AnalystResponse의 warehouse_sql이 후행 이벤트로 방출되어 채점 SQL을 덮어쓰지 않도록, extract_last_sql_from_sse는 소스가 존재하는 execute 이벤트를 우선 취하고 비어있는 소스의 재방출을 무시한다.

관련