피드백 루프

Databricks Genie 입문

Gang Wang

Senior Data Scientist

모니터링이 중요한 이유

nanobanana: half: 한쪽에는 비즈니스 용어, 다른 쪽에는 기술적 컬럼명, 가운데에 단절

평점 및 상태가 표시된 대화 기록이 있는 모니터링 페이지

nanobanana: half: 대화 목록, 상태 배지, 좋아요/싫어요 아이콘이 표시된 모니터링 페이지

모니터링 페이지에서 실패 원인 진단하기:

피드백 루프 사이클

1단계: 검토

History 탭에서 답변 없는 쿼리나 낮은 평점을 정기적으로 확인하세요.

피드백 루프 사이클

2단계: 진단

용어 누락, 잘못된 조인, 계산 오류 중 어느 문제인지 파악하세요. 원인에 따라 Synonyms, Relationships, SQL Examples 중 무엇을 추가할지 결정할 수 있습니다.

피드백 루프 사이클

3단계: 큐레이션

Synonyms, Relationships, SQL Examples를 활용해 수정 사항을 적용하세요.

피드백 루프 사이클

4단계: 검증

사용자의 쿼리를 다시 실행해 Genie가 제대로 학습했는지 확인하세요. 이 사이클을 반복하면 정확도가 지속적으로 향상됩니다.

recraft: half: 실패한 쿼리가 새로운 SQL 예제로 변환되는 다이어그램, 빨간 X가 녹색 체크로 바뀌며 실수에서 학습하는 과정

팁: 실패한 쿼리는 모두 큐레이션의 기회입니다. SQL 예제로 등록하면 같은 실패를 반복하지 않아도 됩니다.

Databricks Genie 입문