반응형

PromptEngineering 2

프롬프트 설계 전략: 상황별 실무 예시 10종(템플릿·출력계약·보안까지)

TL;DR“상황”을 먼저 분류하고(요약/추출/분류/생성/에이전트), 그에 맞는 출력 계약 + 제약 + 검증 규칙을 붙이면 품질이 안정된다.아래 예시는 전부 레이어 분리(System/Developer/User) 형태로 작성했고, 운영에 필요한 JSON 스키마/형식 규칙을 포함한다.에이전트/도구 호출 시에는 프롬프트 문구보다 권한 최소화 + 출력 검증 + 컨텍스트 격리가 핵심이다.각 예시의 “예상 출력”은 실제 모델 출력이 아니라, 계약이 잘 지켜졌을 때의 샘플 형태를 보여준다.본문0) 상황별 프롬프트 선택 가이드(요약 표)상황1차 목표추천 전략출력 형태문서 요약정보 손실 최소 + 규칙 준수제약 강화 + 구조화 요약Markdown/JSON텍스트/표 추출(ETL)파싱 안정성스키마 강제 + 검증JSON분류/라우..

AI/Technical 2025.12.27

LangSmith: LLM 애플리케이션을 위한 프로덕션급 관찰·테스트 플랫폼

1. LangSmith란 무엇인가LangSmith는 LangChain 팀에서 개발한 생성형 AI 애플리케이션의 프로덕션 환경을 대상한 관찰(observability), 테스트, 평가(evaluation), 디버깅, 성능 모니터링을 통합한 플랫폼입니다. LangChain은 프로토타이핑 도구에 집중한 반면, LangSmith는 본격 운영 단계의 안정성과 품질 확보를 목표로 합니다 .2. 핵심 기능디버깅 & 추적(Tracing)LLM 앱 실행 전체 흐름을 기록하고, 각 단계의 입력·출력·도구 호출 등을 시각화하여 디버깅 가능.테스트 & 평가(Evals)사용자 데이터 기반 테스트셋 구축 및 LLM-as-Judge 평가, 휴먼 피드백, 기준 비교 테스트 등을 지원.프롬프트 엔지니어링Playground UI에서 프..

AI 2025.06.22
반응형