Anthropic Claude Workbench에서 프롬프트 테스트하기

1. 개요

Claude API를 이용해 챗봇 서비스를 구현하고 있는데, 선택한 타입에 따라 답변을 MBTI F같은 대답, T같은 대답, 반반 이렇게 세 가지로 반환할 수 있게 하였다.

따라서, 프롬프트를 잘 작성해야 하는데 Anthropic 워크벤치를 사용하면 편리하게 테스트해볼 수 있다.

 

2. 사용방법

대시보드에서 'Generate a Prompt'를 클릭한다.

https://console.anthropic.com/dashboard

Anthropic Console

 

 

이렇게, 프롬프트를 적어주면 알아서 구체적으로 바꿔주고, 수정할 부분이 있으면 수정한 뒤 Continue 버튼을 눌러주면 된다.

 

이렇게 user_input을 설정해 놓으면, 요청할 때마다 계속 넣어주지 않아도 그대로 유지되기 때문에 프롬프트를 변경해가면서 답변을 비교해보기 좋다!

 

System Prompt를 따로 설정해주고 싶으면 설정해주면 된다.

 

또, 원하는 모델을 선택하고, Temperature, max 토큰 수도 설정을 해줄 수 있다. 

 

코드로 반환도 바로 해주는데, python과 typescript만 된다..!

java를 사용한다면 직접 요청하고 API 문서를 보면서 프롬프트를 넣어주면 된다. 

 

 

워크벤치는 Evalute탭을 통해, 이전 워크벤치와 비교도 할 수 있다. 설정한 프롬프트도 볼 수 있고, input과 output을 다 보여주기 때문에 Claude의 답변이 프롬프트와 input에 따라 어떻게 달라지는지 편하게 볼 수 있다.

 

추가로, Claude Haiku 모델은 성능에 비해 가격도 정말 저렴해서 ChatGPT API를 사용하려고 한다면, Anthropic API를 사용하는 게 더 효율적일 것 같다..!