Anthropic은 개발자들이 효과적인 프롬프트 엔지니어링을 활용할 수 있도록 새로운 기능을 Anthropic Console에 추가했습니다. 이 기능은 프롬프트를 개선하고 예시 응답을 관리할 수 있게 하여, 개발자들이 Claude를 사용해 기존 프롬프트를 정제할 수 있도록 돕습니다. 프롬프트 개선기는 Claude가 응답하기 전에 체계적으로 생각할 수 있는 체인•오브-생각(reasoning) 방식, XML 형식으로 예시를 표준화하는 방법, 문법 오류를 수정하는 프롬프트 재작성 등을 통해 프롬프트를 향상시킵니다. 사용자는 Claude가 생성한 새로운 프롬프트에 대한 피드백을 제공하여 프롬프트의 품질을 더욱 높일 수 있습니다.

Anthropic의 초기 테스트 결과, 프롬프트 개선기는 다중 레이블 분류 작업에서 정확도를 30% 향상시키고 요약 작업에서 단어 수 준수를 100%로 끌어올렸습니다. 개발자들은 이제 Workbench에서 출력 예시를 관리할 수 있으며, 이는 응답 품질을 개선하는 또 다른 방법입니다. Anthropic은 "이 기능은 명확한 입력/출력 쌍을 가진 새로운 예시를 추가하거나 기존 예시를 편집하여 응답 품질을 개선하는 데 용이하다"고 밝혔습니다. 또한, 프롬프트 평가기를 사용하여 개선된 프롬프트가 다양한 시나리오에서 어떻게 작동하는지 평가할 수 있습니다.

Anthropic은 평가 탭에 "이상적인 출력" 열을 추가하여 개발자들이 5점 척도로 출력을 평가할 수 있도록 했습니다. 이러한 기능들은 프롬프트 엔지니어링의 모범 사례를 더 쉽게 활용하고, 더 신뢰할 수 있는 AI 애플리케이션을 구축하는 데 기여합니다. Anthropic은 "이러한 기능들이 프롬프트 엔지니어링의 모범 사례를 활용하고 더 신뢰할 수 있는 AI 애플리케이션을 구축하는 데 기여한다"고 강조했습니다.