프로도의 블로그

에이젼틱 워크플로우를 만들다 보면 일관성 없는 결과가 나온다는 말해 공감하게 됩니다. 공유한 글에서 나오는 것과 같이 프롬프트와 콘텍스트를 이용하여 일관성을 유지할 수 있습니다.개인적인 경험을 통해 제가 고려하는 몇 가지 사항을 더 적어보겠습니다. 먼저, 일관성 있는 결과와 정확한 근거 기반의 결과가 나왔는지 평가하는 과정 그리고 평가 결과에 따라서 결과물을 업데이트 하는 단계가 필요합니다. 이러한 작업을 위해 critique, reflexion 단계를 추가합니다.두 번째 순차적인 단계로 진행하는 워크플로우라면 최대한 에이전틱 워크플로우를 사용하지 않습니다. 또는 최소한을 사용합니다. 예를 들어 자료를 수집하고 요약하고 동일한 템플릿에 보고서를 만든다면 요약하는 부분만 LLM을 사용합니다. 굳이 워..

AI 기반 워크플로우 자동화 및 LLM 적용 경험 공유최근 AI와 자동화를 활용한 과제를 진행하며 얻은 소중한 경험과 인사이트를 공유하고자 합니다. 이번 과제를 통해 업무 효율성을 극대화하고 LLM 적용 시 마주칠 수 있는 현실적인 문제와 해결 과정에 대해 깊이 있게 이해할 수 있었습니다.과제 개요 및 성과:기존에 사람이 직접 자료 취합, 정리, 보고서 작성, 메일 발송까지 담당했던 일련의 업무 워크플로우를 자동화하는 poc를 진행했습니다. 자동화 결과물은 사람이 직접 만든 결과와 유사하거나 오히려 더 높은 품질을 보였고, 사람이 수작업으로 처리하기 어려운 방대한 양의 정보까지 포함할 수 있었습니다. 특히, 보고서 전체를 읽지 않아도 핵심 내용을 파악할 수 있도록 각 단락에 요약 기능을 추가하여 가독성..