2024 · AI & Machine Learning35:35조회 1.4K
넥슨의 LLM 에이전트 길들이기: 인프라 모니터링 서비스 적용 사례
발표자
- 김
김영민
수석 AI/ML 컨설턴트 · AWS
- 김
김태효
팀장 · 넥슨
- 박
박종민
엔지니어 · 넥슨
세션 소개
넥슨과 AWS는 Amazon Bedrock(클로드) 서비스와 랭체인 기반의 LLM 에이전트 기술을 활용하여, 다양한 인프라 모니터링 서비스의 연결성과 사용 편의성을 향상시키기 위해 챗봇을 개발했습니다. 챗봇 개발 과정에서 발생한 응답 지연 및 환각 문제의 해결 방안을 공유하고자 합니다. 또한, 기존의 ReAct 접근 방식을 보완하는 다양한 시도에 대해서도 전달 드립니다.




