- 세무 상담 실데이터 300문항으로 국내외 LLM 9종 비교… 환각·과잉절제 중심 평가체계 제시 제품 소개 대신 검증 데이터로 승부… ‘치명적 오류가 허용되지 않는 도메인의 평가 기준’ 제시

‘열림’은 선발된 스타트업에 OpenAI 엔지니어의 기술 자문과 최신 모델 조기 접근을 지원하는 프로그램으로, 이번 Showcase는 참여 10개 사가 중간 성과와 OpenAI 활용 사례, 향후 개발 계획을 발표하는 자리였다. 알프레드는 다른 기업들이 자사 소개와 모델 적용 현황을 중심으로 발표한 것과 달리, 제품 소개를 최소화하고 발표 대부분을 자체 모델 벤치마크 결과 공유에 할애했다.
특히 평가 방식이 차별점으로 꼽혔다. 답변 하나의 오류가 가산세나 신고 오류로 직결되는 세무 영역의 특성을 반영해, 통상적인 ‘정답률’ 비교가 아니라 어떤 모델이 어떤 상황에서 실수하는지를 규명하는 방향으로 설계했다. 근거 없이 답을 만들어내는 환각, 근거가 충분한데도 답을 회피하는 과잉 절제, 검색된 문서와 자체 기억이 충돌할 때의 선택을 각각 분리해 측정했다.
평가는 2025년 세무 상담 실데이터로 구성한 FAQ 300문항을 국내외 LLM 9종에 적용해 정상, 무관 문서 삽입, 컨텍스트 변조, 근거 부재, 클로즈드북 5개 조건으로 진행됐다. 알프레드는 답변 품질과 절제 판단, 컨텍스트 준수, 추론 속도를 종합해 기존 기준 모델을 유지하기로 했으며, 협업 중인 진영의 최신 모델 일부에서 환각 위험이 높게 나온 결과도 수정 없이 공개했다.
1위 선정에 따라 알프레드는 OpenAI API 크레딧 5000달러를 지원받고, 상위 3개사 중 1개사로 선정되면 오는 11월 성과 공유회에서 OpenAI와 함께 대표 성공사례를 발표한다.
옥형석 알프레드 대표는 “세무 도메인에서는 얼마나 똑똑한지 보다 어떤 상황에서 틀리는지를 알고, 틀리지 않게 하는 것이 서비스 신뢰도를 결정한다”라며 “평가 기준을 먼저 정하고 결과는 나온 대로 공개했다”라고 말했다.
알프레드는 120만 사업자를 대상으로 세무·재무 업무를 수행하는 AI 에이전트를 운영하고 있다. 올해 2월 중소벤처기업부 ‘OpenData × AI 챌린지’ 소상공인 분야 1위, 정부 ‘독자 AI 파운데이션 모델’ 사업 참여에 이어 지난 8월 과학기술정보통신부 ‘모두의 AI’ SK텔레콤 컨소시엄에도 참여사로 이름을 올렸다. 마이크로소프트와 AI 에이전트 기술 협력도 진행 중이다.
알프레드 소개
알프레드는 사업자를 위한 금융 AI 에이전트 기업이다. 2017년 세무법인 혜움의 사내 IT 연구소로 출발해 2026년 5월 사명을 알프레드로 변경했다. 지난 10년간 120만 사업자를 대상으로 5000만 건 이상의 세무·상담 데이터를 축적했으며, 이를 기반으로 경리·세무·급여 등 사업자의 백오피스 업무를 직접 수행하는 에이전틱 AI를 개발하고 있다. 2024년 중소벤처기업부 초격차 스타트업에 선정됐고, 2026년 2월에는 중기부가 주관한 ‘OpenData X AI 챌린지’ 소상공인 맞춤형 컨설팅 부문에서 우승했다. 한국투자파트너스, 스톤브릿지벤처스, IBK기업은행, 쿼드벤처스, 키움인베스트먼트 등으로부터 누적 210억원의 투자를 유치했다. 알프레드는 소상공인이 반복 업무에서 벗어나 본업에 집중할 수 있는 환경을 만드는 것을 목표로 한다.
언론연락처: 알프레드 마케팅팀 유소민
이 뉴스는 기업·기관·단체가 뉴스와이어를 통해 배포한 보도자료입니다.
ⓒ DNN & dnnkorea.kr 무단전재-재배포금지
BEST 뉴스
-
남수단 대통령 특사 방한… 한국·남수단 협력의 새 장 열다
이태석재단을 방문한 아둣 살바 키르 마야르디트 남수단 특사와 대표단이태석 신부의 사랑과 헌신으로 시작된 한국과 남수단의 인연이 양국의 실질적인 협력으로 이어지고 있다. 이태석재단(이사장 구수환)은 살바 키르 남수단 대통령의 장녀인 아둣 살바 키르 마야르디트 대통령 특사를 초청해 3박 4일간의 방한 일정... -
도봉노인종합복지관, 개관 26주년 기념 ‘도봉 어르신 문화축제’ 성료
도봉 어르신 문화축제 전경서울시립도봉노인종합복지관(관장 이은주)은 개관 26주년 및 노인의 날을 맞아 지난 10월 13일(화) 지역 어르신과 주민 약 1000명이 참여한 가운데 2026년 도봉 어르신 문화축제 ‘스스로 스마트를 즐기자!’를 성황리에 마쳤다고 밝혔다. 이번 축제는 스마트 기기와 AI 기술이 보편화되는 시대... -
국화꽃처럼 활짝 핀 웃음꽃… 디엔엔 사회적협동조합, 장애인과 함께한 행복한 가을 나들이
디엔엔 사회적협동조합(이사장 이채현)은 지난 11월 4일(수) 오전 11시, 장애인들과 함께 제26회 마산가고파국화축제 현장을 찾아 지역사회 탐방 행사를 진행했다. 이번 행사는 장애인들이 지역의 대표적인 문화축제를 직접 경험하고, 아름다운 자연과 문화를 함께 즐기며 지역사회 구성원으로서... -
한국자폐인사랑협회, 제1회 공익활동 임팩트 어워드 ‘행정안전부 장관상’ 수상
오른쪽부터 한국자폐인사랑협회 김용직 회장과 윤호중 행정안전부 장관이 대한민국 공익활동 임팩트 어워드 한국자폐인사랑협회 ‘행정안전부장관상 표창’ 기념 촬영을 하고 있다한국자폐인사랑협회(회장 김용직, 이하 ‘사랑협회’)는 10월 14일(수) 서울 여의도 FKI타워에서 개최된 ‘제1회 대한민국 공익활동 임팩트 어워... -
발달장애인과 함께하는 우리 동네 환경사랑! 산호동 줍킹 봉사활동
2026년 11월 6일(금) 오전, 디엔엔사회적협동조합은 봉사활동의 일환으로 발달장애인들과 함께 창원시 마산합포구 산호동 일대에서 '줍킹' 활동을 진행했다. 이번 활동은 발달장애인들이 지역사회의 일원으로서 환경보호에 직접 참여하고, 건강한 신체활동과 봉사활동을 통해 지역사회 참여... -
한국자폐인사랑협회, 발달장애인 재산관리지원서비스 성과보고회 성료
한국자폐인사랑협회, 발달장애인 재산관리지원서비스 성과보고회한국자폐인사랑협회(회장 김용직, 이하 ‘사랑협회’)는 10월 16일(금) 오후 2시 서울 여의도 이룸센터 누리홀에서 ‘2026년 한국자폐인사랑협회 재산관리지원서비스 성과보고회’를 개최했다고 밝혔다. 이번 성과보고회는 ‘발달장애인 재산관리 전문지원체계...
