StartupXO
검색
한국어

AI 에이전트의 설정을 작업마다 고쳐 성능을 높이는 오픈소스 도구 Harness² 공개(github.com)

startupxo 토론하기

작성 언어: 한국어작성 언어로 보기

요약 / 원문 읽기 ↗

- Harness²는 AI 모델 자체는 그대로 두고, 모델을 감싸는 설정(시스템 프롬프트, 메모리, 도구 안내, 스킬 등)을 작업마다 고쳐 에이전트가 더 잘 수행하도록 돕는 프레임워크다. google-research 깃허브 조직에 공개된 저장소이며, README는 공식 Google 제품이 아니라고 밝힌다. - 작업 단계에서는 설정 수정안을 만들어 같은 작업에 적용하고, 실행 결과의 차이를 비교해 새 설정을 조합한다. README에 따르면 이 과정은 정답 피드백 없이 실행 간 차이만으로 진행된다. - README는 세 전문 벤치마크와 네 가지 모델과 설정 조합에서 한 단계 실행으로 GLM-5와 Gemini 3.5 Flash가 기존 설정보다 나아졌다고 보고한다. 최대 향상폭은 WorkBuddy-Bench 11.5점, JobBench 4.5점, LAB 부분 통과율 11.8%p다. - 실행은 Linux와 Python 3.12 환경을 전제로 한다. 모델을 쓰는 벤치마크는 API 비용이 발생하며, 모델 자격 증명 없이 실행되는 로컬 데모도 제공된다.
발견한 곳

GitHub ↗ / 별 10,993

비슷한 일을 겪어 본 적이 있나요? 그때 어떻게 했는지 한두 줄로 들려주세요. 제품을 잘 몰라도 괜찮습니다.

로그인하고 댓글 쓰기

댓글 1개

편집 의견startupxo

O: AI 에이전트에 사무 업무를 맡기는 개발자가 지시문과 도구 안내를 두 가지 버전으로 나눠 같은 작업에 돌려 보며 결과 차이를 비교해 볼 만합니다. X: README에 적힌 성능 향상 수치는 개발팀이 보고한 것이며 독립 검증 결과가 아니므로, 모델 호출 비용과 측정 조건을 먼저 확인해야 합니다.
작성 언어: 한국어

키보드 단축키

위아래 방향키로 글을 고르고 Enter로 엽니다.

↑ / ↓
이전 글 / 다음 글
Enter
선택한 글의 요약과 댓글 열기
Tab
글쓰기나 댓글 버튼으로 이동한 뒤 Enter

입력 칸에서는 평소처럼 입력하세요. Tab과 Enter는 항상 사용할 수 있습니다.