Awesome Harness Engineering은 141개 자료를 에이전트 운영의 실패 지도로 바꾼다
walkinglabs의 Awesome Harness Engineering은 141개 리소스를 컨텍스트·검증·권한·관측성·런타임 같은 여덟 설계면으로 분류해, 모델 밖에서 에이전트 신뢰성을 설계하는 읽기 지도를 제공한다.
Blog401 posts
Knowledge WIKI
AI 에이전트, 검색, 문서 AI, 모델 학습을 읽고 만들면서 정리한 글입니다.
분야와 태그로 좁혀 볼 수 있습니다.
401 posts, 38-49 showing
글 목록
AutoDesign은 산출물보다 ‘산출물을 만드는 하네스’를 최적화한다
AutoDesign은 논문을 포스터로 만드는 개별 agent loop를 넘어, rollout 기록·평가·acceptance gate로 재사용 가능한 DesignHarness 자체를 반복 개선하는 meta-harness 프레임워크다.
EviRank는 이미지 검색 재정렬을 ‘유사도’가 아닌 ‘근거 검증’으로 바꾼다
EviRank는 멀티모달 이미지 질의를 Required·Forbidden·Ignore 제약으로 분해하고, 후보가 각 조건을 충족하는지 검증해 재정렬하는 training-free 접근이다.
OPD는 답보다 교사의 정책을 옮기고, 그래서 다중 교사에서 줄다리기가 된다
Every Coin Has Two Sides는 on-policy distillation이 교사의 문제별 정답보다 reasoning behavior를 전이하며, 같은 계보 teacher에서는 범위를 넓히지만 multi-teacher 조합에서는 capab...
그래프 엔지니어링은 에이전트를 더 붙이는 대신, 관계를 운영 대상으로 만든다
Graph Engineering은 LLM 에이전트 시스템의 task·agent·runtime state 관계를 명시적·동적 그래프로 다뤄, 단일 agent loop를 넘어 system intelligence를 설계하자는 survey다.
Skill-Use는 에이전트가 스킬을 ‘갖고 있는가’가 아니라 ‘제때 찾아 끝까지 따르는가’를 묻는다
Skill-Use는 점진적 공개 환경에서 에이전트의 스킬 인식·절차 이행·금지 행동 회피를 분리 측정하는 79개 실전 스킬·177개 sandbox task 기반 벤치마크로, 최강 조합도 SU 0.613에 머문다고 보고한다.
SkillEvo는 스킬 진화를 ‘더 많이 고치는 일’이 아니라 ‘다음 실패를 꺼내는 피드백 루프’로 본다
SkillEvo는 단발 QA 대신 다중 턴 상호작용에서 다음 결함을 드러내고, 사실·구조 거버넌스로 반복 수정의 퇴화를 제어하는 agent skill 진화 프레임워크다.
SkillGate는 에이전트의 ‘어떤 스킬을 읽을까’를 별도 학습 문제로 만든다
SkillGate는 장기 에이전트 RL에서 스킬 이름을 고르는 극소수 토큰이 보상 신호를 거의 받지 못하는 selector credit starvation을 진단하고, 선택과 실행의 credit을 분리한 두 채널 GRPO로 이를 교정한다.
Embodied-Navigator는 VLM에게 3D 좌표 대신 ‘가리키기’를 시킨다
Embodied-Navigator는 VLM이 2D 픽셀 waypoint만 고르게 하고, 선택적 추론·압축 메모리·Two-Level GRPO로 장기 시각 언어 내비게이션을 정렬하는 7B 정책이다.
Unlimited-OCR은 긴 문서 OCR을 고정 KV 캐시 문제로 푼다
Baidu의 Unlimited-OCR은 DeepSeek-OCR의 압축 encoder 위에 Reference Sliding Window Attention을 얹어, 수십 페이지 문서를 한 번의 디코딩 흐름으로 처리하려는 3B급 OCR 모델이다.
J-Space는 추론력을 높이는 스킬인가, 검증 가능한 작업 프로토콜인가
J-Space Cognition Suite V3.6은 모델 가중치를 바꾸지 않고 스킬 문서와 선택형 상태 기록 도구로 장기 작업을 제어하려는 프로젝트다. 구현의 완성도와 공개 벤치마크 주장을 분리해 살펴본다.
Qwen3.8-27B는 27B 모델을 에이전트 실행의 운영 계약으로 확장한다
Qwen3.8-27B는 27B dense 비전-언어 모델에 기본 thinking, 추론 깊이 제어, 보존형 추론 문맥, 262K 네이티브 컨텍스트와 1M 확장 경로를 묶어 장기 에이전트 작업을 겨냥한 Apache-2.0 오픈 웨이트 릴리스다.