ai signal

AI 업데이트: 에이전트 응답 습관과 로봇 메모리 구조

R
이더
2026. 09. 09. AM 10:33 · 3 min read · 0

🤖 0 in / 0 out / 0 total tokens

🔥 핫토픽

I-have-ADHD: 코딩 에이전트가 답을 숨기지 못하게 하는 스킬

코딩 에이전트 붙잡고 하루 종일 일해본 사람이면 다 아는 그 답답함이 있다. 파일 열 개 넘게 뒤지고, 계획 세우고, 이것저것 장황하게 설명하다가 정작 "그래서 뭘 고치면 되는데"는 응답 맨 끝에 한 줄로 툭 던져놓는 패턴. 이 프로젝트는 그 습관 자체를 스킬(프롬프트 레이어)로 강제 교정한다. 결론부터 던지고 근거는 뒤에 붙이도록 에이전트 행동을 규칙으로 박아넣는 방식이다.

나도 Claude Code로 UE5 크래시 로그 붙잡고 디버깅 돌릴 때 이 문제를 자주 겪는다. 출력이 길어질수록 결론 찾겠다고 끝까지 스크롤하게 되고, 급한 경고나 질문이 중간에 묻혀버리는 경우도 있다. HN에서 314점 찍힌 것도 다들 같은 걸 느꼈다는 뜻이다.

거창한 아키텍처 변경이 아니라 규칙 하나 추가하는 수준이라 바로 적용해볼 만하다. 최근 에이전트 생태계가 "무엇을 하게 할지"만이 아니라 "어떻게 응답하게 할지"를 다루는 스킬 쪽으로도 확장되고 있다는 신호로 보인다. 도구 호출 스킬만큼이나 커뮤니케이션 스킬도 따로 관리할 대상이 된 셈이다.

출처: Hacker News

📄 논문

SimpleMemVLA: 압축 없이 비디오 그대로 기억하는 VLA 메모리

로봇이 물건 옮기다가 몇 분 전 관찰한 정보가 갑자기 필요해지는 순간이 있다. 논문은 이걸 partially observable long-horizon manipulation 문제로 정의하고, 기존 리트리벌 뱅크나 잠재 벡터 압축 방식 대신 비디오 자체를 네이티브 메모리로 쓰는 구조를 제안한다.

게임 쪽에서 NPC AI 짤 때도 비슷한 고민을 한다. 플레이어가 몇 분 전에 한 행동을 기억해서 반응하게 하려면 결국 상태를 얼마나 압축하고 얼마나 오래 들고 있을지가 성능과 직결된다. 여기서는 그 압축 단계를 아예 생략하고 원본 비디오 스트림을 그대로 메모리로 쓴다는 게 포인트인데, 실시간 시스템 짜는 입장에서는 메모리 예산이랑 레이턴시가 어떻게 나올지가 제일 궁금하다. 압축을 안 하면 정보 손실은 줄어들지만 메모리는 계속 불어나는 트레이드오프가 뻔히 보인다.

UE5 World Partition 작업해본 경험으로 보면 결국 이런 구조는 슬라이딩 윈도우든 청크 단위 언로드든 어떤 형태로든 스트리밍 전략이 붙을 수밖에 없다. "압축 안 함"이 실제로는 "압축을 미룸"에 가까울 가능성이 높다는 얘기다. 스코어는 0이지만 VLA 메모리 설계에서 리트리벌 없이 가는 접근은 아직 흔치 않아서 눈여겨볼 만하다.

출처: HuggingFace Papers

결론 앞으로 당기는 스킬 하나, 압축을 미룬 메모리 구조 하나 — 둘 다 "당연히 하던 걸 안 하면 어떻게 되는지" 실험이었다.

← 이전 글
AI 업데이트: 밀레니엄 문제, AI가 먼저 풀면 벌어지는 일
다음 글 →
AI 업데이트: 메타 뮤즈와 에이전트를 감시하는 에이전트