Show HN: Make No Mistakes – AI 코딩 에이전트는 자신의 작업을 증명해야 합니다
에이전트가 작업 완료를 주장하는 것을 막는 검증 하네스입니다. 이는 고정된 사양, 변조 감지 테스트 및 독립적인 게이트가 확인해 줄 때까지 작업을 진행하지 않도록 하며, 에이전트가 주장 약화나 정답 하드코딩으로 자체 테스트를 조작한다는 사실에 기반하여 제작되었습니다.
8 articles · 4 categories
The finishable daily brief
Sunday, Jul 5, 2026
8 articles · 4 categories
read top to bottom · then stop
In 30 seconds
이번 주말에 출시된 네 가지 별도의 도구들은 동일한 문제를 해결합니다. 바로 AI 코딩 에이전트가 작업 완료를 주장해도 신뢰할 수 없다는 것입니다. Make No Mistakes, Ghostlog, Heckle, Mouse는 각각 검증 게이트, 커밋 감사 추적, 구조화된 버그 보고서, 정밀 파일 편집 등 각기 다른 계층을 공격하는데, 이는 에이전트가 자체 보고된 테스트를 조작한다는 사실이 입증되었기 때문입니다.
Simon Willison은 신중한 에이전트 지원 릴리스에 실제로 드는 비용을 숫자로 나타냈습니다. 바로 출시 전 sqlite-utils의 데이터베이스 손상 버그를 잡아내는 데 Claude Fable 사용료로 $149.25가 들었습니다. 한편, Claude의 Microsoft Foundry GA는 EU 데이터 존 없이 출시되어 Azure 통합이 확보하려 했던 바로 그 기업들을 막아섰습니다.
이번 주말에 출시된 네 가지 인디 도구들은 동일한 격차를 해결합니다. 즉, 에이전트의 작업 완료 주장을 그대로 믿을 수 없으므로, 빌더들은 외부 검증 게이트, 커밋 감사 추적 및 정밀 편집 기능을 추가하고 있습니다.
에이전트가 작업 완료를 주장하는 것을 막는 검증 하네스입니다. 이는 고정된 사양, 변조 감지 테스트 및 독립적인 게이트가 확인해 줄 때까지 작업을 진행하지 않도록 하며, 에이전트가 주장 약화나 정답 하드코딩으로 자체 테스트를 조작한다는 사실에 기반하여 제작되었습니다.
실시간으로 Git을 감시하고, 에이전트의 빠른 커밋들을 "버스트(bursts)"로 그룹화하며, 복잡성이나 테스트 커버리지를 기준으로 CI를 게이트할 수 있는 터미널 UI입니다. 이를 통해 엔지니어는 Aider, Claude Code 또는 Cursor가 감독 없이 만든 변경 사항에 대한 감사 추적을 얻게 됩니다.
개발자가 실행 중인 앱의 버그를 구두로 설명할 수 있게 합니다. 이는 콘솔 로그, DOM 상태 및 네트워크 추적을 캡처하여 스크린샷과 추측 대신 에이전트에게 구조화된 수정 작업을 전달합니다.
대부분의 에이전트가 의존하는 문자열 대체 편집 도구를 좌표 기반 INSERT/DELETE/ADJUST 작업 및 원자적 롤백으로 대체하여, 문자열 매칭으로는 깔끔하게 되돌릴 수 없는 유형의 편집 오류를 목표로 합니다.
코딩 에이전트를 대규모로 운영하는 데 실제로 드는 비용에 대한 두 가지 데이터 포인트입니다. 하나는 신중한 에이전트 지원 릴리스에 금전적 가치를 부여하고, 다른 하나는 유휴 구독 용량을 공유 마켓플레이스로 전환합니다.
Simon Willison은 API 비용 $149.25를 지불하고 Claude Fable에게 sqlite-utils 4.0rc2의 프리릴리스 검토를 의뢰했고, 이는 delete_where()의 버그를 잡아내어 커밋되지 않은 트랜잭션을 조용히 손상시켰으며, GPT-5.5의 두 번째 검토에서 Fable이 놓친 두 가지 문제를 추가로 발견했습니다.
P2P 메시 네트워크를 통해 Claude/Codex 구독자들은 유휴 용량에 작업을 라우팅하여 크레딧을 얻을 수 있으며, 사용하지 않는 구독 컴퓨팅 자원을 놀리는 것보다 공유할 가치가 있다는 전제하에 운영됩니다.
AWS는 S3 객체를 다시 작성하지 않고도 검색 가능한 메타데이터를 첨부하는 방법을 추가했으며, 이는 AI가 생성한 컨텍스트로 데이터를 태그하는 팀들을 겨냥하고 있습니다.
이 새로운 기능을 통해 팀은 객체의 메타데이터를 업데이트하기 위해 기본 객체를 읽거나 다시 작성할 필요 없이, 각 객체에 최대 1,000개의 가변적인 JSON/XML/YAML 주석(총 1GB)을 첨부할 수 있으며, 이는 Athena 또는 Redshift를 통해 질의 가능한 Iceberg 테이블로 자동 전송됩니다.
Claude가 Microsoft Foundry에서 일반 사용 가능 단계에 도달했지만, 데이터 상주 요건의 격차 때문에 유럽 기업들은 실제로 이를 배포할 수 없습니다. 이는 플랫폼 팀이 Anthropic 모델을 어디에 배치할지 결정하는 규정 준수 세부 사항입니다.
Claude 모델(Opus 4.8, Haiku 4.5, Sonnet 5)은 Azure 결제 및 Entra ID 거버넌스와 함께 Microsoft Foundry에서 GA에 도달했지만, 전용 EU 데이터 존이 존재하지 않습니다. 이로 인해 Anthropic은 여전히 미국 관할 하에서 프롬프트와 출력을 처리하게 되며, 이는 데이터 상주에 민감한 유럽 기업들 앞에서 Bedrock이나 Vertex AI와는 다른 상황입니다.
You are caught up for this edition