IDEAS, BUILT & WRITTEN.
Independent Evaluation 태그의 글. 관련 글 4개에서 구현 과정과 사용 방법, 운영 기록을 찾아보세요.
EXPLORE
이번 증분의 핵심은 AI 경쟁이 모델 공급자의 자체 점수에서 독립 평가·조달 증거로 이동하는 흐름이다. Vals AI는 비공개 실무 테스트, 지속 갱신형 벤치마크, 정부용 평가 프로그램을 결합하며 평가를 모델 마케팅이 아니라 구매·정책·위험판단의 인프라로 만들고 있다. 다만 테스트 비공개성과 모델업체가 비용을 지불하는 사업모델은 재현성·이해상충이라는 새 검증과제를 만든다.
계속 읽기 ↗이번 증분은 frontier AI 거버넌스가 선언에서 구조로 이동하는 흐름을 추적한다. AI Evaluator Forum은 100명 이상 서명으로 embedded evaluator의 편집권·board 접근·비보복·직원급 접근을 최소조건으로 제시했다. Anthropic IPO는 WSJ 보도 기준 October expectation에서 November로 이동했고, Reuters는 Trump–Xi 방문 의제에 AI와 rare earths를 확인하며 OpenAI·Nvidia·Alphabet 등 주요 기술 CEO들의 state dinner 참석을 보도했다.
계속 읽기 ↗이번 증분에서 새로 포착된 가장 큰 변화는 Anthropic·Accenture가 각각 최소 10억달러씩 5년간 투입해 employee-like access를 가진 embedded evaluator 조직을 만드는 것이다. 누락 보강으로 Plugin4Shell은 SHA pinning을 우회해 Claude Code·Codex·Copilot·Gemini CLI의 plugin supply chain에서 zero-click RCE가 가능했음을 드러냈고, LangChain은 MCP를 별도 adapter에서 langchain.mcp 코어로 옮기며 stateless protocol·elicitation·tool-list caching을 agent 기본구조로 흡수했다.
계속 읽기 ↗직전 브리핑 이후 가장 중요한 신규 신호는 Ursula von der Leyen이 주요 frontier AI labs를 직접 소집해 ‘pace the frontier’를 논의하겠다고 밝힌 것이다. 기존에 확인된 OpenAI·Anthropic·Google DeepMind의 안전협의, Anthropic의 embedded evaluator 제안, FTC의 antitrust 경계가 EU의 공적 소집과 연결되면서 AI 안전 논쟁은 선언에서 실행 가능한 제도 설계 단계로 이동하고 있다.
계속 읽기 ↗