IDEAS, BUILT & WRITTEN.

AI Inference 태그의 글.

AI Inference 태그의 글. 관련 글 5개에서 구현 과정과 사용 방법, 운영 기록을 찾아보세요.

THE YOON DATA JOURNAL이야기 읽기 ↓

EXPLORE

찾고 있는 기록 5

YOON
DATA.
NOTES & PERSPECTIVES ↗

미국 2026년 9월 19일 AI 브리핑: xAI STT 2.0가 기본값으로 전환되고, GLM은 속도 티어를 분리하며, AMD는 에이전트 비용을 CPU까지 다시 계산한다

이번 증분은 모델 출시 자체보다 배포 후 운영경제가 바뀌는 세 변화를 추적한다. SpaceXAI의 Grok Voice Transcribe 2.0는 출시문에서 soon-default였지만 현재 공식 Speech-to-Text 문서는 이미 2.0을 기본값으로 지정한다. Z.ai의 GLM-5.3-FlashX는 같은 모델 계열에 별도 고속 serving tier를 만들어 지연시간에 가격을 붙이고, AMD는 agentic AI가 retrieval·tool call·code execution·state를 묶으면서 CPU와 시스템 유연성이 비용의 일부가 된다고 주장한다.

계속 읽기 ↗
YOON
DATA.
NOTES & PERSPECTIVES ↗

미국 2026년 9월 16일 AI 브리핑: Euclyd는 추론칩에 2억유로를 모으고 Arcee는 모델 이동성을 compute scheduler까지 넓혔다

직전 브리핑 이후 새로운 대형 frontier model/API 속보는 확인되지 않아 재탕하지 않았다. 대신 기존 브리핑에 미반영된 9월 15일 고가치 사건을 보강했다. Euclyd는 2억유로 이상 Series A로 agentic-AI inference silicon·memory·rack system을 동시에 개발하고, Arcee AI는 차기 flagship LLM의 일부 compute-intensive workload를 CIQ Fuzzball로 이기종 cloud/GPU/on-prem에 배치한다. Lectra는 fashion product data와 산업별 agents를 한 SaaS workflow에 묶은 Apogy를 출시해 vertical agentic AI가 generic chat보다 domain data·digital twin·approval workflow를 중심으로 이동하는 신호를 보였다.

계속 읽기 ↗
YOON
DATA.
NOTES & PERSPECTIVES ↗

미국 2026년 9월 16일 AI 브리핑: Anthropic은 2.16GW 추론 거점을 선점하고 Meta는 ‘자율 안전’ 노선을 택했다

직전 브리핑 이후 새로 공개된 핵심 신호는 Anthropic의 호주 2.16GW 데이터센터 임차와 AI 안전 거버넌스의 분화다. Anthropic은 Queensland의 Western Downs Digital Park 용량을 inference에 활용하는 첫 호주 데이터센터 계약을 맺은 것으로 Reuters가 보도했고, Meta의 Mark Zuckerberg는 업계 공동 감속보다 경쟁·책임·독립평가를 통한 개별 랩의 자율 안전을 주장했다. 동시에 New York은 데이터센터에 MW당 최소 100만달러 규모의 지역사회 투자 협상을 권고하며 AI 인프라의 사회적 비용을 제도화하기 시작했다.

계속 읽기 ↗
YOON
DATA.
NOTES & PERSPECTIVES ↗

미국 2026년 9월 15일 AI 브리핑: Cisco가 에이전트 비용·행동을 관측하고 Cirrascale은 모델·칩 라우팅을 생산단계로 전환

이번 증분 브리핑은 기업 AI의 다음 병목이 모델 자체보다 운영 제어층으로 이동하는 두 사건을 추적한다. Cisco/Splunk는 on-prem AI POD, Agent Observability Tokenomics, runtime guardrails와 AWS 공동개발을 묶어 에이전트의 행동·비용·보안을 한 운영계층에서 관리하기 시작했다. Cirrascale은 Inference Platform을 production release로 전환해 NVIDIA·AMD·Qualcomm·Tenstorrent 간 accelerator selection, model routing, private fine-tuning, on-prem Gemini를 한 플랫폼에 결합했다.

계속 읽기 ↗
YOON
DATA.
NOTES & PERSPECTIVES ↗

미국 2026년 9월 15일 AI 브리핑: Axelera 600고객·AI Factory 계약, 유럽 추론칩이 상용 스케일로 이동

직전 브리핑 이후 새로 확인된 고가치 변화는 Axelera AI가 Europa 추론칩의 AI Factory 공급계약과 600개 이상 고객을 공개한 것이다. Europa 자체는 2025년에 이미 발표됐으므로 이번 사건의 본질은 신제품 공개보다 상용화·서버/AI Factory 확장이다. EuroHPC의 IT4LIA·HammerHAI 채택, Dell/E4 통합, 최근 데이터센터 시스템 아키텍트 채용까지 연결하면 Axelera는 edge AI 업체에서 sovereign inference infrastructure 업체로 이동 중이다.

계속 읽기 ↗