
1,368건의 AI 실패 사례와 평가(Eval)가 주는 교훈 — 비샬 스리바스타바 & 탄마이 사, 뉴욕 라이프
원제 · 1,368 AI Failures and What They Teach About Evals — Vishal Srivastava & Tanmay Sah, New York Life
AI 시스템 평가는 빈도 중심이 아니라 인간 개입과 배포 통제 장치를 포함한 전체 시스템의 위험 기반으로 이루어져야 한다.
이전 5페이지 (약 120개 비디오)

원제 · 1,368 AI Failures and What They Teach About Evals — Vishal Srivastava & Tanmay Sah, New York Life
AI 시스템 평가는 빈도 중심이 아니라 인간 개입과 배포 통제 장치를 포함한 전체 시스템의 위험 기반으로 이루어져야 한다.

원제 · How to Test AI Agents When No Benchmark Exists — Nathanael Weill, Air Canada
공개 벤치마크가 없는 AI 에이전트 개발 환경에서는 데이터로부터 역으로 테스트 케이스를 자동 생성하여 코드 기반 검증 루프를 구축해야만 성능을 빠르게 개선할 수 있다.

원제 · Why AI Writing Still Reads Like Slop — Louis-François Bouchard, Towards AI
인공지능 글쓰기의 부실함을 객관적으로 측정하는 새로운 벤치마크인 ToneBench는 모델별 창의적 글쓰기 성능을 정량화하고 효율적인 프롬프트 작성 및 다중 초안 병합 전략을 제시한다.

원제 · ShipSF Workshops - Embed Generative UI Agents in Your App with Codex and Vercel
OpenAI Codex와 Vercel 샌드박스를 활용하면 기존 애플리케이션에 사용자 선호도를 반영하는 동적 생성형 UI 에이전트를 10분 만에 구축하고 배포할 수 있다.

원제 · Fast AI panel: A conversation with Cerebras, TypeSafe AI, and Vercel
AI 추론 속도를 기존 GPU 대비 15배 이상 극적으로 높이면 사용자가 대기 시간 없이 실시간으로 상호작용할 수 있으며, 이는 소프트웨어와 웹 인터페이스의 새로운 시장을 창출한다.
Eve 프레임워크 기반의 슈퍼 에이전트 V는 데이터 팀의 D0와 V0의 시각화 도구를 조합하여 8주간 4억 5천만 건의 다운로드 분석 리포트를 노션에 자동으로 생성한다.

원제 · ShipSF Workshops - Build an agent that plays a game for you
Vercel의 플루이드 컴퓨트와 데몬 등 새로운 백엔드 프리미티브를 활용하면 서버리스 환경에서 파이썬 및 다양한 언어로 구성된 멀티플레이어 게임 에이전트와 복잡한 애플리케이션을 구축하고 배포할 수 있다.
클릭하우스는 월간 오픈소스 릴리스와 컴퓨팅-스토리지 분리 아키텍처를 기반으로 페타바이트 규모의 분석 데이터베이스에서 범용 데이터 플랫폼으로 진화했습니다.

원제 · The Third Customer: A Fireside with Tobi Lütke and Guillermo Rauch
쇼피파이는 수작업 코딩 방식을 벗어나 AI 에이전트와 러스트 기반 인프라를 전면 도입하는 검증 엔지니어링 체제로 전환하며 개방형 커머스 프로토콜을 확장하고 있다.
노션 워커는 Vercel 샌드박스와 브로커드 자격 증명을 활용해 AI 에이전트가 안전하고 자율적으로 커스텀 도구를 만들고 실행할 수 있는 환경을 제공합니다.
EVE는 로컬 개발을 넘어 클라우드 환경에서 대규모로 에이전트를 안정 실행하고, 워크플로 최적화와 자기 진화를 지원하는 프로덕션 수준의 하니스 프레임워크이다.

원제 · Building in an AI-First World: The Agentic Shift on AWS + Vercel
Vercel 배포의 60%를 에이전트가 주도하고 5만 토큰 규모의 멀티 에이전트 오케스트레이션이 대중화되면서, 소수 엔지니어 팀이 AWS와 Vercel 인프라 기반에서 소프트웨어를 구축하는 에이전틱 전환이 현대 웹 역사상 가장 빠르게 진행되고 있다.

원제 · Building High Performance Agents with Claude Managed Agents on Vercel
앤스로픽의 클라우드 관리형 에이전트와 Vercel 인프라를 결합하고 두뇌-손 분리 아키텍처와 동적 워크플로우를 적용하면 고성능 다중 에이전트 시스템을 안전하게 구축할 수 있다.

원제 · Can an agent use your website? How Ora finds out with eve
현재 웹사이트의 4%만이 에이전트를 지원하며, 홈페이지와 문서 페이지에 LLM.txt를 연동하고 마크다운 트윈을 구축해야 에이전트 유입률을 높일 수 있다.

원제 · Control Without the Sprawl: How Mercor Unlocked Hundreds of Builders with Vercel
Mercor는 Vercel의 Passport와 AI Gateway를 도입하여 보안 검토나 조달 절차의 병목 없이 2,000개 이상의 프로젝트와 수백 명의 빌더를 안전하게 지원합니다.
메타 슈퍼인텔리전스 랩스는 소규모의 자율적인 팀 구성과 Vercel과의 긴밀한 인프라 협업을 바탕으로, 에이전트 중심의 고속 개발 체계를 구축하여 초지능의 대중화를 추진하고 있다.
SAP는 단 9개의 프리미티브와 동적 컴포지션 카탈로그를 활용해 클라이언트 업데이트 없이 런타임에 엔터프라이즈급 생성형 UI를 구현한다.
인간과 에이전트는 정보 검색, 읽기 및 쓰기 패턴, 그리고 상호작용 방식에서 근본적인 차이가 있으므로 에이전트 시대에는 이에 맞춘 별도의 아키텍처와 평가 체계가 필수적이다.

원제 · 10 Trillion Tokens, One Decision: The Router Behind Brazil’s Largest AI Platform
아뎁타는 모델 에이그노스틱 라우터와 원격 파견 엔지니어 모델을 통해 브라질 최대의 AI 플랫폼으로 성장하며 연간 7천만 달러의 흑자 매출을 달성했다.
Vercel은 프론트엔드 배포 플랫폼을 넘어 파이썬 백엔드, 컨테이너, 상태 유지 데몬, 에이전트 스택 및 기업용 제어 플레인을 통합한 에이전트 인프라로 확장되었다.

원제 · Superintelligence at Work: How Vercel Built v in Slack
Vercel은 오픈소스 프레임워크 EVE와 Slack 플랫폼을 결합하여 사내 모든 하위 에이전트를 통합하는 관문인 V를 구축하고, 업무가 이루어지는 흐름 속에서 멀티플레이어 에이전트 협업과 보안을 동시에 달성했다.
PHP 취약점 사태는 인공지능 기반의 빠른 취약점 발견 속도가 기존의 보안 공개 및 패치 체계를 위협하는 현실을 보여준다.

원제 · The AI Content System Behind 200M Views — Sarah Chieng, Cerebras & Cova Lee, OpenAI
AI 콘텐츠 제작의 핵심은 자동화 도구와 맞춤형 스킬로 컷 편집, 자막, 배포 같은 반복 노무를 제거하고, 제작자 본인은 고유한 관점 구축과 패키징 기획에 시간을 집중하는 것이다.

원제 · Anthropic Just Dropped Claude Duet (Here's How To Get Access)
Claude Duet은 독자적인 가상 컴퓨터와 브라우저를 기반으로 24시간 능동적으로 작동하며 사용자를 대신해 연결된 앱을 관리하는 개인 비서 AI 에이전트이다.
24장로딩 중...