Jeff Farris

Jeff Farris는 NVIDIA Nemotron 데이터, 스케일링 및 평가 팀의 프린시펄 리서처입니다. 초기 학습 신호를 활용해 모델 역량을 예측하고, 이를 바탕으로 데이터 및 학습 의사결정을 지원하는 평가 방법을 개발하고 있습니다. 실제 추론 서빙 작업에서 AI 코딩 에이전트를 평가하는 벤치마크 SWE-Serve를 공동 개발했습니다. NVIDIA 합류 전에는 AWS와 미국 정부 기관을 위해 자동 음성 인식 모델 개발 및 대규모 AI 시스템 배포를 이끌었습니다.

Posts by Jeff Farris

Agentic AI / Generative AI

SWE-Serve가 밝혀낸 로컬 테스트와 실제 서버 제공 간의 격차

AI 코딩 에이전트가 작성한 패치가 단위 테스트를 통과하더라도, 실제 모델을 로드해 요청을 처리하는 서버 실행 단계에서는 오작동을 일으킬 수… 5 MIN READ