Source: https://www.startupjobs.kr/jobs/9831-software-engineer-llm-performance-evaluation

[공고 목록으로](https://www.startupjobs.kr/jobs)

# Software Engineer, LLM Performance & Evaluation

- Seoul

NPU에서 LLM 추론 성능과 모델 정확도를 측정·추적하는 엔지니어 역할입니다. 벤치마크, 평가 파이프라인, 분석 도구를 구축해 여러 팀과 협업합니다.

## 주요 업무

- 추론 기능별 성능 벤치마크 설계 및 유지관리
- TTFT, 토큰 간 지연, 처리량, 메모리 등 측정
- 지원 모델의 정확도 평가 및 기준 비교
- 자동화된 벤치마크와 평가 파이프라인 구축 운영
- 회귀 조사 및 프로파일링으로 원인 규명

## 자격 요건

- Python으로 자동화·데이터 파이프라인 구축 경험
- ML 추론 또는 복합 시스템 성능 측정 경험
- 변환기 기반 LLM 추론 이해
- PyTorch·Hugging Face 등으로 모델 정확도 평가 경험
- 실험 설계·데이터 분석 및 결과 전달 능력

## 기술

- Python
- PyTorch
- Hugging Face Transformers
- vLLM
- lm-evaluation-harness
- Linux
- profiling
- quantization

이 요약은 StartupJobs가 기업의 채용 공고를 바탕으로 작성했습니다. 전체 공고는 기업 웹사이트에 있습니다.

이 공고는 FuriosaAI의 채용 페이지에서 가져왔습니다. 원문으로 바로 연결됩니다.

- [FuriosaAI 퓨리오사에이아이(FuriosaAI)는 데이터센터용 고성능 저전력 AI 가속기(NPU)와 관련 하드웨어와 소프트웨어를 설계합니다. 이들 제품은 컴퓨터 비전, 생성형 AI와 대형언어모델 등 고부하 AI 워크로드를 처리하려는 기업과 클라우드 사업자를 대상으로 합니다. 기업 페이지 보기](https://www.startupjobs.kr/companies/furiosaai)

- **근무 형태**: 하이브리드

- **근무지**: Seoul

- **등록**: 2026. 9. 18.

## 이 회사가 귀사인가요?

무료로 소유권을 신청하면 로고와 소개를 추가하고 공고 성과를 확인할 수 있습니다. 삭제를 요청하실 수도 있습니다.

[무료로 소유권 신청하기](https://www.startupjobs.kr/claim-your-company) [회사 정보 삭제하기](https://www.startupjobs.kr/remove-your-company)

[기업 웹사이트에서 지원하기](https://www.startupjobs.kr/out/9831)

## 비슷한 채용 공고

- [Karrot · Software Engineer, Backend (인턴) - 서비스 운영 (운영개발) · SEOUL · 2026. 11. 20. 등록](https://www.startupjobs.kr/jobs/18261-software-engineer-backend-inteon-seobiseu-un-yeong-un-yeong-)

- [Karrot · Software Engineer, Backend(인턴) - 숏폼 · SEOUL · 2026. 11. 17. 등록](https://www.startupjobs.kr/jobs/17926-software-engineer-backend-inteon-syospom)

- [Karrot · Software Engineer, Backend (채용전환형) - 피드 인프라 · SEOUL · 2026. 11. 16. 등록](https://www.startupjobs.kr/jobs/17724-software-engineer-backend-chaeyongjeonhwanhyeong-pideu-inpeu)

- [Karrot · Software Engineer, Backend (채용전환형) - 나의당근 · SEOUL · 2026. 11. 16. 등록](https://www.startupjobs.kr/jobs/17725-software-engineer-backend-chaeyongjeonhwanhyeong-nauidang-ge)

- [Karrot · Software Engineer, Backend (채용전환형) - 커뮤니티 · SEOUL · 2026. 11. 16. 등록](https://www.startupjobs.kr/jobs/17726-software-engineer-backend-chaeyongjeonhwanhyeong-keomyuniti)

- [flex · Senior Engineering Manager, Consumer / New Verticals · 240000-300000 USD / year · 원격 · Remote - Global · 2026. 11. 7. 등록](https://www.startupjobs.kr/jobs/16500-senior-engineering-manager-consumer-new-verticals)

- [FuriosaAI · Rack System Architect · Seoul, South Korea · 2026. 11. 2. 등록](https://www.startupjobs.kr/jobs/15726-rack-system-architect)

- [DeepX · Software Engineer (C++), Heavy-machinery Automation · 원격 · Tokyo, JP · 2026. 10. 29. 등록](https://www.startupjobs.kr/jobs/15170-software-engineer-c-heavy-machinery-automation)
