benchmark-report 태그 문서 10개

Tag10건Article 10

#benchmark-report

이 태그와 연결된 문서를 한곳에서 모아보고, 함께 자주 등장하는 연관 태그까지 이어서 탐색할 수 있습니다.

연관 태그

문서 목록

총 10건 중 1-10건

Article2026년 10월 28일

NVIDIA Nemotron 3.5 Transcribe and Granary v2: Intelligent Multilingual Transcription You Can Prompt and Adapt

NVIDIA Nemotron 3.5 Transcribe는 다국어 전사·화자 구분·번역·오디오 질의응답을 통합한 오픈 웨이트 모델이며, Granary v2와 NeMo Speech는 프롬프트 조정부터 도메인 미세조정까지 지원한다.

huggingface.co

#granary-v2 #nemo-speech #prompt-controlled-transcription #unified-speech-tasks

Article2026년 10월 21일

NVIDIA Kumo Relational Outperforms Supervised Machine Learning on Relational Data, No Training Required

NVIDIA는 최대 10,000개의 문맥 예시로 관계형 데이터베이스를 직접 예측하는 사전학습 모델 Kumo Relational이 과제별 추가 학습 없이 15개 데이터베이스의 41개 평가 과제에서 주요 지도학습 모델을 능가했다고 발표했다.

huggingface.co

#nvidia #kumo-relational #accuracy-latency-tradeoff #context-hop-constraints

Article2026년 10월 20일

ALTK-Evolve: How learned memory tops the τ²-bench leaderboard on customer service tasks without a frontier model

ALTK Evolve는 모델 가중치 변경 없이 학습한 지침을 프롬프트에 추가해 GPT 4.1 기반 고객서비스 에이전트의 τ² bench 소매 Pass^4를 67.5%로 높였으며, 저자들의 2026년 10월 12일 리더보드 스냅샷에서 소매 부문 모든 출품작을 앞섰다.

huggingface.co

#bench #altk-evolve #pass-4 #gpt-4-1

Article2026년 10월 19일

Advancing coding in low‑resource programming languages

OpenAI의 최신 모델은 COBOL·Fortran·Visual Basic처럼 학습 자료가 적은 프로그래밍 언어의 소프트웨어 구축과 동작 보존 마이그레이션 평가에서 성능과 비용 효율을 개선했다.

OpenAI

#cobol #multilangbench #openai #sqlite

Article2026년 10월 3일

The Agent Said It Was Done. The Database Disagreed.

Microsoft ThinkingBox는 507개 업무를 각각 20회 실행해 AI 에이전트가 남긴 실제 백엔드 상태와 부수 효과를 평가하며, 단일 성공률·반복 일관성·비용이 서로 다른 모델 선택 기준임을 보여준다.

huggingface.co

#kimi-k3 #microsoft-thinkingbox #gpt-6-astra #completion-state-gap

Article2026년 9월 3일

NeoMME: an efficient Multimodal-native and Multilingual Encoder

NeoMME는 단일 양방향 Transformer로 이미지와 다국어 텍스트를 처리하는 260M·800M 인코더로, 시각 문서 검색에서 모델 크기 대비 검색 품질과 인코딩·저장 효율을 확보했다.

huggingface.co

#neomme #neomme-retriever #vidore-v3 #shared-bidirectional-transformer

Article2026년 8월 20일

Up to 3.2x Faster Inference with LFM2.5-DSpark

Liquid AI는 세 LFM2.5 모델용 약 3억 매개변수 DSpark 초안 모델을 공개해 탐욕 디코딩의 출력 품질을 유지하면서 H100에서 최대 3.18배, M4 Max에서 최대 2.87배의 추론 가속과 LFM2.5 2.6B 함수 호출 지연 평균 57% 감소를 달성했다.

huggingface.co

#sglang #liquid-ai #llama-cpp #lfm2-5-dspark