EchoWM은 연속적인 내비게이션에 반응하며 720p 비디오, 환경 음향, 음악, 음성 등을 공동으로 생성하는 입체적 세계 모델입니다. 이 모델은 카메라 의도를 중심으로 상호작용을 구성하는데, 1인칭 장면에서는 관찰자의 움직임을 지정하고 3인칭 장면에서는 뷰별 컨트롤러 없이 데이터로부터 카메라와 캐릭터의 역학 관계를 학습합니다.
이 모델은 이산 명령과 연속적인 자세를 공유된 메트릭 규모의 상대 6-DoF 궤적으로 매핑하며, 데이터셋 수준 보정을 통해 이질적인 데이터 간에도 움직임의 크기를 보존합니다. 이는 다양한 피사체에 걸쳐 1인칭 및 3인칭 상호작용을 모두 지원하는 기반이 됩니다.
오디오-비주얼 생성과 궤적 제어를 공동으로 학습하기 위해 보완적인 데이터 엔진을 구축하고 점진적 훈련 후 자기회귀 후처리를 통해 장거리 생성에 적합하게 학습합니다. 광범위한 평가 결과, EchoWM은 공개 세계 모델 벤치마크에서 강력한 궤적 추적과 높은 시각적 품질을 달성했으며, 장거리 생성 동안 환경 음향과 음성을 동기화하는 능력을 보여줍니다.
Hugging Face Daily Papers
HF Papers API
논문
발행 2026-08-24
Songchun Zhang, Yaowei Li, Junhao Zhuang, Weiyang Jin, Haoyu Wang, Xin Lu, Yilang Sun, Shiyi Zhang, Haoran Li, Xiaoxiao Ma, Yuming Li, Yijun Liu, Yaofeng Su, Yanwen Ma, Haoyu Wu, Zihan Su, Yue Ma, Lvmin Zhang, Haoyang Huang, Zeyue Xue, Anyi Rao, Nan Duan
수집 2026-08-25 07:39
거대 언어 모델(LLM)의 정책 최적화(PO)는 안정성과 탐색 사이의 상충 관계에 직면해 있으며, 이는 현재 행동 측의 Policy-KL 정규화에 의해 완화되고 있습니다. Policy-KL을 유지하면 응답 행동이 제약되고 탐색 예산이 소모되지만, 이를 제거하면 명시적인 드리프트 제어 없이 최적화가 이루어집니다.
이러한 딜레마를 해결하기 위해 정규화를 입력 측으로 이동시키는 대안이 제시되었습니다. 환경 정규화 정책 최적화(ERPO)는 현재 정책이 유도하는 훈련 쿼리 분포의 이동을 제한하는 Query-KL(QKL) 항을 도입합니다. 또한 데이터셋에 고정된 참조에서 파생된 쿼리별 가중치를 사용하여 각 쿼리 업데이트를 참조하의 쿼리에 맞게 편향시킵니다.
QKL 기울기는 쿼리 가능도(query likelihood)를 통해 흐르며, 응답 점수 함수는 QKL 항에 포함되지 않아 응답 분포와 탐색이 보존됩니다. ERPO는 추가적인 순방향 계산 없이 GRPO, PPO, REINFORCE 스타일 파이프라인에 통합될 수 있습니다. 여섯 가지 수학적 추론 벤치마크에서 ERPO는 표준 Policy-KL 정규화를 대체하면서 쿼리 분포 드리프트를 효과적으로 제어하여 더 강력한 정확도와 안정적인 행동을 제공했습니다.
ERPO의 소스 코드는 https://github.com/alibaba/ERPO에서 확인할 수 있습니다.
Hugging Face Daily Papers
HF Papers API
논문
발행 2026-08-24
Xianlei Zhou, Xiangdi Meng, Yu He, Tianyu Qi, Shuyan Guan, Xianli Zhang, Jian Zhang, Xin Li, Qika Lin, Jun Liu
수집 2026-08-25 07:39
온디바이스 LLM 에이전트가 개인 코파일럿으로 발전함에 따라 모바일 운영체제가 핵심 테스트베너가 되었으며, 이에 대한 엄격한 능력 평가가 필수적입니다. 기존 벤치마크들은 두 가지 유형으로 나뉘는데, GUI 중심 벤치마크는 화면 조작에만 초점을 맞추고 배경 도구 사용과 장기 계획을 간과하며, 정적인 함수 호출 벤치마크는 실제 런타임 제약 조건과 분리된 오프라인 API 매칭에 의존한다는 한계가 있습니다.
이러한 격차를 해소하기 위해 MobilePA-Bench라는 상호작용적이고 상태 기반의 도구 중심 벤치마크가 제시되었습니다. MobilePA-Bench는 실행 가능한 샌드박스 위에서 작동하며 실시간 애플리케이션 데이터베이스를 유지하고 구조화된 피드백을 반환합니다. 이 벤치마크는 13개의 기능 도메인과 212개의 현실적인 모바일 도구를 포괄하며, 중앙 계획 에이전트의 도구 호출 및 계획 능력을 평가합니다.
MobilePA-Bench는 기본적인 도구 사용을 넘어 세 가지 고급 차원에서 에이전트를 평가합니다. 첫째는 하위 에이전트 협업, 둘째는 메모리 사용량, 셋째는 스킬 사용으로, 복잡한 작업을 세분화하고 메모리를 회상하며 사전 패키지된 복합 스킬을 호출하는 능력을 측정합니다.
광범위한 실험 결과는 현재의 최첨단 LLM이 모바일 환경에서 여전히 신뢰할 수 없음을 보여줍니다. 특히 엄격한 도구 순서, 권한 제한, 예상치 못한 런타임 오류가 발생할 경우 성능이 급격히 저하됩니다. 따라서 MobilePA-Bench는 상호작용적인 함수 호출 샌드박스와 증거 기반 검증을 결합하여 에이전트 강화 학습을 위한 실용적인 진단 벤치마크이자 기반을 제공합니다.
Hugging Face Daily Papers
HF Papers API
논문
발행 2026-08-24
Yi Zhu, Xiongwei Wu, Qiyi Wang, Tingyu Qu, Jiajun Liu, Sihan Cao, Long Chen, Weigao Sun, Feida Zhu, Yiran Zhong, Steven Hoi
수집 2026-08-25 06:39
Apodex 1.1은 복잡한 작업을 위한 지속적이고 검증 가능한 진전을 가능하게 하는 에이전트 지능을 확장하는 연구를 제시합니다. 이는 단순히 지식을 추론하는 것을 넘어 파일, 정보 출처, 실행 가능한 코드를 지속적으로 상호작용하고 상태를 유지하며 실패를 복구하고 결과를 검증하여 실제 목표를 향해 나아가는 '작업 수행 능력(working capability)'을 개발하는 데 중점을 둡니다.
이러한 작업 수행 능력을 개발하기 위해 Apodex 1.1은 두 가지 상호 보완적인 차원을 통해 확장합니다. 환경 확장(Environment Scaling)은 실행 파일, 검색, 코드 환경의 다양성과 검증 가능성을 넓히는 데 중점을 두며, 에이전트 조정 확장(Agentic Coordination Scaling)은 에이전트가 장기 목표를 분해하고, 병렬 작업을 위임하며, 비동기 결과를 통합하고, 계획을 재수립하도록 훈련시킵니다.
이러한 시스템은 공유 실행 하네스(execution harness)와 AgentOS를 통해 도구와 에이전트 전반에 걸쳐 작업 상태와 출처를 유지합니다. 훈련 과정은 환경 궤적과 조정 흔적을 신뢰할 수 있는 행동으로 전환시켜 에이전트의 행동을 안정화시킵니다.
Apodex 1.1은 이러한 접근 방식을 통해 복잡한 전문 작업, 금융, 과학 연구, 코딩, 검색 등 광범위한 분야에서 최첨단 모델보다 훨씬 작은 모델을 사용함에도 불구하고 선도적인 성능을 달성했습니다. 특히 35B 매개변수를 가진 Apodex 1.1 Mini는 강력한 작업 수행 능력을 유지하며 로컬 배포가 가능하여, 장기 실행 작업에 대한 '중량 솔버(Heavy-Duty Solver)' 구축이라는 목표를 발전시키는 데 기여합니다.
Hugging Face Daily Papers
HF Papers API
논문
발행 2026-08-24
Apodex Team, B. An, B. Li, B. Wang, B. Zhang, B. L. Wang, C. Feng, C. Wei, C. Xue, C. Zhang, D. Ng, D. Ye, E. Min, F. Chen, F. Liu, F. Yang, F. Ye, H. Xu, H. Yang, H. Ye, H. Zhang, H. Zhao, J. Li, J. Lin, J. Xia, K. Jin, K. Wang, K. Yang, L. Bing, L. Lei, L. Su, Le. Wang, Lu. Wang, N. Wang, Q. Ren, Q. Yang, R. Li, S. Bai, S. Du, S. Li, S. Lin, S. Nie, S. Wang, S. Zhang, S. Z. Wang, Ta. Q. Fang, Ti. Q. Fang, W. Fang, W. Li, W. Zhang, X. Chen, X. Li, X. Tang, X. Wang, X. Xu, X. Zhang, X. Q. Wang, X. Y. Wang, Y. Deng, Y. Gao, Y. Hu, Y. Li, Y. Sui, Y. Wang, Y. Xiao, Y. Zhang, Z. Chen, Z. Cheng, Z. Feng, Z. Liang, Z. Zhang
수집 2026-08-25 02:36