Y Hành Nhan

Posted on Jul 15

Top AI Papers on Hugging Face - 2026-07-15

#ai #machinelearning #huggingface

10 Paper AI Hot Nhất Trên Hugging Face Hôm Nay: Điều Gì Đang Được Quan Tâm?

Hôm nay, bảng xếp hạng paper trên Hugging Face cho thấy một bức tranh rất rõ về nơi cộng đồng AI đang dồn sự chú ý: agent dài hạn, robotics foundation model, video understanding, visual pretraining, memory for AI, và các phương pháp huấn luyện mô hình hiệu quả hơn.

Trong bài viết này, mình sẽ đi qua 10 paper được upvote cao nhất, và với mỗi paper sẽ trả lời 4 câu hỏi:

Bài toán là gì?
Ý tưởng chính là gì?
Điểm mới nằm ở đâu?
Ứng dụng thực tế ra sao?

1) Weak-to-Strong Generalization via Direct On-Policy Distillation

Paper ID: 2607.05394

Project: https://bytedtsinghua-sia.github.io/Direct-OPD/

Bài toán

Reinforcement learning (RL) giúp cải thiện mô hình trên các bài toán có phần thưởng kiểm chứng được, nhưng chạy RL trên mô hình lớn rất tốn tài nguyên. Câu hỏi là: liệu có thể dùng một mô hình nhỏ hơn học bằng RL trước, rồi chuyển “năng lực sau RL” sang mô hình lớn hơn mà không phải chạy RL lại từ đầu không?

Ý tưởng

Paper đề xuất Direct On-Policy Distillation (Direct-OPD). Thay vì chỉ bắt chước đầu ra cuối cùng của mô hình nhỏ, phương pháp này dùng sự thay đổi policy do RL tạo ra như một tín hiệu phần thưởng ngầm. Mô hình lớn được huấn luyện trên các trạng thái sinh ra theo on-policy, từ đó hấp thụ phần “cải thiện hành vi” của mô hình nhỏ.

Nói ngắn gọn:

model nhỏ học bằng RL,
hành vi sau RL của nó được xem như tín hiệu,
model lớn distill trực tiếp từ hành vi đó.

Điểm mới

Điểm hay ở đây là không cần chạy RL đầy đủ trên mô hình đích. Đây là một hướng “weak-to-strong transfer” khá thực dụng: dùng mô hình yếu hơn để mở đường cho mô hình mạnh hơn.

Tính mới nằm ở:

distillation theo on-policy states thay vì dữ liệu tĩnh,
xem policy shift như một dạng reward ngầm,
cho phép sequential composition, tức có thể nối nhiều bước cải thiện.

Ứng dụng thực tế

Nếu hướng này hoạt động tốt ở quy mô lớn, nó có thể:

giảm chi phí huấn luyện hậu-RL cho LLM,
giúp triển khai các model reasoning tốt hơn với ngân sách thấp hơn,
hữu ích cho các bài toán có verifiable rewards như toán, code, logic.

2) ABot-N1: Toward a General Visual Language Navigation Foundation Model

Paper ID: 2607.10383

Project: https://amap-cvlab.github.io/ABot-Navigation/ABot-N1/

Bài toán

Visual Language Navigation (VLN) là bài toán robot hoặc agent phải điều hướng trong môi trường bằng chỉ dẫn ngôn ngữ. Khó khăn là dữ liệu thường phân mảnh, môi trường đa dạng, và mô hình khó tổng quát hóa sang thành phố, tòa nhà, hoặc chỉ dẫn mới.

Ý tưởng

ABot-N1 hướng tới một foundation model cho navigation: một mô hình có thể hiểu đồng thời hình ảnh, không gian, và ngôn ngữ để thực hiện điều hướng tổng quát hơn.

Điểm mới

Từ tiêu đề và định hướng project, đóng góp chính có vẻ là đưa VLN từ mức “task-specific model” sang foundation-model paradigm. Điều này quan trọng vì navigation không chỉ là perception, mà còn cần:

grounding ngôn ngữ vào không gian,
lập kế hoạch nhiều bước,
thích nghi với ngữ cảnh mới.

Ứng dụng thực tế

robot giao hàng trong tòa nhà,
xe tự hành indoor,
trợ lý AR/VR dẫn đường,
agent ảo hỗ trợ tìm đường trong bản đồ số hoặc digital twin.

3) ABot-AgentOS: A General Robotic Agent OS with Lifelong Multi-modal Memory

Paper ID: 2607.10350

Bài toán

Robot agent hiện nay thường giỏi demo ngắn hạn nhưng yếu ở khả năng ghi nhớ lâu dài, tận dụng lịch sử tương tác, và học liên tục từ môi trường thực.

Ý tưởng

ABot-AgentOS đề xuất một kiểu hệ điều hành cho robotic agent, với thành phần trung tâm là lifelong multi-modal memory — bộ nhớ dài hạn chứa thông tin từ hình ảnh, ngôn ngữ, hành động và trải nghiệm.

Điểm mới

Thay vì xem agent như một model đơn lẻ, paper có vẻ xem nó như một hệ thống vận hành gồm:

perception,
planning,
action,
memory lâu dài.

Điểm mới lớn là nhấn mạnh OS-level abstraction cho agent robot: bộ nhớ không còn là phụ trợ, mà trở thành thành phần nền tảng để tích lũy kinh nghiệm.

Ứng dụng thực tế

robot gia đình nhớ vị trí đồ vật,
robot dịch vụ nhớ thói quen người dùng,
robot công nghiệp tích lũy tri thức về môi trường làm việc,
embodied AI có khả năng cá nhân hóa theo thời gian.

4) Long-Horizon-Terminal-Bench: Testing the Limits of Agents on Long-Horizon Terminal Tasks with Dense Reward-Based Grading

Paper ID: 2607.08964

GitHub: https://github.com/zli12321/LHTB

Project: https://zli12321.github.io/LHTB/index.html

Bài toán

Rất nhiều benchmark cho coding agent hoặc terminal agent chủ yếu đo kết quả cuối cùng, nhưng chưa đánh giá tốt năng lực lập kế hoạch dài hạn, phục hồi sau lỗi, và thực hiện chuỗi thao tác dài.

Ý tưởng

Paper xây dựng Long-Horizon-Terminal-Bench (LHTB), tập trung vào các tác vụ terminal dài hơi và dùng dense reward-based grading thay vì chỉ pass/fail cuối cùng.

Điểm mới

Điểm mới rõ ràng là benchmark không chỉ hỏi “agent có làm xong không?” mà còn hỏi:

agent tiến triển được đến đâu?
thất bại ở bước nào?
có biết sửa sai giữa chừng không?

Dense reward giúp nhìn sâu hơn vào năng lực thực sự của agent.

Ứng dụng thực tế

đánh giá coding agent,
đánh giá DevOps agent,
benchmark cho AI vận hành server, CLI, data pipeline,
cải thiện tác nhân dùng trong môi trường doanh nghiệp.

5) Video-Oasis: Rethinking Evaluation of Video Understanding

Paper ID: 2603.29616

GitHub: https://github.com/sejong-rcv/Video-Oasis

Project: https://limgeuntaekk.github.io/Video-Oasis/

Bài toán

Nhiều benchmark video hiện nay có thể bị “hack” bởi priors ngôn ngữ hoặc kiến thức thường thức, nghĩa là model có thể trả lời đúng mà không thực sự hiểu video.

Ý tưởng

Video-Oasis xây dựng một bộ diagnostic evaluation để phân tích mô hình video understanding: khi nào model dùng tín hiệu hình ảnh thật, khi nào chỉ dựa vào văn bản, và benchmark nào đang bị “rỗng” về mặt thị giác.

Điểm mới

Kết quả nổi bật nhất là: khoảng một nửa benchmark hiện có có thể giải mà không cần input hình ảnh. Đây là một lời cảnh báo mạnh cho cộng đồng.

Điểm mới nằm ở cách paper:

tách bạch visual perception và linguistic reasoning,
thiết kế các phép thử “video-native”,
chỉ ra khoảng cách giữa benchmark score và năng lực thật.

Ứng dụng thực tế

thiết kế benchmark video tốt hơn,
đánh giá trung thực các Video-LLM,
hỗ trợ xây dựng hệ thống giám sát, phân tích video, hoặc trợ lý đa phương thức đáng tin cậy hơn.

6) Video Generation Models are General-Purpose Vision Learners

Paper ID: 2607.09024

Project: https://genception.github.io/

Bài toán

Mô hình video generation thường được xem là công cụ tạo nội dung. Nhưng câu hỏi thú vị là: liệu quá trình học tạo video có đồng thời học được biểu diễn thị giác mạnh cho các nhiệm vụ perception không?

Ý tưởng

Paper cho rằng các video generation models không chỉ là generative models, mà còn là general-purpose vision learners. Việc học động học thời gian, cấu trúc cảnh, và tương tác vật thể có thể tạo ra representation hữu ích cho nhiều task thị giác.

Điểm mới

Điểm mới là sự dịch chuyển góc nhìn:

từ “generate để tạo video”
sang “generate để học hiểu thế giới”.

Nếu đúng, đây là một luận điểm rất quan trọng: mô hình generative có thể trở thành nền tảng cho cả video understanding, tracking, action recognition, prediction…

Ứng dụng thực tế

pretraining cho robot và embodied AI,
perception trong xe tự hành,
phân tích hành vi trong video,
học biểu diễn từ dữ liệu unlabeled quy mô lớn.

7) Why Can't I Open My Drawer? Mitigating Object-Driven Shortcuts in Zero-Shot Compositional Action Recognition

Paper ID: 2601.16211

GitHub: https://github.com/KHU-VLL/RCORE

Project: https://ahngeo.github.io/assets/html/RCORE.html

Bài toán

Trong zero-shot compositional action recognition, mô hình cần nhận ra các tổ hợp động từ - đối tượng chưa từng thấy. Vấn đề là model hay dựa vào object shortcuts: thấy “drawer” thì đoán hành động liên quan, thay vì thực sự hiểu động tác.

Ý tưởng

Paper đưa ra phương pháp RCORE để giảm shortcut dựa trên object. Hai thành phần chính là:

co-occurrence prior regularization,
temporal order regularization.

Mục tiêu là buộc mô hình học tốt hơn phần “verb” và quan hệ động theo thời gian.

Điểm mới

Paper không chỉ đưa ra phương pháp sửa lỗi mà còn chỉ ra một bất cân xứng quan trọng: học object thường dễ hơn học action. Đây là một vấn đề cốt lõi trong video understanding và embodied perception.

Ứng dụng thực tế

video action recognition,
robot quan sát hành động con người,
hệ thống giám sát hành vi,
huấn luyện model hiểu thao tác mới trong môi trường chưa thấy trước.

8) Scalable Visual Pretraining for Language Intelligence

Paper ID: 2607.09657

Bài toán

LLM rất mạnh về ngôn ngữ nhưng để có language intelligence thực sự grounded, mô hình cần được pretrain thị giác ở quy mô lớn và đúng cách. Câu hỏi là: pretraining hình ảnh như thế nào để phục vụ tốt nhất cho trí tuệ ngôn ngữ?

Ý tưởng

Từ tiêu đề, paper này có vẻ nghiên cứu một framework visual pretraining có khả năng scale, nhằm tạo biểu diễn thị giác hỗ trợ reasoning, grounding và hiểu ngôn ngữ tốt hơn.

Điểm mới

Điểm nhấn có lẽ là mối liên hệ ngược lại với xu hướng quen thuộc. Thay vì chỉ hỏi “làm sao thêm vision vào LLM?”, paper đặt câu hỏi sâu hơn:

thị giác nên được học ra sao để phục vụ trí tuệ ngôn ngữ?
representation visual nào hữu ích nhất cho multimodal intelligence?

Ứng dụng thực tế

VLM mạnh hơn trong grounding,
agent đa phương thức đáng tin cậy hơn,
trợ lý AI hiểu tài liệu, UI, sơ đồ, ảnh chụp màn hình.

9) 4D Human-Scene Reconstruction from Low-Overlap Captures

Paper ID: 2607.09125

Project: https://sisyphm.github.io/studiorecon-page/

Bài toán

4D reconstruction của người và cảnh thường yêu cầu camera bao phủ tốt, nhiều góc quay trùng lặp. Nhưng trong thực tế, dữ liệu thường low-overlap: ít camera, góc nhìn lệch, chuyển động phức tạp.

Ý tưởng

Paper tập trung giải bài toán tái dựng human-scene 4D ngay cả khi dữ liệu thu được có độ chồng lắp thấp. Nghĩa là vừa dựng hình không gian 3D, vừa theo dõi diễn biến theo thời gian.

Điểm mới

Khó nhất ở đây là kết hợp:

con người chuyển động,
cảnh nền,
thời gian,
dữ liệu quan sát thiếu hụt.

Nếu xử lý tốt low-overlap captures, paper sẽ mở rộng đáng kể khả năng ứng dụng của 4D reconstruction ngoài studio chuẩn.

Ứng dụng thực tế

phim ảnh và VFX,
telepresence,
digital human,
thể thao, motion analysis,
AR/VR với setup camera đơn giản hơn.

10) LightMem-Ego: Your AI Memory for Everyday Life

Paper ID: 2607.11487

Bài toán

Khi AI bước vào đời sống hàng ngày, một thách thức lớn là memory cá nhân: làm sao hệ thống nhớ được các sự kiện, vật thể, lịch sử tương tác và ngữ cảnh đời thường mà vẫn nhẹ, hữu dụng và có thể truy xuất đúng lúc?

Ý tưởng

LightMem-Ego hướng tới một hệ thống AI memory cho đời sống hằng ngày, có thể dựa trên dữ liệu egocentric hoặc trải nghiệm cá nhân để hỗ trợ ghi nhớ và nhắc lại ngữ cảnh.

Điểm mới

Điểm mới nằm ở định vị rất rõ: đây không chỉ là memory cho chatbot, mà là memory layer cho cuộc sống thường nhật. Từ “LightMem” cũng gợi ý rằng tác giả quan tâm đến tính nhẹ, hiệu quả và khả năng triển khai thực tế.

Ứng dụng thực tế

trợ lý cá nhân nhớ nơi để đồ,
tóm tắt ngày làm việc,
hỗ trợ người dùng lớn tuổi,
life logging,
wearable AI và assistant gắn với bối cảnh cá nhân.

Xu Hướng Lớn Đằng Sau 10 Paper Này

Nhìn tổng thể, 10 paper không hề rời rạc. Chúng phản ánh 4 xu hướng lớn của AI hiện tại.

1. Agent đang chuyển từ “demo ngắn” sang “năng lực dài hạn”

Các paper như Long-Horizon-Terminal-Bench, ABot-AgentOS, và LightMem-Ego đều cho thấy cộng đồng không còn hài lòng với agent chỉ làm được tác vụ ngắn. Điều được quan tâm bây giờ là:

nhớ lâu,
lập kế hoạch nhiều bước,
sửa sai,
thích nghi qua thời gian.

2. Video đang trở thành nền tảng cho hiểu thế giới

Video-Oasis, Video Generation Models are General-Purpose Vision Learners, và RCORE đều chạm vào cùng một ý: video không chỉ là dữ liệu khó hơn ảnh, mà là nơi AI phải học động học, hành động, quan hệ nhân quả, và thời gian.

3. Robotics và navigation đang đi theo con đường foundation model

ABot-N1 và ABot-AgentOS cho thấy embodied AI đang chuyển từ pipeline thủ công sang hệ thống tổng quát hơn, có memory, có grounding, có khả năng dùng chung cho nhiều môi trường.

4. Hiệu quả huấn luyện và đánh giá trung thực ngày càng quan trọng

Direct On-Policy Distillation giải bài toán chi phí huấn luyện. Video-Oasis và LHTB giải bài toán đánh giá sai năng lực thật. Đây là hai mặt của cùng một vấn đề: AI không chỉ cần mạnh hơn, mà còn phải được huấn luyện hợp lý hơn và đo lường đúng hơn.

Kết luận

Nếu phải tóm gọn tinh thần của top 10 paper hôm nay trong một câu, mình sẽ nói:

AI đang dịch chuyển từ các mô hình “trả lời tốt trên benchmark” sang các hệ thống “hiểu thế giới, nhớ lâu, hành động dài hạn, và được đánh giá nghiêm túc hơn”.

Đây là dấu hiệu tích cực. Nó cho thấy cộng đồng đang quan tâm đến các năng lực gần với ứng dụng thực tế hơn: