DEV Community

Y Hành Nhan
Y Hành Nhan

Posted on

Top AI Papers on Hugging Face - 2026-07-06

#ai #machinelearning #huggingface

10 paper AI nổi bật nhất trên Hugging Face hôm nay: xu hướng mới từ agent, RL đến diffusion và world model

Hôm nay, top paper được cộng đồng Hugging Face upvote nhiều nhất cho thấy một bức tranh khá rõ về hướng đi hiện tại của AI: agent dài hạn, reinforcement learning cho LLM, tối ưu suy luận, benchmark hóa năng lực tác tử, và mô hình sinh có khả năng kiểm soát tốt hơn.

Trong bài viết này, mình sẽ đi qua 10 paper nổi bật, với mỗi paper gồm 4 ý chính:

  • Bài toán
  • Ý tưởng
  • Điểm mới
  • Ứng dụng thực tế

1) Program-as-Weights: A Programming Paradigm for Fuzzy Functions

Bài toán

Nhiều tác vụ hiện đại không dễ mô tả bằng code cứng, nhưng cũng không cần một foundation model khổng lồ chạy thường trực. Bài toán là: liệu có thể “biên dịch” một mô tả ngôn ngữ tự nhiên thành một artifact nhỏ gọn, đủ để thực thi tác vụ về sau mà không cần gọi lại mô hình lớn?

Ý tưởng

Paper đề xuất khái niệm Program-as-Weights: thay vì viết chương trình bằng cú pháp truyền thống, người dùng mô tả chức năng bằng ngôn ngữ tự nhiên. Một mô hình “compiler” 4B sẽ chuyển mô tả đó thành một neural artifact nhỏ, sau đó một “interpreter” 0.6B đã đóng băng sẽ chạy artifact này để thực hiện tác vụ.

Có thể hiểu đây là kiểu “lập trình mềm” cho các hàm mờ, nơi đặc tả không hoàn toàn logic-symbolic mà mang tính xấp xỉ, linh hoạt.

Điểm mới

Điểm mới lớn nhất là coi trọng số mô hình như chương trình. Thay vì fine-tune cả model hoặc dùng prompt dài, paper đóng gói logic tác vụ vào một adapter/weight artifact nhỏ gọn. Cách này hứa hẹn:

  • tiết kiệm bộ nhớ,
  • chạy local,
  • suy luận nhanh hơn,
  • giảm phụ thuộc vào model lớn online.

Ứng dụng thực tế

Rất phù hợp cho:

  • công cụ AI chạy on-device,
  • hệ thống cá nhân hóa theo user/task,
  • các “tool builder” tạo kỹ năng mới nhanh chóng,
  • workflow doanh nghiệp cần đóng gói logic thành module tái sử dụng.

2) The Mirage of Optimizing Training Policies

Bài toán

Trong RL cho LLM, policy dùng khi huấn luyện và policy dùng khi suy luận thường không hoàn toàn giống nhau. Sự lệch giữa training và inference này khiến mô hình có thể tối ưu tốt trên giấy nhưng khi deploy lại không cải thiện tương ứng, thậm chí mất ổn định.

Ý tưởng

Paper cho rằng mục tiêu thật sự không nên chỉ là tối ưu training policy, mà phải đảm bảo inference policy cải thiện đơn điệu. Từ đó họ đề xuất một objective và framework mới để đồng bộ tốt hơn giữa huấn luyện và suy luận.

Điểm mới

Đây là một góc nhìn rất đáng chú ý: thay vì chăm chăm tối ưu reward trong quá trình train, paper nhấn mạnh rằng policy được sử dụng khi ra quyết định thực tế mới là thứ cần được tối ưu trực tiếp hoặc gián tiếp một cách đảm bảo.

Nói cách khác, paper chuyển trọng tâm từ “học tốt” sang “dùng tốt”.

Ứng dụng thực tế

Phù hợp với:

  • LLM reasoning có sampling/phân nhánh,
  • tác tử dùng reranking hoặc self-consistency khi inference,
  • các pipeline RLHF/RLAIF cần ổn định hơn khi triển khai thật.

3) AgenticSTS: A Bounded-Memory Testbed for Long-Horizon LLM Agents

Bài toán

Agent dài hạn thường thất bại không chỉ vì “model chưa đủ thông minh”, mà còn vì bộ nhớ kém tổ chức. Tuy nhiên, rất khó tách riêng tác động của từng thành phần memory trong các hệ agent phức tạp.

Ý tưởng

AgenticSTS đưa ra một testbed bounded-memory, nơi prompt không phình vô hạn mà được lắp ráp lại từ các mảnh thông tin truy hồi theo kiểu typed retrieval. Nhờ vậy, ta có thể phân tích độc lập các lớp memory và cách chúng ảnh hưởng đến hiệu quả agent.

Điểm mới

Điểm hay là paper biến vấn đề memory thành một thiết kế có kiểm soát, thay vì để context window gánh tất cả. Mỗi loại thông tin có “hợp đồng” rõ ràng về cách lưu, cách truy xuất và cách đưa vào prompt.

Điều này cho phép làm ablation rất sạch về:

  • memory ngắn hạn,
  • memory chiến lược,
  • kỹ năng điều kiện,
  • thông tin trạng thái dài hạn.

Ứng dụng thực tế

Hữu ích cho:

  • trợ lý AI dài hạn,
  • game agent,
  • workflow nhiều bước trong doanh nghiệp,
  • hệ điều hành agent cần quản lý bộ nhớ rõ ràng thay vì nhồi toàn bộ lịch sử vào context.

4) EvoPolicyGym: Evaluating Autonomous Policy Evolution in Interactive Environments

  • Paper: 2607.02440

Bài toán

Các agent hiện nay không chỉ cần hành động tốt, mà còn cần tự sửa chính sách của mình theo phản hồi từ môi trường. Vấn đề là ta thiếu benchmark đủ rõ để đánh giá năng lực “tự tiến hóa policy” này.

Ý tưởng

EvoPolicyGym xây dựng môi trường đánh giá nơi agent phải iteratively edit policy trong ngân sách giới hạn. Hệ thống không chỉ chấm kết quả cuối mà còn theo dõi quá trình sửa policy, trajectory và chất lượng chẩn đoán lỗi.

Điểm mới

Paper chuyển trọng tâm từ “agent solve task” sang “agent biết cải thiện chính mình”. Đây là một bước gần hơn tới autonomous improvement.

Ngoài ra, benchmark còn cho thấy tiến hóa policy hiệu quả không thể chỉ dựa vào mô hình ngôn ngữ mạnh; nó đòi hỏi:

  • cơ chế phù hợp với task,
  • feedback tốt,
  • khả năng refinement trong giới hạn tài nguyên.

Ứng dụng thực tế

Quan trọng cho:

  • AutoML/auto-agent,
  • hệ thống tự tối ưu prompt/policy,
  • robotics hoặc ops agent cần thích nghi liên tục,
  • môi trường mà con người chỉ cho feedback hạn chế.

5) Morphing into Hybrid Attention Models

Bài toán

Transformer full-attention mạnh nhưng đắt đỏ ở ngữ cảnh dài. Linear attention rẻ hơn nhưng có thể giảm chất lượng. Bài toán là: làm sao chuyển một Transformer hiện có sang hybrid attention model mà vẫn giữ hiệu năng tốt?

Ý tưởng

Paper đề xuất FlashMorph, xem việc chọn layer nào giữ full-attention và layer nào đổi sang linear attention như một bài toán tối ưu có ràng buộc ngân sách.

Thay vì thay toàn cục một cách thủ công, họ dùng mô hình “morphable” với gate theo layer để tìm cấu hình lai tối ưu.

Điểm mới

Điểm mới là layer selection có nguyên tắc. Không phải mọi layer đều quan trọng như nhau cho long-context reasoning. Paper còn dùng:

  • linearization regularization,
  • distillation trên logits,
  • finetuning cho long-context.

Ứng dụng thực tế

Rất thực dụng cho:

  • LLM phục vụ tài liệu dài,
  • code assistant với context lớn,
  • hệ thống RAG cần cửa sổ ngữ cảnh dài nhưng chi phí hạn chế,
  • chuyển đổi model hiện có sang bản suy luận rẻ hơn.

6) Multi-Resolution Flow Matching

Bài toán

Mô hình diffusion/flow matching tạo ảnh đẹp nhưng chậm, đặc biệt ở độ phân giải cao. Fine-tune để tăng tốc thường tốn chi phí huấn luyện lớn.

Ý tưởng

MrFlow đề xuất cách tăng tốc không cần huấn luyện thêm: tạo ảnh ở độ phân giải thấp trước, sau đó dùng super-resolution ở pixel space kết hợp noise injection để nâng dần lên độ phân giải cao.

Điểm mới

Điểm sáng là training-free acceleration. Thay vì sửa kiến trúc hoặc distill lại model, paper khai thác pipeline đa độ phân giải để giảm số token phải xử lý ở giai đoạn đầu, từ đó đạt tốc độ cao hơn rất nhiều.

Ứng dụng thực tế

Phù hợp với:

  • sản phẩm text-to-image cần latency thấp,
  • prototyping sáng tạo,
  • inference giá rẻ trên GPU hạn chế,
  • triển khai mô hình sinh ảnh ở quy mô lớn.

7) AgenticDataBench: A Comprehensive Benchmark for Data Agents

Bài toán

Data agent đang được nói đến rất nhiều, nhưng benchmark hiện tại thường rời rạc, ít phản ánh đúng workflow data science ngoài đời, và thiếu cách đo bao phủ kỹ năng.

Ý tưởng

AgenticDataBench xây dựng benchmark toàn diện cho data agents, với task đa miền, annotation chi tiết và thước đo coverage dựa trên kỹ năng.

Điểm mới

Thay vì chỉ đo “đúng/sai”, benchmark cố gắng phản ánh:

  • các mẫu vận hành dữ liệu thực tế,
  • độ đa dạng domain,
  • granularity mịn của task,
  • bản đồ kỹ năng mà agent cần có.

Đây là hướng quan trọng vì data work không chỉ là viết code, mà còn gồm hiểu schema, kiểm tra dữ liệu, phân tích lỗi, trực quan hóa, và ra quyết định.

Ứng dụng thực tế

Hữu ích cho:

  • đánh giá copilot dữ liệu,
  • benchmark nội bộ cho AI analyst/data assistant,
  • so sánh agent trên workflow BI, notebook, ETL và analytics.

8) WorldDirector: Building Controllable World Simulators with Persistent Dynamic Memory

  • Paper: 2607.02517

Bài toán

Video generation hiện nay thường đẹp ở từng đoạn ngắn nhưng khó giữ tính nhất quán dài hạn: vật thể đổi hình, chuyển động thiếu logic, camera và thế giới không bền vững theo thời gian.

Ý tưởng

WorldDirector tách quá trình thành hai phần:

  1. semantic motion planning ở mức cao,
  2. visual rendering ở mức hình ảnh.

LLM được dùng để điều phối quỹ đạo 3D của vật thể và chuyển động camera, đồng thời duy trì persistent dynamic memory về thế giới.

Điểm mới

Điểm mới cốt lõi là đưa bộ nhớ động bền vững vào world simulator. Thay vì chỉ sinh khung hình kế tiếp từ ngữ cảnh gần, hệ thống duy trì trạng thái thế giới lâu hơn và dùng nó để kiểm soát motion lẫn viewpoint.

Ứng dụng thực tế

Rất tiềm năng cho:

  • game content generation,
  • mô phỏng ảo,
  • phim hoạt hình AI,
  • dữ liệu huấn luyện cho embodied agent hoặc robotics.

9) VLA-Corrector: Lightweight Detect-and-Correct Inference for Adaptive Action Horizon

Bài toán

Vision-Language-Action models thường dùng action chunking để dự đoán nhiều hành động một lúc, giúp nhanh hơn nhưng dễ rơi vào open-loop: nếu môi trường thay đổi hoặc xuất hiện sai lệch nhỏ, lỗi có thể kéo dài cả chuỗi hành động.

Ý tưởng

VLA-Corrector thêm một vision monitor nhẹ trong latent space để theo dõi diễn biến đặc trưng thị giác. Khi phát hiện “truncation event” hoặc dấu hiệu lệch khỏi quỹ đạo kỳ vọng, hệ thống kích hoạt corrective replanning.

Điểm mới

Điểm hay là paper không bỏ action chunking, mà làm nó thích nghi theo sự kiện. Tức là vẫn hưởng lợi từ horizon dài khi mọi thứ ổn, nhưng có khả năng co ngắn horizon và sửa kế hoạch khi cần.

Ứng dụng thực tế

Đặc biệt quan trọng cho:

  • robot thao tác tiếp xúc,
  • pick-and-place phức tạp,
  • môi trường thực có nhiễu,
  • hệ VLA cần cân bằng giữa tốc độ và phản ứng kín vòng.

10) Breaking Failure Cascades: Step-Aware Reinforcement Learning for Medical Multimodal Reasoning

Bài toán

Trong suy luận y khoa đa phương thức, chỉ cần sai ở một bước đầu là các bước sau có thể đổ vỡ theo dây chuyền. Nếu chỉ thưởng theo đáp án cuối, mô hình rất khó học được lỗi nằm ở đâu.

Ý tưởng

MRPO dùng step-wise process rewards để thưởng/phạt theo từng bước suy luận, thay vì chỉ nhìn kết quả cuối. Nhờ vậy, việc gán tín dụng trong RL tốt hơn và giảm hiện tượng failure cascade.

Điểm mới

Điểm mới nằm ở cách đưa nhận thức theo bước vào policy optimization cho bài toán medical multimodal reasoning. Đây là nơi tính đúng đắn quy trình đặc biệt quan trọng, không thể chỉ “đoán đúng kết quả”.

Ứng dụng thực tế

Ứng dụng rõ nhất là:

  • hỗ trợ đọc ảnh y khoa,
  • VQA lâm sàng,
  • hệ thống AI cần giải thích từng bước cho bác sĩ,
  • các domain rủi ro cao nơi quy trình suy luận quan trọng ngang kết luận.

Kết luận: 4 xu hướng lớn nổi bật

Nhìn tổng thể, 10 paper hôm nay hội tụ quanh 4 xu hướng rất đáng chú ý.

1. Agent không chỉ cần thông minh, mà cần có bộ nhớ và khả năng tự cải thiện

Điều này thể hiện rõ ở AgenticSTS, EvoPolicyGym và AgenticDataBench. Cộng đồng đang chuyển từ demo agent ngắn hạn sang đánh giá nghiêm túc các năng lực như memory, policy refinement và workflow thực tế.

2. RL cho LLM đang bước vào giai đoạn “thực dụng hơn”

Các paper như The Mirage of Optimizing Training Policies và MRPO nhấn mạnh rằng tối ưu reward thôi chưa đủ; phải xử lý đúng mismatch giữa train và inference, cũng như cải thiện credit assignment theo từng bước.

3. Hiệu quả suy luận là mặt trận cực nóng

FlashMorph, MrFlow và VLA-Corrector cùng nhắm vào việc giữ chất lượng nhưng giảm chi phí hoặc tăng độ phản ứng. Đây là tín hiệu rõ ràng rằng AI không chỉ chạy đua benchmark, mà còn chạy đua khả năng triển khai.

4. Mô hình sinh đang tiến tới thế giới có cấu trúc hơn

WorldDirector và Program-as-Weights tuy rất khác nhau, nhưng cùng chia sẻ một tinh thần: thay vì chỉ “phát sinh đầu ra”, hệ thống AI cần biểu diễn được cấu trúc, bộ nhớ, hoặc chương trình bên trong.

Lời cuối

Nếu phải chọn những paper đáng theo dõi nhất về tác động dài hạn, mình sẽ ưu tiên:

  • Program-as-Weights: vì nó gợi mở một paradigm lập trình AI rất khác,
  • The Mirage of Optimizing Training Policies: vì nó chạm đúng nút thắt của RL cho LLM,
  • AgenticSTS: vì memory là vấn đề trung tâm của agent dài hạn,
  • WorldDirector: vì controllable simulation có thể là nền tảng lớn cho embodied AI và video generation.

Nếu bạn muốn, mình có thể viết tiếp phần 2 theo một trong các hướng sau:

  1. Xếp hạng 10 paper theo mức độ tiềm năng ứng dụng
  2. Giải thích kỹ hơn từng paper theo kiểu dễ hiểu cho người không chuyên
  3. Tóm tắt 10 paper thành bảng so sánh 1 trang
  4. Phân tích paper nào đáng đọc full nhất đối với researcher/engineer/founder

Top comments (0)