agency-agents — 손끝에서 바로 쓰는 완전한 AI 에이전시
· #AI #LLM #트렌드 #기술블로그
arXiv 논문
In-Context World Modeling for Robotic Control
기존 시각-언어-행동(VLA) 모델은 카메라 시점이나 로봇 형태가 바뀌는 새로운 환경에 잘 적응하지 못하는 한계가 있습니다. 이 연구는 ‘In-Context World Modeling’이라는 새로운 접근법을 제안하여, 소량의 상호작용 데이터만으로 새로운 환경의 물리 법칙을 빠르게 학습하고 즉시 적응할 수 있는 로봇 제어 기술을 선보입니다.
OPID: On-Policy Skill Distillation for Agentic Reinforcement Learning
결과 기반 강화학습은 언어 에이전트에게 안정적인 최적화 기반을 제공하지만, 보상이 희소하여 어떤 중간 결정이 좋았는지 판단하기 어렵습니다. 이 논문은 성공적인 과거 경험을 현재 정책 내에서 증류하는 OPID 기법을 제안하여, 외부 자원 없이도 조밀한 토큰 레벨의 보상을 생성하고 에이전트의 학습 효율을 높입니다.
The Verification Horizon: No Silver Bullet for Coding Agent Rewards
코딩 에이전트의 성능이 발전하면서 복잡한 코드를 생성하는 것보다 그 코드의 정확성을 검증하는 것이 더 어려운 문제가 되고 있습니다. 이 연구는 검증 시스템이 인간의 의도를 완벽히 반영할 수 없는 ‘검증의 지평선’ 문제를 지적하며, 이로 인해 에이전트가 보상 함수를 악용하는 현상이 발생할 수 있음을 경고합니다.
PhysisForcing: Physics Reinforced World Simulator for Robotic Manipulation
로봇 시뮬레이션을 위한 비디오 생성 모델은 물리적으로 불가능한 움직임을 만들어내는 한계가 있습니다. 이 연구는 비디오 생성 모델에 물리 엔진을 결합한 ‘PhysisForcing’ 기법을 제안하여, 물리 법칙에 어긋나는 장면을 실시간으로 보정하고 시뮬레이션의 신뢰도를 높입니다.
ViQ: Text-Aligned Visual Quantized Representations at Any Resolution
텍스트와 이미지를 통합된 이산적 표현으로 만드는 것은 정보 손실과 의미 표현의 균형을 맞추기 어렵습니다. 이 논문은 텍스트와 정렬된 시각적 양자화 표현인 ViQ를 제안하여, 해상도에 구애받지 않고 풍부한 의미 정보와 세밀한 시각적 디테일을 모두 담아내는 새로운 방법을 제시합니다.
Hugging Face Blog
Translation as a Bridging Action: Transferring Manipulation Skills from Humans to Robots
인간의 풍부한 행동 데이터를 로봇 학습에 활용하는 것은 유망하지만, 인간의 손과 로봇 그리퍼의 근본적인 차이로 인해 기술 이전이 어렵습니다. 이 연구는 인간의 행동을 ‘번역’하는 접근법을 통해, 평행 그리퍼를 장착한 양팔 로봇에게 새로운 조작 기술을 성공적으로 전달하는 방법을 탐구합니다.
GBC: Gradient-Based Connections for Optimizing Multi-Agent Systems
LLM 기반 다중 에이전트 시스템은 복잡한 문제 해결에 효과적이지만, 에이전트 간의 비협조 문제와 오류의 원인을 정확히 파악하기 어렵다는 한계가 있습니다. 이 연구는 ‘경사도 기반 연결(GBC)’이라는 새로운 최적화 기법을 제안하여, 어떤 에이전트의 어떤 행동이 문제였는지 세밀하게 추적하고 시스템의 성능을 개선합니다.
SimFoundry: Modular and Automated Scene Generation for Policy Learning and Evaluation
현실 세계에서 로봇 정책을 학습하고 평가하는 것은 비용이 많이 들고 확장성이 떨어집니다. ‘SimFoundry’는 단일 비디오로부터 시뮬레이션용 디지털 트윈을 자동으로 생성하고, 이를 변형하여 다양한 학습 환경을 구축하는 시스템으로, 이를 통해 학습된 정책은 별도의 조정 없이도 실제 환경에 성공적으로 적용될 수 있습니다.
GitHub Trending
msitarzewski/agency-agents
이 프로젝트는 프론트엔드 개발부터 커뮤니티 관리까지 다양한 역할을 수행하는 AI 에이전트 모음입니다. 각 에이전트는 고유한 성격과 전문성을 가지고 있어, 마치 하나의 완전한 AI 에이전시처럼 협력하여 작동합니다.
soxoj/maigret
Maigret는 사용자 이름 하나만으로 3000개 이상의 웹사이트에서 해당 인물에 대한 정보를 수집하는 도구입니다. 이를 통해 특정 사용자의 온라인 활동 흔적을 모아 상세한 프로필을 구축할 수 있습니다.
commaai/openpilot
openpilot은 로보틱스를 위한 오픈소스 운영체제이며, 현재 300개 이상의 차종에서 운전자 보조 시스템을 업그레이드하는 데 사용됩니다. 이 시스템을 설치하면 기존 차량의 주행 보조 기능을 크게 향상시켜 자율 주행에 가까운 경험을 제공합니다.
ripienaar/free-for-dev
이 저장소는 개발자와 데브옵스 엔지니어에게 유용한 무료 티어(free tier)를 제공하는 SaaS, PaaS, IaaS 서비스 목록을 정리한 자료입니다. 개발자들은 이 목록을 활용하여 비용 부담 없이 다양한 클라우드 서비스를 테스트하고 프로젝트에 적용해볼 수 있습니다.
logto-io/logto
Logto는 SaaS 및 AI 애플리케이션을 위한 인증 및 인가 인프라를 제공하는 오픈소스 프로젝트입니다. OIDC와 OAuth 2.1 표준을 기반으로 멀티테넌시, SSO, RBAC 같은 핵심 기능을 지원하여 복잡한 사용자 관리 시스템을 쉽게 구축할 수 있도록 돕습니다.
AI Weekly
AI Weekly Issue #509: AI Productivity: it works best for the people losing their jobs
AI가 실제로 생산성을 향상시키는지에 대한 구체적인 증거들이 나오고 있습니다. 일부 사람들에게는 특정 업무에서 놀라운 생산성 향상을 가져다주지만, 다른 이들에게는 효과가 없거나 오히려 부정적인 영향을 미치기도 합니다. 결국 AI로 인한 생산성 증대의 혜택은 예상과는 다른 곳으로 흐르고 있으며, 누가 이득을 보고 누가 대가를 치르는지가 명확해지고 있습니다.
오늘의 키워드
Vision Fine-tuning Distillation Agent Reasoning Multimodal LLM Eval