임베디드 로보틱스 — 데이터셋·VLA fine-tune·on-device 최적화

· #AI #LLM #트렌드 #기술블로그


arXiv 논문

Utonia: Toward One Encoder for All Point Clouds

모델/아키텍처

다양한 도메인의 포인트 클라우드 데이터를 하나의 모델로 처리할 수 있는 Utonia를 소개합니다. 원격 감지부터 LiDAR, CAD 모델까지 서로 다른 형태의 데이터를 아우르는 단일 Self-supervised Point Transformer 인코더를 구현하여 데이터 간의 장벽을 허물었습니다.

Helios: Real Real-Time Long Video Generation Model

단일 H100 GPU에서 19.5 FPS라는 놀라운 속도를 자랑하는 14B 규모의 비디오 생성 모델 Helios입니다. 특별한 가속 기술 없이도 긴 영상 생성 시 발생하는 품질 저하(Drifting) 문제를 해결하여, 실시간으로 고품질 비디오를 만들어냅니다.

T2S-Bench & Structure-of-Thought: Benchmarking and Prompting Comprehensive Text-to-Structure Reasoning

모델/아키텍처 개발 도구

사람이 정보를 구조화하며 이해하듯, LLM이 중간 텍스트 구조를 생성하도록 유도하는 Structure of Thought (SoT) 프롬프팅 기술을 제안합니다. 이 방법은 모델의 텍스트 처리 능력을 향상시키며, 이를 검증하기 위한 포괄적인 벤치마크도 함께 소개하고 있습니다.

Heterogeneous Agent Collaborative Reinforcement Learning

모델/아키텍처 추론/검색 에이전트

서로 다른 에이전트들이 훈련 중에 검증된 데이터를 공유하며 상호 발전하는 HACRL이라는 새로운 강화학습 패러다임을 소개합니다. 추론 단계에서는 각자 독립적으로 작동하면서도 협력 학습의 효율성을 극대화할 수 있는 것이 특징입니다.

BeyondSWE: Can Current Code Agent Survive Beyond Single-Repo Bug Fixing?

모델/아키텍처 에이전트 개발 도구

단순히 버그를 수정하는 것을 넘어, 코드 에이전트의 실제 능력을 평가하기 위한 포괄적인 벤치마크 BeyondSWE를 제안합니다. 여러 리포지토리에 걸친 추론이나 의존성 마이그레이션 등 현업에서 마주하는 복잡한 과제들을 해결할 수 있는지 테스트합니다.


Hugging Face Blog

Bringing Robotics AI to Embedded Platforms: Dataset Recording, VLA Fine‑Tuning, and On‑Device Optimizations

임베디드 플랫폼에서 로보틱스 AI를 구현하기 위한 전체적인 워크플로우를 다루는 글입니다. 데이터셋 녹화부터 Vision-Language-Action (VLA) 모델의 파인튜닝, 그리고 온디바이스 최적화 기법까지 상세히 설명합니다.

Hugging Face

Introducing Modular Diffusers - Composable Building Blocks for Diffusion Pipelines

Diffusion 파이프라인을 더 유연하게 구축할 수 있도록 돕는 모듈형 구성 요소(Building Blocks)를 소개합니다. 필요한 기능을 레고 블록처럼 조립하여 자신만의 파이프라인을 손쉽게 커스터마이징할 수 있게 해줍니다.

Hugging Face

PRX Part 3 — Training a Text-to-Image Model in 24h!

단 24시간 만에 고성능 Text-to-Image 모델을 처음부터 훈련시키는 과정을 상세히 공유합니다. 효율적인 학습 전략과 리소스 활용 팁을 통해 빠르게 모델을 구축하는 노하우를 배울 수 있습니다.

Hugging Face


msitarzewski/agency-agents

에이전트

프론트엔드 개발부터 커뮤니티 관리까지, 각 분야의 전문성을 가진 AI 에이전트들을 모아놓은 가상 에이전시 프로젝트입니다. 각 에이전트는 고유한 성격과 업무 프로세스를 가지고 있어 사용자의 다양한 요구를 해결해 줍니다.

TheCraigHewitt/seomachine

모델/아키텍처 개발 도구

기업을 위한 SEO 최적화 블로그 콘텐츠를 자동으로 생성해주는 Claude Code 기반 워크스페이스입니다. 주제 조사부터 글 작성, 분석 및 최적화까지 한 번에 처리하여 검색 엔진 상위 노출을 돕습니다.

KeygraphHQ/shannon

개발 도구

웹 애플리케이션과 API의 보안 취약점을 자동으로 점검하는 자율 AI 모의 해킹(Pentester) 도구입니다. 소스 코드를 분석하여 높은 성공률로 취약점을 찾아내므로 보안 강화에 큰 도움이 됩니다.

aquasecurity/trivy

컨테이너, Kubernetes, 클라우드 등 다양한 환경에서 보안 취약점과 설정 오류를 빠르게 찾아주는 올인원 보안 스캐너입니다. 비밀 키 유출 탐지나 SBOM 생성 기능도 지원하여 안전한 개발 환경을 구축할 수 있습니다.

moeru-ai/airi

모델/아키텍처

사용자가 직접 호스팅하여 나만의 가상 파트너(Waifu)를 만들 수 있는 AI 컴패니언 프로젝트입니다. 실시간 음성 대화는 물론 마인크래프트 같은 게임도 함께 즐길 수 있어 Neuro-sama와 같은 경험을 제공합니다.


오늘의 키워드

Transformer Reasoning Prompt LLM Inference Agent Eval Claude Claude Code Benchmark