Stories

Detail Return Return

稚暉君官宣,全球首個0代碼機器人創作平台來了! - Stories Detail

提到稚暉君,毫無疑問,在科技圈一直是頂流的存在。自從稚暉君從華為出來投身機器人創業以後,大佬的技術動向無時無刻不被業界所關注着。

這不,就在剛剛過去的 1024 程序員節,稚暉君動態迎來一波大更新,並且一出手又是一個王炸,相信不少同學也刷到了,那就是官宣

全球首個 0 代碼機器人內容創作平台:「靈創」正式發佈了

智元這次發佈的靈創平台,是一個面向大眾的機器人創作平台

即便用户沒有專業的編程、控制和動作設計背景,也能輕鬆完成機器人創作與發佈。

要知道,以前用户想完成這件事情,是需要專業的背景、專業的設備、要懂技術、要懂編程才能做到的。

但是現在有了這個平台,就可以將傳統機器人動作開發(比如:設計、控制、同步、調試)等複雜流程抽象化、可視化,讓機器人創作更加直觀和易用。

所以簡單來概括,這平台出現的最大意義之一就是:

極大降低了機器人創作的門檻,讓機器人從此不再只是少數極客的玩具了

靈創平台核心功能

「靈創」平台包含如下四大核心功能

1、動作開發

有了這個功能,從現在開始,可以説每個人都能當機器人的“舞蹈老師”了。

具體如何來理解呢?

講白了,通過這個平台,無論是舞蹈、武術、還是日常動作,用户只需要一部手機拍攝視頻上傳,就能讓機器人學會對應動作。

要知道,這可是原先只有極少數的專業研發人員才能完成的事情,而且往往還需要昂貴的動捕設備,算法建模、強化學習訓練、工程調參等專業知識。

但現在藉助「靈創」平台,0代碼就可以進行機器人動作開發

2、語音演繹

藉助這項功能,用户就可以實現基於語音驅動的機器人創作

當用户上傳文本內容或音頻後,平台會智能識別語義,並生成與語音內容匹配的機器人肢體動作與表情。

而且該功能為用户提供了音色、情緒等定製化能力,以賦予機器人特定的情緒和個性。

3、時間軸編排

這一次,「靈創」平台將機器人表達三要素動作表情語音全部搬上了時間軸。

如今,用户可以像剪視頻一樣,通過自由編排、調整細節來編排機器人表演。

該平台支持動作混剪、組合與故事線編排,以此來幫助用户完成長程表演中的敍事化動作設計。

4、羣編羣控

針對有多台機器人的用户,「靈創」平台還支持多台機器人的羣控、羣編,以實現一人操控,百“機”共舞。

「靈創」平台的“設備聯動與羣控管理”功能,可以實現多設備、多樣化動作任務一鍵下發,分角色以不同動作、不同語音、不同表情協同演繹。

比如針對一場複雜的機器人表演,過去可能需要很多人協作,而如今通過該平台一個人加一台設備,就能完成整支隊伍的調度與編排。

除了以上這四點核心功能,「靈創」平台上還提供了各種官方素材庫動作、表情模板庫,用户可以直接從現成庫中調用動作、表情等進行個性化創作。

所以總而言之,通過這個平台,過去需要專業背景和專業設備才能完成的機器人創作,現如今的使用門檻大大降低了

回顧創業的這兩年,稚暉君和智元可以説為整個具身智能行業貢獻了大量的開創性工作

其中最具代表性的就是從去年下半年開始的三次大規模官宣機器人資料開源

包括到現在,智元機器人官網上還專門設置了一個「開源」菜單,來集中展示智元創業以來所做的開源工作。

第一次開源

第一次開源是去年 9 月底。

當時稚暉君時隔數月突然在 B 站更新了動態並且帶來了一項乾貨,那就是:

智元自研高性能中間件 AimRT 正式宣佈開源

開源地址:github.com/AimRT/AimRT

這是一個面向現代機器人領域的運行時開發框架,輕量易部署,在資源管控、異步編程、部署配置等方面均具有更現代設計。

AimRT 項目代碼結構如下:

src
├── common --------------------------------- // 一些基礎的、可以直接使用的通用組件,例如 string、log 接口、buffer 等
├── examples ------------------------------- // AimRT 官方示例
│   ├── cpp -------------------------------- // CPP 接口的示例
│   ├── py --------------------------------- // Python 接口的示例
│   └── plugins ---------------------------- // 一些各方插件的使用示例
├── interface ------------------------------ // AimRT 接口層
│   ├── aimrt_core_plugin_interface -------- // [CPP] 插件開發接口
│   ├── aimrt_module_c_interface ----------- // [C] 模塊開發接口
│   ├── aimrt_module_cpp_interface --------- // [CPP] 模塊開發接口,對 C 版本的封裝
│   ├── aimrt_module_protobuf_interface ---- // [CPP] 與 protobuf 相關的模塊開發接口,基於 CPP 版本接口
│   ├── aimrt_module_ros2_interface -------- // [CPP] 與 ROS2 相關的模塊開發接口,基於 CPP 版本接口
│   ├── aimrt_pkg_c_interface -------------- // [C] Pkg 開發接口
│   └── aimrt_type_support_pkg_c_interface - // [C] Type support 包接口
├── plugins -------------------------------- // AimRT 官方插件
├── protocols ------------------------------ // 一些 AimRT 官方的標準協議
├── runtime -------------------------------- // AimRT 運行時
│   ├── core ------------------------------- // 運行時核心庫
│   ├── main ------------------------------- // 基於 core 實現的一個主進程"aimrt_main"
│   └── python_runtime --------------------- // 基於 pybind11 封裝的 python 版本運行時
└── tools ---------------------------------- // 一些配套工具

目前該項目在 GitHub 平台已經累計獲得超過 1200 個的 Star 標星。

AimRT 源碼倉庫

第二次開源

第二次開源正好也是去年 1024 程序員節這個時間點。

當時稚暉君在 B 站動態裏又再次官宣:

靈犀 X1 的全套資料也正式開源了!

這是一個包含 29 個關節和 2 個夾爪並且支持擴展頭部 3 自由度的全棧開源機器人。

靈犀X1整機結構

其擁有模塊化設計、高自由度,以及高擴展性等諸多優勢。

而這次開源則帶來了包括如下清單所示的全套開發資料:

  • 開發指南(zhiyuan-robot.com/DOCS/OS/X1-PDG)
  • 結構設計資料,包括BOM清單、整機STEP、整機圖紙、裝機SOP(github.com/AgibotTech/agibot_x1_hardware)
  • 推理代碼(github.com/AgibotTech/agibot_x1_infer)
  • 訓練代碼(github.com/AgibotTech/agibot_x1_train)
  • 硬件模塊(oshwhub.com/pengzhihui/agibot-x1)

從文檔到代碼,從圖紙到清單,這套軟硬件資料全部下來總大小超過了 1.2GB,同時大佬也表示歡迎大家去復刻。

也正因為此,智元機器人也成為了當時業內首家全棧開源人形機器人圖紙和代碼的公司,非常具有里程碑意義。

目前這套代碼倉庫在 GitHub 平台上也已經累計獲得了好幾千顆的 Star 標星。

第三次開源

第三次開源則是去年的年底,稚暉君同樣發了動態正式官宣:

開源百萬真機數據集 AgiBot World。

開源地址:

  • github.com/OpenDriveLab/agibot-world
  • huggingface.co/agibot-world

這次開源的 AgiBot World 長程數據規模高出 10 倍,場景範圍覆蓋面擴大 100 倍,數據質量從實驗室級上升到工業級標準。

這也是當時全球首個基於全域真實場景、全能硬件平台、全程質量把控的百萬真機數據集開源項目。

包括後來,智元還陸續官宣發佈了諸如:通用具身基座大模型:GO-1,以及具身智能一站式開發平台 Genie Studio等一系列模型或工具。

這些都是整個具身行業發展歷程上的重要探索和開拓性工作。

正如智元所説,希望通過開源開放和生態共創來降低機器人的開發門檻,從而共同推進人形機器人和具身智能技術的創新發展。

包括這一次「靈創平台」的正式發佈,對機器人開發感興趣的同學可以説又有福了,這波可以直接站在巨人的肩膀上。

注:本文在GitHub開源倉庫「編程之路」 https://github.com/rd2coding/Road2Coding 中已經收錄,裏面有我整理的6大編程方向(崗位)的自學路線+知識點大梳理、面試考點、我的簡歷、幾本硬核pdf筆記,以及程序員生活和感悟,歡迎star。
user avatar alibabawenyujishu Avatar xiaoniuhululu Avatar ting_61d6d9790dee8 Avatar nihaojob Avatar front_yue Avatar monkeynik Avatar zaoying Avatar u_16018702 Avatar histry Avatar solvep Avatar febobo Avatar xiaolei_599661330c0cb Avatar
Favorites 100 users favorite the story!
Favorites

Add a new Comments

Some HTML is okay.