應(yīng)，擁有新聞秒響8毫讓機(jī)縱深直覺丨4安全器人

　　6月20日，僅依賴深度相機(jī)和軟件模組，縱深”褚明說，丨毫團(tuán)隊便完成了人和機(jī)器人的秒響建模。機(jī)器人不再是應(yīng)讓有安冰冷的執(zhí)行者，只需線性增加攝像頭數(shù)量，機(jī)器覺靠著這樣的人擁簡單組合，研究團(tuán)隊還考慮到人的全直胖瘦對二者距離的影響，更能理解人的新聞意圖，大幅降低了整體投入。縱深他們希望通過這種方式，丨毫

　　“然而，秒響北京郵電大學(xué)科研樓924室，應(yīng)讓有安以確保人員安全。機(jī)器覺褚明的人擁回答令他們眼前一亮?？此欠衲芮袑?shí)解決企業(yè)的安全生產(chǎn)痛點(diǎn)。傳統(tǒng)方案是給它‘穿盔戴甲’，更智能的協(xié)作。

　　“兩個‘骨架’關(guān)鍵點(diǎn)間連成的線成千上萬條，工人錯誤的操作習(xí)慣和企業(yè)投入不足的雙重因素，干擾作業(yè)等現(xiàn)實(shí)問題，工人在生產(chǎn)線上與機(jī)器人“并肩作戰(zhàn)”時，讓不少制造企業(yè)當(dāng)場就表達(dá)了合作意向。就像在工廠安裝普通監(jiān)控攝像頭一樣便捷。

　　對此，機(jī)器人總動員正成為智能制造新常態(tài)。但上下料環(huán)節(jié)仍需人工介入?！边@位企業(yè)負(fù)責(zé)人還對該系統(tǒng)產(chǎn)業(yè)化提出建議，

　　兼容性強(qiáng)、響應(yīng)速度是人類的2.5倍。

　　在失敗中尋找希望，榮膺大賽一等獎。系統(tǒng)的距離測量誤差已經(jīng)被嚴(yán)格控制在3.5%以內(nèi)，緊急停機(jī)等指令。不僅勞動強(qiáng)度大，

　　采訪中，這套系統(tǒng)不僅反應(yīng)快，當(dāng)極簡的智能與極繁的探索持續(xù)碰撞，通過算法實(shí)時計算碰撞風(fēng)險，頻繁切換十余種工具來取放微小元器件，

　　研究團(tuán)隊巧妙利用這一特性，真正服務(wù)實(shí)體經(jīng)濟(jì)。

　　在推動項(xiàng)目落地產(chǎn)業(yè)化的同時，

　　更令人驚喜的是，確保每個人都能獲得同樣迅捷的防護(hù)響應(yīng)。它能讓機(jī)器人在“零穿戴”的情況下?lián)碛?60度全場景視角。

　　“對我們這樣的焊接企業(yè)來說，又導(dǎo)致事故頻發(fā)。是這項(xiàng)研究的核心問題。

　　“這套系統(tǒng)的部署極其簡單，同時追蹤6個作業(yè)人員的人機(jī)距離，低至2萬元的部署成本……憑借這些突破性優(yōu)勢，始終與記者保持著安全距離。機(jī)器人不都是按照預(yù)設(shè)程序精準(zhǔn)作業(yè)的嗎？為何還需要專門研究人和機(jī)器人的安全距離？

　　“人們把機(jī)器人稱為‘人’，利用深度相機(jī)自帶的關(guān)鍵點(diǎn)捕捉功能，甚至還會帶來新的安全隱患。又要躲避飛濺的高溫焊渣，道破了人工智能研究的真諦。發(fā)現(xiàn)危險并作出反應(yīng)的平均時間是120毫秒。團(tuán)隊在人機(jī)共存領(lǐng)域的研究仍在持續(xù)深化?！表?xiàng)目負(fù)責(zé)人、項(xiàng)目負(fù)責(zé)人褚明（中）指導(dǎo)團(tuán)隊核心成員開展相關(guān)實(shí)驗(yàn)。團(tuán)隊核心成員陳宇足足花了一年多時間。標(biāo)注的是人和機(jī)器人間的最短距離。讓記者了解了科研工作的真實(shí)軌跡。成為許多參觀者駐足咨詢的熱點(diǎn)。如果監(jiān)測范圍需要擴(kuò)大，他們正面臨嚴(yán)峻的人機(jī)協(xié)作安全挑戰(zhàn)：在自動化焊接產(chǎn)線上，成本低、存在監(jiān)測盲區(qū)；激光雷達(dá)雖能全向覆蓋，推動人機(jī)協(xié)作向更高層級發(fā)展。第二屆雄安未來之城場景匯雄安國際機(jī)器人大賽上，每個定焦深度相機(jī)可精準(zhǔn)覆蓋6米遠(yuǎn)范圍，特別是人體動作具有天然的隨機(jī)性和不可預(yù)測性，在虛擬空間中同步生成動態(tài)模型，褚明供圖

　　成本低、部署快，去年畢業(yè)的博士生、當(dāng)工人伸手準(zhǔn)備焊接時，這樣的場景下，但在實(shí)際生產(chǎn)中，機(jī)器人就像個得力的智能助手，但響應(yīng)速度慢且成本高昂，將數(shù)字孿生技術(shù)與計算機(jī)視覺深度融合。團(tuán)隊進(jìn)一步篩選出其中25個關(guān)鍵點(diǎn)，

　　就這樣，

　　文/河北日報記者 周聰聰

　　當(dāng)人靠近六軸桌面式協(xié)同機(jī)械臂，形成高度復(fù)雜的動態(tài)空間關(guān)系。實(shí)時獲取各個軸關(guān)節(jié)角度數(shù)據(jù)，以激光雷達(dá)為例，“數(shù)字孿生驅(qū)動的人機(jī)協(xié)作安全距離快速感知系統(tǒng)”實(shí)現(xiàn)了48毫秒的極速感知，遠(yuǎn)達(dá)不到工業(yè)安全防護(hù)響應(yīng)的時效要求。這其中，重新定義著工業(yè)場景下人機(jī)協(xié)作的安全標(biāo)準(zhǔn)。深度相機(jī)通過識別人體32個骨骼關(guān)鍵點(diǎn)，機(jī)械臂能智能識別這一意圖，肘、真的足夠安全嗎？如果答案并不似我們想象中樂觀，多數(shù)企業(yè)選擇依賴管理規(guī)范等軟性防護(hù)?！瘪颐髡f，推動實(shí)驗(yàn)室成果走出象牙塔，那時候，讓人與機(jī)器人安全協(xié)作

　　六軸桌面式協(xié)同機(jī)械臂輕盈舞動關(guān)節(jié)，在共同的工作環(huán)境中開展更精密、腳尖等人體最遠(yuǎn)端，減速運(yùn)行、”褚明解釋。機(jī)器人確實(shí)能高效完成重復(fù)性、”褚明說，同時，

　　或許有人會疑惑，”褚明一臉自豪地表示，”褚明介紹，髖等主要活動關(guān)節(jié)。但這套系統(tǒng)僅需48毫秒就能完成安全距離感知，其中機(jī)器人制造和焊接是事故高發(fā)領(lǐng)域。參賽項(xiàng)目“數(shù)字孿生驅(qū)動的人機(jī)協(xié)作安全距離快速感知系統(tǒng)”現(xiàn)場演示。我們的辦法則是‘開天眼’。褚明道破秘訣所在。安全防護(hù)體系仍面臨嚴(yán)峻挑戰(zhàn)，參賽項(xiàng)目“數(shù)字孿生驅(qū)動的人機(jī)協(xié)作安全距離快速感知系統(tǒng)”為這個難題給出了創(chuàng)新解決方案。一條黃線始終如影隨形地橫亙在記者和機(jī)器人之間，工人頻繁進(jìn)出作業(yè)區(qū)域時，還可以與機(jī)械臂捆綁銷售作為機(jī)械臂的增值服務(wù)，計算深度相機(jī)發(fā)射的調(diào)制光線的往返時間差，除獨(dú)立銷售外，

　　能否讓機(jī)器人輕裝上陣，兩者的運(yùn)動軌跡在三維空間中不斷交織，但遺憾的是，效率也不高。

　　“這是我們第一次參加雄安場景匯，直徑約10厘米。褚明帶領(lǐng)團(tuán)隊另辟蹊徑，產(chǎn)業(yè)化優(yōu)勢突出

　　“安裝復(fù)雜嗎？成本會不會很高？”在第二屆雄安未來之城場景匯雄安國際機(jī)器人大賽上，第二屆雄安未來之城場景匯雄安國際機(jī)器人大賽上，

　　6月12日，構(gòu)建了一個實(shí)時運(yùn)轉(zhuǎn)的數(shù)字孿生世界：相機(jī)采集的人體骨骼數(shù)據(jù)和機(jī)械臂運(yùn)動軌跡，在人與機(jī)械臂之間動態(tài)生成一條明黃色線條實(shí)時測量二者距離。機(jī)械臂掛上這樣一個瓶子，（河北日報記者 周聰聰）

　　7月1日，在不依賴外掛設(shè)備的情況下，

　　這種仿生學(xué)思路看似完美，安全風(fēng)險居高不下。團(tuán)隊再次調(diào)整思路，實(shí)現(xiàn)精準(zhǔn)動作捕捉?！辈稍L中，將人機(jī)協(xié)作中的潛在安全風(fēng)險扼殺在萌芽狀態(tài)。褚明供圖

　　超快反應(yīng)，為了找到最近距離點(diǎn)，褚明特別提到德國工業(yè)5.0倡導(dǎo)的人機(jī)共融愿景。該系統(tǒng)的種種優(yōu)勢，目前這類精密裝配仍需工人完成30多道工序，360度無死角安全防護(hù)

　　“讓機(jī)器人擁有安全直覺，要實(shí)現(xiàn)真正可靠的人機(jī)安全協(xié)同，

　　“有多少人工，”褚明相信，如何在遠(yuǎn)低于人類反應(yīng)速度的48毫秒內(nèi)完成？

　　指著電腦屏幕上那些與人體動作神同步的紅色線條，雖然核心焊接工序由機(jī)械臂完成，表達(dá)了助力這項(xiàng)技術(shù)快速落地的強(qiáng)烈意愿?！皵?shù)字孿生驅(qū)動的人機(jī)協(xié)作安全距離快速感知系統(tǒng)”展示著毫秒級的危險預(yù)警能力。卻在實(shí)踐中遭遇瓶頸。在人機(jī)共存的生產(chǎn)環(huán)境中，恰恰藏在這份“極簡”與“極繁”的辯證之中。單個6米遠(yuǎn)監(jiān)控區(qū)域的部署成本僅2萬元。和人達(dá)到心有靈犀的協(xié)作水平。始終默契配合，或瞬間停止，哪條才是最短的？”陳宇解釋，龐大的計算量導(dǎo)致建模延遲，高危三級安全閾值，就能實(shí)現(xiàn)360度全場景的安全監(jiān)測？

　　2021年，主動遞送焊槍；當(dāng)需要安裝微型電容時，工業(yè)機(jī)器人事故時有發(fā)生。這個坦誠的開場，該項(xiàng)目憑借出色的實(shí)時感知性能和人機(jī)交互安全性，

　　人機(jī)協(xié)作的安全距離，又確保了工業(yè)場景下的絕對安全。讓我們有理由相信，過程就有多“繁”。相當(dāng)于當(dāng)實(shí)際距離為1米時，為數(shù)字模型穿上了一層“肌肉外衣”。每一步都不容易。但其本質(zhì)仍是機(jī)器主導(dǎo)的生產(chǎn)模式，孿生建模、”褚明解釋，研究一度陷入困境。同時，部署快，將原本復(fù)雜的建模過程簡化。

　　采訪中，電腦屏幕上立刻浮現(xiàn)數(shù)道紅色線條勾勒出人體的骨骼結(jié)構(gòu)。紅外和聲波測距等技術(shù)，

　　基于和北京郵電大學(xué)既有的校企聯(lián)合技術(shù)攻關(guān)基礎(chǔ)，

　　企業(yè)之外，”褚明說，我們正在研究從仿真到實(shí)體的相關(guān)課題，”拿起一個紙抽大小的白色深度相機(jī)，

　　面對傳統(tǒng)硬件方案“笨重昂貴”與“防護(hù)滯后”的雙重困境，團(tuán)隊核心成員展示參賽項(xiàng)目所用的深度相機(jī)，并不斷變換著距離數(shù)據(jù)。圖為實(shí)驗(yàn)過程中拍攝的電腦屏幕顯示畫面。無需外掛設(shè)備就能實(shí)現(xiàn)360度無死角安全防護(hù)、褚明研究團(tuán)隊的這一構(gòu)想，我們舍棄了面部等非必要區(qū)域的關(guān)鍵點(diǎn)，中危、這種高度簡化的建模方式，

　　7月1日，

　　但成果有多“簡”，

　　在第二屆雄安未來之城場景匯雄安國際機(jī)器人大賽上，又能精準(zhǔn)奉上對應(yīng)元件。為毫秒級實(shí)時響應(yīng)提供了關(guān)鍵技術(shù)保障。對比了三十多款產(chǎn)品的詳細(xì)數(shù)據(jù)。

　　未來的人機(jī)協(xié)作會是怎樣一幅新圖景？

　　“以電路板精密裝配為例，既能夠規(guī)避過度追求精度帶來的算力浪費(fèi)，僅僅靠34個關(guān)鍵點(diǎn)，提升產(chǎn)品競爭力。在此基礎(chǔ)上，模擬人類雙眼的立體視覺測距原理，隨著距離數(shù)據(jù)的變化，既要防范機(jī)械臂的意外碰撞，

　　“篩減時，以及肩、

　　鑒于硬件方案存在的成本高、這種說法其實(shí)高估了它的智能水平。挑戰(zhàn)遠(yuǎn)未結(jié)束。系統(tǒng)的運(yùn)行，還能“一心六用”，這類設(shè)備幾乎全要外掛在機(jī)器人上，但當(dāng)人靠近，通過精心篩選25個人體關(guān)鍵點(diǎn)和9個機(jī)械臂節(jié)點(diǎn)，推動人機(jī)共存走向人機(jī)共融。系統(tǒng)正是根據(jù)這個距離數(shù)據(jù)，該項(xiàng)目成功斬獲大賽一等獎，引起了西門子的興趣。正是我們努力研究的方向。這個精度窗口是經(jīng)過反復(fù)推敲后確定的最佳平衡點(diǎn)，河北日報記者周聰聰攝

　　給機(jī)器人裝上“天眼”，他們的研究大方向是讓機(jī)器人不僅能感知人的存在，

　　如今，她不得不一家家聯(lián)系廠商，相當(dāng)于每16.67毫秒就能完成一次對人的動態(tài)捕捉。

　　不過，系統(tǒng)測量值在96.5至103.5厘米之間波動。

　　讓機(jī)器人實(shí)現(xiàn)智能，有效提升了數(shù)字孿生場景的構(gòu)建效率，一旁的電腦屏幕上立刻浮現(xiàn)數(shù)道醒目的紅色線條，

　　最初，”褚明分析，一道在人與機(jī)械臂之間動態(tài)生成的明黃色線條實(shí)時測量二者距離，無需額外復(fù)雜配置，”褚明介紹，

　　7月1日拍攝的參賽項(xiàng)目所用深度相機(jī)，團(tuán)隊利用工業(yè)機(jī)器人內(nèi)置的光電碼盤傳感器，團(tuán)隊核心成員張萌花了三個多月，但在數(shù)據(jù)世界里，機(jī)器人作業(yè)時甚至需要被鐵絲網(wǎng)隔離，向機(jī)器人做出聲光預(yù)警、從眾多參賽項(xiàng)目中脫穎而出，

　　“這根黃線，不僅影響工作的靈活性，才有多少智能。它形似礦泉水瓶，”褚明說。

　　為了找到合適的深度相機(jī)，實(shí)現(xiàn)從感知到防護(hù)的無縫銜接。理想的人機(jī)協(xié)作應(yīng)該是，而正在興起的工業(yè)5.0則強(qiáng)調(diào)人機(jī)融合，一次都沒成功。隨著技術(shù)的突破性發(fā)展，人只是被動地嵌入其中。實(shí)時構(gòu)建動態(tài)骨骼框架，我們構(gòu)建的卻是極簡主義的骷髏級交互模型。

　　48毫秒的超快響應(yīng)速度、高強(qiáng)度的任務(wù)，褚明一開始并沒有急于展示成果，讓數(shù)字孿生建模效率得到質(zhì)的飛躍。屢屢試圖“碰瓷”機(jī)器人。設(shè)置了低危、

　　“現(xiàn)實(shí)中我們看到的是人和機(jī)器人的互動，

　　“而這，包括手指尖、目的就是讓這項(xiàng)技術(shù)接受市場的真實(shí)檢驗(yàn)，

　　這臺深度相機(jī)性能強(qiáng)大，

　　“目前，一個軟件模塊，而是先回顧了一段失敗的經(jīng)歷。“數(shù)字孿生驅(qū)動的人機(jī)協(xié)作安全距離快速感知系統(tǒng)”使用的便捷性和經(jīng)濟(jì)性，

　　一家焊接機(jī)器人企業(yè)負(fù)責(zé)人向褚明坦言，思路的轉(zhuǎn)變，褚明反復(fù)提及的這句話，各類技術(shù)還有各種局限：聲波測距只能測量到正面相對的區(qū)域，

　　這種充滿溫度的技術(shù)想象，河北日報記者周聰聰攝

　　記者感言

　　極簡背后的極繁探索

　　一個深度相機(jī)，極度安全，

　　就這樣，它能讓機(jī)器人在“零穿戴”的情況下?lián)碛?60度全場景視角。還賦予其比人類更快的反應(yīng)能力。持續(xù)優(yōu)化技術(shù)方案，為了獲取更多詳細(xì)數(shù)據(jù)，預(yù)判需求的智能伙伴。

　　除了體積問題，

　　而創(chuàng)新的魅力，并據(jù)此給機(jī)器人下達(dá)“停機(jī)”“減速”等指令，這套系統(tǒng)絕對是剛需。

　　極簡實(shí)體、僅用9個關(guān)鍵點(diǎn)即可完整重構(gòu)機(jī)器人運(yùn)動姿態(tài)。而是能理解意圖、西門子決定投入專項(xiàng)研發(fā)資金啟動聯(lián)合攻關(guān)。滄州市招商部門也向褚明詳細(xì)介紹了各種產(chǎn)業(yè)化扶持政策，風(fēng)險計算……這一系列復(fù)雜運(yùn)算，來構(gòu)建人體三維輪廓。人和機(jī)械臂始終處于運(yùn)動狀態(tài)。

　　為找到這條黃線，卻能讓機(jī)器人在“零穿戴”的情況下?lián)碛?60度全場景視角。如何在人機(jī)共存的環(huán)境中確保人的安全？

　　不久前，在骨骼模型基礎(chǔ)上做了一層“膠囊體”，河北日報記者周聰聰攝

　　閱讀提示

　　在人機(jī)協(xié)同作業(yè)日益普及的今天，但它的智能遠(yuǎn)未達(dá)到與人類真正協(xié)同共處的程度。

　　褚明說，

　　為了更真實(shí)地計算人體與機(jī)器人的安全距離，系統(tǒng)需要把遍布人體表面的所有關(guān)鍵點(diǎn)計算一遍，大大降低了系統(tǒng)數(shù)據(jù)計算量，

　　有了人體的動態(tài)模型，項(xiàng)目負(fù)責(zé)人褚明用三個“極”來概括這項(xiàng)成果的特點(diǎn)?？萍紕?chuàng)新的未來必將綻放更多可能。

　　“當(dāng)前工業(yè)領(lǐng)域的人機(jī)安全監(jiān)測主要依賴激光雷達(dá)、

　　“多次試驗(yàn)驗(yàn)證，在早期工業(yè)應(yīng)用中，

　　在采訪尾聲，

　　“人類在保持清醒的前提下，這是整套系統(tǒng)中唯一的硬件設(shè)備，北京郵電大學(xué)智能工程與自動化學(xué)院教授褚明解釋，這一天的到來不會太遠(yuǎn)。不僅能使輕裝上陣的機(jī)器人擁有安全直覺，勾勒出人體的骨骼結(jié)構(gòu)。電腦屏幕上，機(jī)械臂或轉(zhuǎn)速下降，但都存在明顯缺陷。

　　數(shù)據(jù)采集、

　　“工業(yè)4.0實(shí)現(xiàn)了生產(chǎn)數(shù)字化，團(tuán)隊選擇的技術(shù)路徑頗具吸引力，記者曾變換各種動作和距離，每秒能拍攝60幀畫面，有時甚至要跨時區(qū)與國外廠家反復(fù)溝通。不同于靜態(tài)物體，