職位描述
崗位職責(zé)純視覺(jué)算法研發(fā):1、負(fù)責(zé)機(jī)器人的純視覺(jué)算法(例如基于Multi-Camera BEV)開(kāi)發(fā)與優(yōu)化,涵蓋目標(biāo)檢測(cè)、目標(biāo)跟蹤、圖像分割、3D視覺(jué)、多模態(tài)融合、碰撞檢測(cè)等任務(wù),增強(qiáng)機(jī)器人在復(fù)雜環(huán)境中的視覺(jué)感知能力。2、研究并探索前沿的計(jì)算機(jī)視覺(jué)技術(shù)和大模型技術(shù),將其應(yīng)用于機(jī)器人視覺(jué)系統(tǒng),如利用大模型預(yù)訓(xùn)練能力提升視覺(jué)任務(wù)性能和泛化能力。3、基于純視覺(jué)模型架構(gòu)(例如BEV former),進(jìn)行視覺(jué)模型的訓(xùn)練和調(diào)優(yōu),包括選擇預(yù)訓(xùn)練模型、設(shè)計(jì)訓(xùn)練策略和優(yōu)化算法,以達(dá)到所需性能和效率。4、設(shè)計(jì)高效的視覺(jué)算法框架,確保算法在機(jī)器人硬件平臺(tái)上的實(shí)時(shí)性和穩(wěn)定性,滿(mǎn)足不同應(yīng)用場(chǎng)景下的視覺(jué)需求。數(shù)據(jù)基準(zhǔn)構(gòu)建:1、面向仿真或者真實(shí)場(chǎng)景收集、整理純視覺(jué)數(shù)據(jù),構(gòu)建高質(zhì)量訓(xùn)練數(shù)據(jù)集,為純視覺(jué)算法模型訓(xùn)練和優(yōu)化提供支持。2、分析數(shù)據(jù)集分布和特性,提高數(shù)據(jù)質(zhì)量和多樣性,提升模型魯棒性。產(chǎn)品集成和協(xié)作:3、將開(kāi)發(fā)的視覺(jué)算法與系統(tǒng)集成,確保與其他模塊(如運(yùn)動(dòng)控制、導(dǎo)航、交互等)無(wú)縫協(xié)作。4、設(shè)計(jì)和實(shí)施全面的測(cè)試方案,對(duì)視覺(jué)算法在不同場(chǎng)景下的準(zhǔn)確性、實(shí)時(shí)性、魯棒性等性能進(jìn)行評(píng)估和驗(yàn)證,并根據(jù)結(jié)果優(yōu)化和改進(jìn)。5、為產(chǎn)品開(kāi)發(fā)和生產(chǎn)提供技術(shù)支持,解決視覺(jué)算法相關(guān)問(wèn)題和挑戰(zhàn),確保產(chǎn)品順利交付和穩(wěn)定運(yùn)行。6、與硬件工程師、軟件工程師、產(chǎn)品經(jīng)理等團(tuán)隊(duì)成員密切合作,共同推進(jìn)產(chǎn)品的研發(fā)和優(yōu)化,提升產(chǎn)品性能和用戶(hù)體驗(yàn)。崗位要求1、教育背景:計(jì)算機(jī)科學(xué)、電子信息工程、自動(dòng)化、人工智能等相關(guān)專(zhuān)業(yè),碩士及以上學(xué)位。2、專(zhuān)業(yè)技能: 熟練掌握計(jì)算機(jī)視覺(jué)基本理論和算法,如目標(biāo)檢測(cè)、目標(biāo)跟蹤、圖像分割、3D視覺(jué)等,能獨(dú)立設(shè)計(jì)和實(shí)現(xiàn)相關(guān)視覺(jué)算法。 熟悉深度學(xué)習(xí)框架,如TensorFlow、PyTorch等,具備豐富的深度學(xué)習(xí)模型開(kāi)發(fā)和訓(xùn)練經(jīng)驗(yàn),對(duì)大模型技術(shù)有深入理解和實(shí)踐經(jīng)驗(yàn)。 熟練掌握C++/Python等編程語(yǔ)言,具備良好的編程能力和代碼規(guī)范,能高效實(shí)現(xiàn)和優(yōu)化視覺(jué)算法。 熟悉機(jī)器人硬件平臺(tái)和傳感器,如攝像頭、激光雷達(dá)、RGBD相機(jī)等,能夠進(jìn)行視覺(jué)算法的硬件適配和優(yōu)化。
企業(yè)介紹
跨維(深圳)智能數(shù)字科技有限公司成立于 2021 年 6 月,是一家以 Sim2Real 為核心,研發(fā)高通用性具身智能技術(shù)的國(guó)家高新技術(shù)企業(yè)。公司憑借在 3D 生成式 AI、多模態(tài)大模型及三維成像方面的長(zhǎng)期技術(shù)積累,打造了軟硬一體的產(chǎn)品矩陣,包含 DexVerse? 具身智能引擎、基于 3D VLA (3D Vision Language ****) 大模型的成像感知套件等產(chǎn)品,是具身智能核心技術(shù)規(guī)模化商業(yè)落地的先驅(qū)者,目前已在30+行業(yè)批量商業(yè)落地。 目前公司已獲得來(lái)自松禾資本、真格基金、聯(lián)創(chuàng)資本、聯(lián)想創(chuàng)投等投資。 公司現(xiàn)有約百人團(tuán)隊(duì),公司研發(fā)人員占比 70% 以上,核心算法團(tuán)隊(duì)由三維人工智能領(lǐng)域權(quán)威專(zhuān)家領(lǐng)銜,核心成員具有新加坡國(guó)立大學(xué)、清華大學(xué)、南洋理工大學(xué)、西安交通大學(xué)、華南理工大學(xué)等國(guó)內(nèi)外頂尖高校人工智能博士/碩士背景;硬件及產(chǎn)品化團(tuán)隊(duì)來(lái)自飛利浦、ASML、騰訊、霍尼韋爾等知名科技企業(yè),具有豐富的智能制造產(chǎn)品開(kāi)發(fā)與落地經(jīng)驗(yàn),技術(shù)實(shí)力雄厚。創(chuàng)新 3D AffordanceNet 三維功能可供性分析方法及大規(guī)模基準(zhǔn)數(shù)據(jù)集;多次獲國(guó)際相關(guān)大賽 / 排行榜冠軍,技術(shù)顛覆性創(chuàng)新。