|
搜索
搜 索
高等教育領域數字化綜合服務平臺
復雜環境的視覺感知、重建與理解
利用多機器人和多模態視覺傳感器有效探索與感知復雜
環境的三維結構，進而理解和分析三維場景。研究從多源異
構的機器人定位與建圖等環境感知方面、多模態融合的前景
分割、顯著性檢測和目標檢測等場景分析方面取得突破。
浙江工業大學
2021-05-06
一種場景和目標感知與理解技術
1. 痛點問題
場景、目標對象的感知與語義理解在醫療健康、運動培訓等領域具有廣闊的應用前景，其核心是如何在像素級、對象級、場景級多層次、多尺度表示下實現語義、幾何及空間關系的透徹感知。
現有計算機視覺方法或激光雷達等手段無法同時獲取多個維度的高質量場景與目標信息，同時現有的深度估計、語義分割、位姿估計等相關技術，存在識別精度低、提取不到關鍵信息、應用場景單一等問題，無法滿足大尺度場景應用的需求。
2. 解決方案
團隊提出多模態采集、時空復用編碼攝像方法，獲取大景深、高時空分辨、豐富的精確場景視覺信息；提出一種基于物理空間推理和語義關聯建模的動態場景深度估計方法，綜合語義信息、幾何結構信息以及時空間信息進行濾波，實現復雜動態場景的無先驗深度估計，將觀測目標與背景進行區分；提出一套從圖像和視頻中預測目標的位置和姿態的方法，包括迭代匹配的深度網絡、基于物體三維坐標的旋轉/平移解耦、自監督6D模型等，克服了遮擋、光照變化、視覺歧義與數據標注依賴等因素的影響，可以準確估計目標相對相機的 6D 位姿（3D平移量和3D旋轉量）；構建了基于全卷積網絡和興趣區域的多目標實例檢測與分割框架，有效的解決了復雜類別、場景遮擋情況下的多目標實例分割問題，能夠實現同時對場景中多個目標檢測與分析。
合作需求
尋求醫療健康服務、醫療器械等領域有相關技術開發、市場推廣經驗，能推廣本技術落地的高科技企業，可以進行深度合作。
清華大學
2022-02-18
面向機器人的智能視覺環境感知及三維場景重建
面向機器人的智能視覺環境感知及三維場景重建? 面向機器人視覺的自然場景理解是近年來的研究熱點和重要挑戰之一，其目標是對自然場景圖像及視頻的內容作出有效分析、認知與表達，目前相關理論和算法正處于初期探索階段。我們的研究成果表明，從場景視覺語義推理、場景目標識別和場景行為模式檢測三個環節展開研究，有助于構建自然場景理解的創新機制，進一步開發機器人
南京大學
2021-04-14
視頻與圖像理解
研究視頻與圖像的視覺特征表示與特定對象的視覺跟蹤
和識別，分析視頻結構化語義信息，綜合視頻與圖像檢索、
動作識別與行為分析、視頻目標跟蹤等技術，進而解決視頻
與圖像理解的難題。
浙江工業大學
2021-05-06
漫畫圖像版面理解技術
漫畫作為一種特殊的休閑娛樂類出版物，通常由簡單形象的繪畫內容和少量的文字構成，深受不同國家各年齡段閱讀者的喜愛。隨著移動終端(如智能手機、平板電腦、電子書閱讀器)的普及，越來越多的讀者開始基于移動終端閱讀漫畫電子內容，漫畫移動閱讀已成為漫畫出版產業的發展趨勢，出現了大量的漫畫內容網站以及相應的APP閱讀軟件（如Apple store里的漫畫控、Comic glass，Android應用市場里的卡布漫畫、有妖氣漫畫等）。然而，現有的漫畫電子出版物及以往大量的歷史紙質出版物通常按照紙質媒介的大小進行排版設計，受漫畫內容及排版布局、移動終端屏幕大小及分辨率的限制，無法在移動終端上清晰完整地展示。 為了解決該問題，北京大學計算機科學技術研究所“網絡內容保護與文檔處理實驗室”師生通過近幾年的攻關，研究出了漫畫圖像版面理解技術，對該問題提出了有效的解決方案。
北京大學
2021-02-01
空間目標光學探測感知技術
技術成熟度：技術突破
1.空間目標及星圖光學探測仿真系統。由于空間目標探測真實數據獲取成本較高，且數據量較少，結果驗證困難，團隊開發了空間目標及星圖光學探測仿真系統。此工作以軟件形式呈現，以友好的人機交互界面，根據用戶的實際系統參數，提供準確可靠地提供當前時刻空間探測仿真圖像，該軟件前期經過與stk仿真軟件結果比對驗證其坐標的準確性，與在軌實測圖像進行比對驗證其仿真效果的可靠性。目前該軟件已經在項目開發過程中廣泛使用，為提高系統開發效率、驗證算法性能提供有效支撐。
2.空間目標探測感知關鍵技術及算法體系。該成果以理論及軟件開發包形式呈現，團隊具備多年的空間探測相關開發經驗，并將相關理論及算法構建軟件開發包。該SDK開發包基于C++開發，具有較好的泛化能力，具有坐標描述轉換、預處理、目標提取、星表制備、星圖識別、光學標定、定位定姿定軌等功能，可支撐各層次的空間探測相關開發需求。目前團隊基于此SDK開發的頂層軟件，采用目標TLE數據庫匹配的解決方法，已經完成長光奧閏光電科技有限公司地基望遠鏡空間目標的感知識別及長光衛星技術股份有限公司的星敏感器在軌圖像空間目標自動提取與識別，后續還將采用更多的數據驗證完善提升本系統的技術成熟度。
意向開展成果轉化的前提條件：
1、長春長光奧閏光電科技有限公司等測站望遠鏡生產企業，利用本項目的共性技術，實現地基測站的空間目標自動探測感知，為空間安全提供支撐服務。
2、長光衛星技術股份有限公司、吉天星舟空間技術有限公司等遙感衛星公司，通過本技術的轉化，可以利用星上光學載荷構建空間態勢感知平臺，為自身衛星安全提供保障、為國家及其他航天企業的空間安全需求提供數據支撐服務。另外可以在空間光學載荷開發過程中應用空間目標及星圖光學探測仿真系統，對光學載荷的精度和魯棒性進行評估和測試。
長春工業大學
2025-05-20
智能服務語義理解與優化調度
針對目前智能服務系統在服務過程中存在的人機交互語
義理解不夠深入、服務適配實時性差、以及智能化優化不足
等問題，利用深度學習、強化學習、知識圖譜等技術手段，
重點研究：1）高效低成本的服務數據獲取方法，為各類基
于機器學習的服務模型提供高質量訓練數據；2）面向服務
過程的深度語義理解，包括服務意圖識別、服務過程抽取、
事件檢測等；3）面向復雜服務需求的服務任務智能調度，
結合具體服務場景展開基于多目標多約束的智能優化。
浙江工業大學
2021-05-06
傳統發酵食品工藝機理解析與優化
通過國家“十一五”科技支撐計劃、863 計劃、國家自然科學基金、江蘇省自然科學基金及鎮江市科技支撐計劃的資助，解析我國優勢傳統發酵食品---如鎮江香醋的功能性組份及其成因，探尋我國傳統多菌種混合發酵過程中微生物群落結構與功能之間的關系，進而進行其功能優化調控。 創新要點 以原位分離出的功能微生物進行“生物強化”，調控產酸、產酯、改善產品品質、提高原料利用率、縮短發酵周期。
江南大學
2021-04-11
超高分辨柔性流場感知系統
與高速飛行的飛機不同，微小型無人機體積小，重量輕，飛行速度低，更容易受到環境湍流的影響，需要高靈敏度的小型氣流傳感器提供全面的空氣動力學信息。如何讓微小型無人機像鳥類一樣感知和操縱氣流一直是航空和傳感器領域的難題。
面向微小型無人機的飛行參數測量，北航研發團隊研制出一種基于氧化釩的高靈敏度柔性流速傳感器，實現了0.11 mm/s和0.1°的超高流速和角度分辨力，實驗驗證了攻角、側滑角和空速的多參數感知能力，并完成了微小型無人機飛行速度以及機翼微振動的測量，為微小型無人機提供了低成本、高精度的大氣參數傳感方案。
該傳感器基于量熱式原理，由中心微加熱器產生恒定溫差，四周的熱敏電阻陣列測量溫度分布，根據熱敏電阻陣列測得的溫度差準確反映流速大小及方向。采用懸空型隔熱結構以及高電阻溫度系數材料氧化釩作為熱敏電阻以增大傳感器的測量靈敏度。在聚酰亞胺基底上通過MEMS工藝加工了總厚度90μm的超薄柔性流速傳感器，實現了微小型無人機的曲面貼附功能。經風洞測試，流速傳感器的理論分辨力達0.11 mm/s,流速測量重復精度約為測量值的0.5%，響應時間約為20ms。在10 m/s時，流速傳感器的最大角度靈敏度為36.7 mV/deg，噪音水平為1.78 mV，根據2σ準則計算出其理論角度分辨力為0.1°。
研究團隊已經完成流速傳感器工程化樣品的制備，并將兩個流速傳感器裝載到一個微小型無人機平臺上進行飛行參數感知應用。結果表明平均飛行速度的估計誤差低于0.2 m/s。由于流速傳感器的高靈敏度特性，它甚至捕捉到了機翼的微振動信息，并與外置IMU模塊顯示了相同的機翼振動頻率。這項研究展示了一種柔性高靈敏度流速傳感器，拓寬了流場感知在微小型無人機姿態檢測、空速估計以及飛行安全監測方面的應用，為無人機的飛行參數測量提供了創新的設計思路與發展前景。
北京航空航天大學
2024-07-08
智能視覺感知芯片
1.痛點問題
元宇宙時代三維成像基礎設備和數字終端成像及顯示設備都將需要革命性的提升。同時，工業智能和基礎科學的快速發展也對感知和成像極限提出了更高的需求。
現有的成像技術，即攝像頭模組和3D成像模組，存在諸多技術和經濟的缺陷，如抗擾動性能差、占據空間大、功耗大、成本高等，特別是隨著傳感芯片像素數的增加，傳統光學成像系統需要多級較大的昂貴鏡片才能實現高分辨率的成像性能，很難應用于手機等小型化設備上，不足以適應科技的高速發展。
“智能視覺感知芯片”將達成光學感知的技術革新并有效解決現存問題。通過數字自適應光學技術矯正系統像差和環境像差、實現高速重構目標景物高精度三維信息，進而實現使用普通的低成本小型化單鏡片即可實現高分辨率成像，同時該芯片能夠適用于不同的光學系統，包括大口徑天文成像，實現高分辨率遠距離成像，克服大氣湍流干擾。
2.解決方案
團隊提出“智能視覺感知芯片”概念，該種芯片擁有多項優勢：全球領先的4D感知技術，自適應抗干擾；創新的透鏡設計方案結合自主知識產權算法，可通過單攝像頭模組實現原多攝像頭模組功能，大幅降低現有成本、體積和功耗，顯著提升分辨率。通過對目標場景進行多維度的密集采樣，將多維度的耦合信息解耦，重構傅里葉面的非期望相位分布，實現高速大范圍的自適應光學矯正，顯著降低光學成像系統尺寸與成本，提升成像效果，同時具備三維深度感知能力。
合作需求
尋求消費電子等領域有相關技術開發、市場推廣經驗，能推廣本技術落地的高科技企業，可以進行深度合作。
清華大學
2022-05-19