|
搜索
搜 索
高等教育領(lǐng)域數(shù)字化綜合服務(wù)平臺
一種基于鏈接分析的聚焦爬蟲方法
本發(fā)明針對現(xiàn)有技術(shù)的不足之處提供了一種基于鏈接分析的聚焦爬蟲方法，用以解決現(xiàn)有聚焦爬蟲抓取網(wǎng)頁準確率和效率較低的問題。 為實現(xiàn)上述目的，本發(fā)明采用的技術(shù)方案為： 一種基于鏈接分析的聚焦爬蟲方法，其特征在于，包括如下步驟： (1)抓取網(wǎng)頁，將網(wǎng)頁和目標樣本網(wǎng)頁的結(jié)構(gòu)進行比較，確定目標網(wǎng)頁，從網(wǎng)站入口鏈接開始，記錄爬蟲到目標網(wǎng)頁的每一條鏈接路徑，建立目標網(wǎng)頁鏈接樹； (2)分析目標網(wǎng)頁鏈接樹，歸納鏈接樹中目標網(wǎng)頁路徑上的鏈接，替換鏈接樹中的鏈接，形成鏈接模版樹； (3)爬蟲使用鏈接模版樹作為導航，抓取與鏈接模版樹相匹配的網(wǎng)頁鏈接，直到整個抓取循環(huán)過程結(jié)束，最終抓取完所有目標網(wǎng)頁。 作為優(yōu)選，步驟(1)中，所述建立目標網(wǎng)頁鏈接樹的具體步驟如下： (11)選擇一個目標網(wǎng)頁作為目標樣本網(wǎng)頁，用于比較將下載的網(wǎng)頁結(jié)構(gòu)； (12)初始化鏈接樹，即將鏈接樹設(shè)置為一棵空樹； (13)初始化鏈接隊列，將網(wǎng)站的入口鏈接加入到鏈接隊列尾部； (14)從鏈接隊列頭部取出鏈接，廣度優(yōu)先地抓取網(wǎng)頁； (15)將抓取的網(wǎng)頁和目標樣本網(wǎng)頁進行比較，如果結(jié)構(gòu)相同，則將該目標網(wǎng)頁的路徑添加到鏈接樹中，將目標網(wǎng)頁的鏈接作為
電子科技大學
2021-04-10
一種深度多維度流量語義分析方法
一種深度多維度流量語義分析方法，使用有監(jiān)督的深度學習模型來訓練網(wǎng)絡(luò)獲?。酰颍祉撁娴奶卣飨蛄?，并綜合考慮用戶之間的語義關(guān)系來實現(xiàn)流量分析；對于網(wǎng)站日志的預處理，采用ｍａｐｒｅｄｕｃｅ篩選掉不符合條件的日志數(shù)據(jù)，其中包括爬蟲日志數(shù)據(jù)和其他網(wǎng)站的數(shù)據(jù)；對于構(gòu)建出來的瀏覽路徑，設(shè)置閾值為ｎ，篩選掉長度小于ｎ的路徑；對于網(wǎng)站ｕｒｌ頁面的文本處理，采用詞向量的分布式表示方法得到ｕｒｌ頁面的向量，利用ｕｒｌ頁面嵌套來描述用戶瀏覽行為的語義信息；采用聚類方法對用戶的瀏覽路徑進行聚類，通過聚類來分析用戶的分布情況和用戶群之間的差異，聚類使用ｔ?ＳＮＥ降維來達到直觀的向量空間聚類效果。
東南大學
2021-04-11
大學.jpg){kind=logo}
藥物分析、分離材料的制備及分離、純化技術(shù)
本項目研制的高聚物色譜材料具有硅膠基質(zhì)色譜材料所無法達到的化學穩(wěn)定性，且有多項功能化專利技術(shù)作支撐，在生物藥物、天然藥物及多種有機物的檢測、分離純化方面有許多獨到之處。該材料和技術(shù)可幫助制藥企業(yè)提高藥品純度，去除一些過敏源雜質(zhì)，減少醫(yī)藥事故的出現(xiàn)，達到用藥安全，乃至生產(chǎn)“安全”。 由于粒徑小而均勻，耐高壓，可高效能的對藥物進行檢測分離純化。該高性能色譜材料的合成與功能化，為國內(nèi)色譜領(lǐng)域填補了空白。目前全世界僅有美國、日本的5-6家公司有能力生產(chǎn)。 該技術(shù)在國內(nèi)、國外均處于領(lǐng)先水平，有專利技術(shù)和獨特的高性能色譜材料作支撐。 高性能色譜材料可批量生產(chǎn)，利巴韋林、土霉素、多烯環(huán)素、甘油果糖、頭孢類等藥物的檢測應用開發(fā)已獲成功，其它藥物、食品檢測的應用開發(fā)在進行中。
南京工業(yè)大學
2021-04-13
流體輸送和分離過程的實驗和數(shù)值分析
1. 項目概述本研究室長期從事過程裝備流動分析和測量技術(shù)研究，包括泵內(nèi)流場分析和外特性測量、閥門內(nèi)流動分析和性能測試、漩流分離流場分析和分離效率測試、泵效率測試和評價、鍋爐燃燒室內(nèi)流動分析、各種換熱器內(nèi)的流動和傳熱分析評價。擁有ANASY、FLUENT、CFX等商用分析軟件，建有激光粒子圖像測速系統(tǒng)和流動分析實驗裝置、離心泵試驗裝置、泵汽蝕性能試驗裝置、漩流分離試驗裝置、鍋爐燃燒室冷態(tài)流動試驗裝置等。可為過程工業(yè)裝置提供相關(guān)分析、測試和評價服務(wù)，為產(chǎn)品設(shè)備改造和新產(chǎn)品研發(fā)提供技術(shù)支持。2. 技術(shù)優(yōu)勢江蘇省流量專業(yè)委員會委員、江蘇省流體力學專業(yè)委員會委員單位
南京工業(yè)大學
2021-04-13
UnitCalcul 火電機組在線性能計算分析系統(tǒng)
南京工程學院
2021-04-13
基于頻譜分析法的振動時效系統(tǒng)
經(jīng)過熱加工（如鑄造、鍛壓、焊接）和壓力加工的金屬零件表面和內(nèi)部會 存在殘余應力和變形。殘余應力的存在對構(gòu)件是有害的，如降低工件強度和疲 勞極限、造成脆性斷裂、加快構(gòu)件在腐蝕大氣中的腐蝕速度等；分布不均的殘 余應力會對構(gòu)件尺寸精度和穩(wěn)定性產(chǎn)生極為不利的影響。因此消除殘余應力是 機械制造工業(yè)技術(shù)中的一項重要課題。 當前，消除構(gòu)件殘余應力的方法主要有自然時效、熱時效、振動時效。振 動時效較自然時效和熱時效具有投資少、效率高、污染少等優(yōu)點，已得到越來 越廣泛的應用。但是，現(xiàn)有大部分的振動時效系統(tǒng)具有掃頻速率較慢、易漏頻 等缺點，而且振動時效機理尚未被解釋清楚。因此，開發(fā)了基于頻譜分析法的 振動時效系統(tǒng)，并在此系統(tǒng)的基礎(chǔ)上，研究振動時效機理。 頻譜分析法是將時域信號變換至頻域加以分析的方法，其目的是把復雜的 時間歷程波形，經(jīng)過傅里葉變換以獲得信號的頻率結(jié)構(gòu)。將此方法應用到振動 時效中獲取工件固有頻率，可克服傳統(tǒng)振動時效中的缺點。此外，構(gòu)建振動時 效控制系統(tǒng)的構(gòu)建采用 VB 和 MATLAB 混編，并結(jié)合數(shù)據(jù)采集卡、變頻器和激 振電機等硬件，具有開發(fā)靈活性好、自動化程度高等優(yōu)點，并且縮短了產(chǎn)品開 發(fā)周期。經(jīng)過該系統(tǒng)處理的試件殘余應力平均下降 46.62%，達到了振動時效消 除殘余應力標準。
山東大學
2021-04-13
便攜式智能振動測試分析儀
便攜式智能多功能振動測試分析儀是廣泛應用于工業(yè)現(xiàn)場和復雜系統(tǒng)的機械設(shè)備工作可靠性分析和在線故障診斷的工具。研制成功的便攜式智能多功能測試分析儀，其主要特點：體積小、重量輕、連續(xù)工作時間及待機時間長，尤其是振動測試分析儀，帶有動態(tài)頻譜實時顯示功能，并可以進行實時頻譜分析。測振筆的特點，除體積小、重量輕、連續(xù)工作時間亟待及時間長外，更特別的是可以實現(xiàn)加速度、速度、位移三個振動的參量的測量。 隨著科學技術(shù)的發(fā)展，航空航天、軍事國防、工業(yè)領(lǐng)域的系統(tǒng)設(shè)備結(jié)構(gòu)越來越復雜，故障診斷已經(jīng)成為這些領(lǐng)域亟待解決的技術(shù)問題。因此，本項目的研究不僅對便攜式振動測試分析儀器的研究，而且對于設(shè)備故障診斷方法的實用化和普及有著廣泛的實用價值，對復雜的大型系統(tǒng)的機械設(shè)備故障診斷有著廣闊的應用前景。 本項目研究成果已經(jīng)通過北京市科學技術(shù)委員會技術(shù)鑒定，具有完全的自主知識產(chǎn)權(quán)，并已申請專利兩項。
北京航空航天大學
2021-04-13
便攜式通用精細智能信號采集分析系統(tǒng)
便攜式通用精細智能信號采集分析系統(tǒng)根據(jù)設(shè)備狀態(tài)監(jiān)測和故障診斷的要求采集并記錄與設(shè)備工作過程相關(guān)的主要狀態(tài)參數(shù)的狀態(tài)信號，如振動、噪聲、轉(zhuǎn)速、電流等，然后對這些參數(shù)和信號進行快速處理和精密分析，提取反映設(shè)備運行狀態(tài)的特征信息，快速準確地給出設(shè)備運行狀態(tài)的性能評價，為設(shè)備管理、診斷及維修提供依據(jù)，從而保障設(shè)備長期安全可靠地運行。
西安交通大學
2021-01-12
大學.jpg){kind=logo}
便攜式動態(tài)信號采集分析系統(tǒng)的研制
研發(fā)階段/n內(nèi)容簡介：在工程現(xiàn)場的動態(tài)信號測試中，目前所用的數(shù)據(jù)采集分析系統(tǒng)的硬件多依賴于臺式機，即使是基于筆記本電腦的數(shù)據(jù)采集分析系統(tǒng)，也必須配合專用的擴展箱、接口箱等多種附件，由于儀器總體體積較大，給戶外現(xiàn)場數(shù)據(jù)采集帶來很大的不便。本課題正是從這一點出發(fā)，旨在開發(fā)一套基于筆記本電腦的小體積、高精度、適于野外現(xiàn)場測試用的便攜式動態(tài)信號采集分析系統(tǒng)。其主要研究內(nèi)容是基于并行口的小型A/D轉(zhuǎn)換卡和小型電荷放大器等硬件的研制，以及基于Windows98/2000平臺的軟件系統(tǒng)。技術(shù)指標：儀器總重量：≤6
湖北工業(yè)大學
2021-01-12
全自動控制顯微鏡圖像分析系統(tǒng)
全自動控制顯微鏡圖像分析軟件系統(tǒng)，通過對顯微鏡自動控制載物臺的x、y、z軸的控制，實現(xiàn)顯微圖像的自動聚焦、ROI目標的自動獲取、大視野顯微圖像自動拼接（虛擬顯微切片）、多層圖像聚焦融合、聚焦深度顯微表面三維成像。該系統(tǒng)可應用于顯微病理、解剖、工業(yè)材料、印刷電路板等領(lǐng)域的圖像處理、分析與三維成像。 國外相關(guān)產(chǎn)品從2000年以后開始在市場上出現(xiàn)，但由于其昂貴的價格，很難為國內(nèi)用戶廣泛使用，限制了該技術(shù)的推廣。本系統(tǒng)為國內(nèi)自主知識產(chǎn)權(quán)開發(fā)的軟件系統(tǒng)，可靈活外接各種顯微鏡和控制設(shè)備。 該軟件系統(tǒng)與顯微鏡硬件接合可實現(xiàn)小批量的生產(chǎn)，為醫(yī)學、工業(yè)等領(lǐng)域的科研和生產(chǎn)檢測提供的技術(shù)支持。
北京航空航天大學
2021-04-13