|
搜索
搜 索
高等教育領域數字化綜合服務平臺
一種 MapReduce 帶寬優化方法
本發明公開了一種 MapReduce 帶寬優化方法，包括：在 Hadoop 作業提交后，OpenFlow 控制器根據 JobTracker 發送的任務執行節點信 息，通過 Map 中間值路由策略確定執行 Map 中間值合并任務的節點， 更新對應流表項，并發送至 OpenFlow 交換機，OpenFlow 交換機通過 安全通道對其接收并安裝，然后對接收到的數據包進行流表項匹配， 若其與合并 Map 中間值行為類型匹配，則對 Map 中間值進行合并。本 發明通過結合 OpenFlow 和 Hadoop，利用 OpenFlow 交換機的數據處 理能力，對 Map 中間值，即經 map()函數作用后得到的中間元組數據 提前進行合并處理，從而大大緩解了數據遷移過程中的網絡擁塞問題， 顯著提高了 Hadoop 工作效率。
華中科技大學
2021-04-11
一種適合迭代計算的 MapReduce 優化方法
本發明公開了一種適合迭代計算的 MapReduce 優化方法，是應 用在一種 Hadoop 集群系統中，該集群系統包括一個主節點以及多個從 節點，所述方法包括：主節點接收用戶提交的多個 Hadoop 作業，主節 點的作業服務進程將作業放入作業隊列中，并等待主節點的作業調度 器進行作業調度，主節點等待從節點發來的任務請求，并在接收到任 務請求后，主節點的作業調度器優先調度本地化任務，如果在發出任 務請求的從節點上沒有本
華中科技大學
2021-04-14
一種基于MapReduce的矢量文件轉換方法和裝置
本發明提供了一種面向軌跡挖掘的數據預處理方法及系統，該方法包括：在原始數據庫中提取離散的軌跡點，對軌跡點進行歸類提取后形成若干個獨立的軌跡段集合；對每一軌跡段集合中的軌跡點進行重復定位點檢測，若判斷該重復定位點為歷史定位點，則刪除；對每一軌跡段集合中的軌跡點進行定位異常點檢測，若判斷為定位異常點，則刪除該軌跡點，得到若干條完整的軌跡；對所述完整的軌跡進行簡化壓縮，得到壓縮軌跡；存儲所述壓縮軌跡；同時對系統運行狀態進行監控，保證系統可以持續、穩定運行。本發明提供的方法通過對提取出的軌跡點進行重復定位點以及定位異常點清除，保證了軌跡數據的正確性和完整性，提高了軌跡數據挖掘的準確度。
中國農業大學
2021-04-11
一種基于 MapReduce 的負載自適應任務調度方法
本發明公開了一種基于 MapReduce 的負載自適應的任務調度方 法，包括：(1)動態監測 Hadoop 集群負載狀態，(2)動態監測集群各執 行節點在執行任務過程中產生的軟件信息，(3)動態監測集群各執行節 ·841·點在執行任務過程中的硬件信息，(4)匯總步驟(1)、步驟(2)及步驟(3) 中采集的集群各執行節點的負載監控信息、軟件監控信息以及硬件監 控信息三方監控信息，建模計算集群各執行節點的計算能力，(5)執行
華中科技大學
2021-04-14
一種 GPU 上基于內存統一管理的 MapReduce 實現方法
本發明公開了一種 GPU 上基于內存統一管理的 MapReduce 實 現方法，包括：初始化 GPU 的塊大小為 Bs，每個塊中的線程數目 N， 輸入數據量大小 M；在全局內存上為 GPU 的每個塊分配一個中間數據 緩沖區，同時分配一個全局結果緩沖區；對 p%的輸入數據進行預處理， 在中間數據緩沖區中收集 map 任務計算結果和歸約頻率信息；根據鍵 值對的歸約頻率，對中間結果進行排序，保存鍵值對索引信息到排序 結果緩
華中科技大學
2021-04-14
一種基于多線程的 MapReduce 執行系統
本發明公開了一種基于多線程的 MapReduce 執行系統，包括： 實現一個多線程的MapReduce執行引擎：將原有Hadoop中Map/Reduce 任務的多進程執行模式改為多線程方式；提取 Map 任務和 Reduce 任 務中對內存使用的細節特征，根據這些特征將 MapReduce 流程細粒度 地分為多個階段，并將原有 Hadoop 中 shuffle 過程由 Reduce 的拉取改 為 Map 的主動推送；在 MapRe
華中科技大學
2021-04-14
儲能規劃配置方法及應用
儲能在新型電力系統中源、網、荷側發揮重要的作用，儲能規劃運行和安全管理是推廣儲能可靠、安全、經濟運行的重要保障。本項目圍繞電力系統中不同應用場景的源、荷特性，針對光伏電站棄光率高和預測合格率低的問題，結合電池儲能SOX(SOH、SOP及SOE)動態性能，進行能量管理優化，提出了一種計算每個月光伏預測的合格率及懲罰成本的技術，可有效提升不同應用場景的儲能安全性和系統經濟性。
發電側:提升預測精度，減小懲罰成本，多目標優化；
配網側:可削峰填谷，提升分布式光伏消納；
負荷側:成本低，收益大。
南京工業大學
2024-07-11
新型親水抗菌膜及制備方法
目前主流的抗菌膜制備方法是在基膜表面接枝抗菌物質，常用的抗菌材料包括氧化石墨烯、碳納米管、抗菌聚合物、金屬離子等，但這些材料普遍存在著接枝方式復雜，且對環境有危害的缺陷。相比而言，季銨鹽類抗菌劑具有抗菌效果好，環境友好等特點，目前水溶性的小分子或高分子季銨鹽抗菌劑已經廣泛應用于水處理、食品、醫療衛生和包裝材料等領域。然而，將季銨化合物直接接枝到膜表面所制備的抗菌膜仍存在制備流程復雜，成本較高等問題，這也使得目前開發的大部分季銨鹽功能膜無法大規模應用于實際水處理系統。因此，為解決以上問題，開發新型親水抗菌功膜的制備方法是目前業內所亟需的。
本成果中提出的制備方法將氯甲基化聚合物制備為中空纖維多孔膜，并制作為管殼式膜組件，之后采用過濾操作模式直接將叔胺化合物接枝到組件中的中空纖維膜絲上，從而制備出具有優良抗菌性能的季銨化功能膜組件。該制備方法簡單便捷，且接枝穩定性高，適合長期大規模應用于實際膜法水處理體系中，且制備的超濾膜具有良好的親水性和抗菌性。抗菌膜制備簡單便捷，常溫常壓過濾操作即可完成接枝，且接枝穩定性高，成本低，對水體中微生物去除率99.9%以上，尤其能抑制微生物在膜上（內外表面，孔道壁面）生長。
圖1.性能參數
北京理工大學
2025-02-10
高導熱高強度鎂合金及其制備方法
鎂合金是作為一種輕質金屬結構材料，具有密度低、比強度和比剛度高、阻尼性能好、電磁屏蔽效果好、鑄造性能優良和加工性能好的優點，獲得了廣泛的應用前景。在鎂合金產業化應用過程中，稀土往往作為制備過程中的優化劑來改善合金的熔體純凈度、晶粒細化度及產品外觀質量，同時可大幅度提升合金的強度與延伸率。但是目前普遍使用的稀土鎂合金強度低導熱性能差，限制了其大規模應用。因此，開發具有高導熱性、高強度的鎂合金對于擴大鎂合金在 5G 通信、3C 器件及汽車產品等需要高散熱領域的應用，具有極其重要的意義。
高導熱高強度鎂合金是在一定配比的 Mg-Zn-Zr 系列合金中添加 Nd 稀土金屬，Nd 的添加可以改善合金的熔體純凈度、晶粒細化度及產品外觀質量，并有效析出基體中的 Zn和 Zr 原子，有效提升合金的導熱性能和力學強度。鎂合金的導熱性能可以通過導熱率來體現，力學性能可以通過抗拉強度，屈服強度體現。高的導熱性能可以保證合金在散熱器件領域的熱導性能指標，使器件可以具有較快的熱量傳輸能力，使設備內部熱量及時排出;高的力學強度可以保證合金作為結構件的力學性能指標，使其作為結構件更為可靠。相較于傳統鎂合金，團隊通過添加 Nd 稀土元素可以有效提升鎂合金的導熱性能和力學強度，Nd 一般分布于晶界，可以弱化鎂合金的織構，提升鎂合金各晶粒之間的協調能力:而且 Nd 在鎂合金成型過程中可以與 Zn 原子結合形成熱穩定的第二相，促進動態再結晶提升鎂合金的強度:此外，Nd 元素的添加會與基體中的 Zn 元素結合，減弱基體中的晶格畸變，提升鎂合金的熱導率。
西安交通大學
2025-02-08
海洋高分子微球的微流控制備方法及其應用
中國發明專利ZL202210046308.4：采用無乳化劑、無有機交聯劑的微流控法制備規整球形的海洋高分子微球，微球實心或空心、粒徑（200納米-50微米）、微觀結構可控可調，可作為吸附材料、藥物香精等載體材料的應用。
廈門大學
2025-02-07