基于语义分割的异构多核平台大数据挖掘算法

摘要/Abstract

摘要： 为了提高异构多核平台大数据精准挖掘能力，提出一种基于语义分割的异构多核平台大数据精准挖掘方法。构建异构多核平台大数据的模糊信息检测模型，采用关联特征提取方法进行异构多核平台大数据的模糊指向性聚类分析。构建异构多核平台大数据的输出自相关特征匹配模型，结合语义特征提取方法进行异构多核平台大数据的特征提取和统计分析。建立异构多核平台大数据的语义动态特征分析模型，提取异构多核平台大数据的统计特征量。根据异构多核平台大数据的特征提取结果采用模糊C均值聚类方法进行大数据聚类，采用语义分割进行异构多核平台大数据挖掘过程中的自适应寻优，实现异构多核平台大数据的优化挖掘。仿真结果表明，采用该方法进行异构多核平台大数据挖掘的精度较高，特征分辨能力较好，可提高异构多核平台大数据的挖掘和检测能力。

关键词: 语义分割, 异构多核平台, 大数据, 挖掘

Abstract: In order to improve the accurate mining ability of heterogeneous multi-core platform big data, a method based on semantic segmentation is proposed. The fuzzy information detection model of heterogeneous multi-core platform big data is constructed, and the fuzzy directional clustering analysis of heterogeneous multi-core platform big data is carried out by using association features extraction method. The output autocorrelation features matching model of heterogeneous multi-core platform big data is constructed, and the features extraction and statistical analysis of heterogeneous multi-core platform big data are carried out by semantic features extraction method. The semantic dynamic features analysis model of heterogeneous multi-core platform big data is established, and the statistical characteristics of heterogeneous multi-core platform big data are extracted. According to the features extraction results of heterogeneous multi-core platform big data, the fuzzy C-means clustering method is used for big data clustering, and the semantic segmentation is used for adaptive optimization in the process of heterogeneous multi-core platform big data mining to realize the optimized mining. The simulation results show that the proposed method has higher accuracy and better features resolution, which can improve the mining and detection ability of heterogeneous multi-core platform big data.

Key words: semantic segmentation, heterogeneous multi-core platform, big data, mining

周贤来. 基于语义分割的异构多核平台大数据挖掘算法[J]. 计算机与现代化, 2020, 0(10): 40-43.

ZHOU Xian-lai. Big Data Mining Algorithm of Heterogeneous Multi-core Platform Based on Semantic Segmentation[J]. Computer and Modernization, 2020, 0(10): 40-43.

参考文献

［1］王卫东,万志毅. 一种小型化SINS的初始对准方法研究［J］. 电子测量与仪器学报, 2019,33(8):16-22.
［2］白慧敏. 无线游泳姿态测量实验与数据分析方法［J］. 国外电子测量技术, 2019,38(10):38-43.
［3］ RAMEZANI A, SAFARINEJADIAN B. A modified fractional-order unscented Kalman filter for nonlinear fractional-order systems［J］. Circuits, Systems, and Signal Processing, 2018,37(9):3756-3784.
［4］ SIEROCIUK D, ZIUBINSKI P. Fractional order estimation schemes for fractional and integer order systems with constant and variable fractional order colored noise［J］. Circuits, Systems, and Signal Processing, 2014,33(12):3861-3882.
［5］曲琦,张正凯,许胜之. 基于LSTM-ICNN的网络情报信息技术研究［J］. 电子测量技术, 2019,42(18):144-148.
［6］王帅,黄海鸿,韩刚,等. 基于PCA与GA-BP神经网络的磁记忆信号定量评价［J］. 电子测量与仪器学报, 2018,32(10):190-196.
［7］张浩杰,苏治宝,苏波. 基于深度Q网络学习的机器人端到端控制方法［J］. 仪器仪表学报, 2018,39(10):36-43.
［8］王丽英,徐艳,李玉. 机载LiDAR点云体元化及其在3D滤波中的应用［J］. 仪器仪表学报, 2018,39(7):173-182.
［9］杨鸿杰,张君毅. 基于强化学习的智能干扰算法研究［J］. 电子测量技术, 2018,41(20):49-54.
［10］李帅,王国胤,杨洁. 基于云综合方法的三支群决策模型［J］. 计算机应用, 2019,39(11):3163-3171.
［11］刘连光,潘明明,田世明,等. 无线传感器网络分布式能量非合作博弈优化技术［J］. 武汉大学学报(工学版), 2017,50(3):384-389.
［12］唐新宇,张新政,赵月爱. 云计算中基于群体智能算法的大数据聚类挖掘［J］. 重庆理工大学学报(自然科学), 2019,33(4):128-133.
［13］姚富光,钟先信,周靖超. 粒计算:一种大数据融合智能建模新方法［J］. 南京理工大学学报, 2018,42(4):503-510.
［14］于繁华,姚亦飞,逯启荣. 教育大数据下基于离群检测的教学预警模型［J］. 吉林大学学报(信息科学版), 2018,36(4):459-464.
［15］金圣达,朱兆伟,赵尚书,等. 蜂窝异构网络中的最优频谱分配算法［J］. 计算机工程, 2019,45(2):70-75.
［16］邹权臣,张涛,吴润浦,等. 从自动化到智能化:软件漏洞挖掘技术进展［J］. 清华大学学报(自然科学版), 2018,58(12):1079-1094.
［17］张晶,陈诚,郑焕科. 面向软件漏洞检测的Fuzzing样本优化方法［J］. 山东大学学报(理学版), 2019,54(9):1-8.
［18］汤俊伟,刘家帧,李瑞轩,等. Android应用软件漏洞静态挖掘技术［J］. 华中科技大学学报(自然科学版), 2016,44(S1):20-24.
［19］宋人杰,余通,陈宇红,等. 基于MapReduce模型的大数据相似重复记录检测算法［J］. 上海交通大学学报, 2018,52(2):214-221.
［20］宋勇,蔡志平. 大数据环境下基于信息论的入侵检测数据归一化方法［J］. 武汉大学学报(理学版), 2018,64(2):121-126.
［21］贾军,杨进,李涛. 一种基于DPI自关联数据包检测分类方法［J］. 四川大学学报(自然科学版), 2019,56(1):29-36.

[1]	周安达, 唐超颖. 雨天道路场景语义分割算法及其移动端部署[J]. 计算机与现代化, 2024, 0(10): 7-13.
[2]	汪显顺, 熊卿智, 万磊, 李祥, 林重汕, 金安安. 基于知识图谱的区域企业关联可视化及关系挖掘[J]. 计算机与现代化, 2024, 0(08): 11-16.
[3]	邱玲1, 2, 宋智1, 2, 吕爽1, 2, 杨雪1, 2. 数据同步技术在气象大数据云平台对外服务中的应用[J]. 计算机与现代化, 2024, 0(07): 76-81.
[4]	张可1, 艾中良2, 刘忠麟3, 顾平莉1, 刘学林4. 基于多元组匹配损失的司法论辩理解方法[J]. 计算机与现代化, 2024, 0(06): 115-120.
[5]	乔佳, 徐琨, 胡佩蓉. 多尺度特征融合的版面分析方法[J]. 计算机与现代化, 2024, 0(05): 16-21.
[6]	袁红伟1, 常利军1, 郝家欢2, 樊娜2, 王超2, 罗闯2, 张泽辉2. 基于标签传播的轨迹兴趣点挖掘及隐私保护[J]. 计算机与现代化, 2024, 0(05): 46-54.
[7]	崔少国, 胡光平. 基于语义分割的嵌套命名实体识别方法[J]. 计算机与现代化, 2024, 0(02): 69-74.
[8]	胡崇佳, 刘金洲, 方立. 基于无监督域适应的室外点云语义分割[J]. 计算机与现代化, 2024, 0(01): 74-79.
[9]	许鸿奎, 李振业, 郭文涛, 赵京政, 郭旭斌. 基于分割的任意形状场景文本实时检测[J]. 计算机与现代化, 2023, 0(11): 95-100.
[10]	叶思佳, 魏延, 杜韩宇, 邓金枝. 结合注意力机制的HRNet图像语义分割算法[J]. 计算机与现代化, 2023, 0(10): 65-69.
[11]	刘续, 查可可. 一种用于机场特种车辆作业的环境目标识别方法[J]. 计算机与现代化, 2023, 0(08): 18-24.
[12]	谢仕斌, 刘梦赤, 唐诗琪, 周瑞平, . 基于多特征提取的时间卷积知识追踪模型[J]. 计算机与现代化, 2023, 0(07): 25-29.
[13]	牛玉珩, 李永可, 陈燕红, 蒋平安. 基于改进SegFormer模型的棉田地表残膜图像分割方法[J]. 计算机与现代化, 2023, 0(07): 93-98.
[14]	叶力鸣, 陈蔚文. 一种结合语义分割和目标检测的级联式绝缘子缺陷检测方法[J]. 计算机与现代化, 2023, 0(06): 82-88.
[15]	刘佩. 基于数据挖掘的医保控费系统[J]. 计算机与现代化, 2023, 0(06): 89-94.