数据预处理
- 基于ConvNeXt-T神经网络的大棚水稻病虫害识别
随机遮掩等数据预处理，将获取的5 932张水稻害虫图像扩展到21 340张，在ConvNeXt-T神经网络模型中进行训练，来识别水稻种植中最常见的4种病害（白叶枯病、水稻细菌性条斑病、褐斑病、水稻东格魯病毒病）。训练结果表明，在相同的实验环境下，与经典的AlexNet、GoogLeNet、ResNet34及VGG16网络相比，ConvNeXt-T神经网络性能最佳，病害识别准确率最高（99.86%）。其优秀的识别精度能够为大棚水稻病虫害的预防提供有力的帮助。
南方农业·下旬 2023年10期2024-01-02
- 数字政府一体化建设中数据预处理技术的研究
文主要针对数据预处理中存在的核心问题，着重介绍了几种在数据采集以及数据清洗中运用的方法，从而更好地应对日益复杂的数字化治理挑战，实现政府数据管理的现代化转型。关键词：数字政府一体化；数据预处理；数据采集；数据清洗引言在当今数字化时代，随着数字政府一体化建设进程的不断深入，数据预处理的重要性愈发显著。其中，数据采集作为获取原始信息的过程，在数据生命周期中扮演着关键角色；数据清洗则起到了过滤器的作用，是筛选、消除、修改冗余和错误数据的重要步骤。本文将从数据采集
互联网周刊 2023年20期2023-11-20
- XGBoost算法应用于车辆保险购买预测的研究
数据集进行数据预处理，然后使用网格搜索法，采取五折交叉验证来对模型进行超参数优化并构建预测模型，最后选择ROC曲线和AUC值作为预测模型的评价指标对模型的泛化能力进行性能评估，结果表明XGBoost算法具有最好的预测效果。关键词：XGBoost算法；数据预处理；网格搜索；模型評估；ROC曲线中图分类号：TP391 文献标识码：A 文章编号：2096-4706（2023）06-0031-04Research on Application of X
现代信息科技 2023年6期2023-06-25
- 基于机器学习的早产儿视网膜病变高危因素分析
tGBM；数据预处理；特征优化早产儿视网膜病变（retinopathy of prematurity，ROP） 是一种视网膜血管增殖性眼底疾病，占全世界儿童视力损伤和失明的因素的11%～45.8%[1]。由于ROP的病因和发病机制复杂，有效治疗的时间窗很短，因此需要尽快找到ROP相关高危因素。影响ROP发生的因素很多，目前学术界公认的三大高危因素是胎龄、出生体重与氧疗[2]，分析ROP相关高危因素主要的方法是倾向评分匹配[3～5]、Logistic回归分析
电脑知识与技术 2023年9期2023-05-08
- 基于深度学习的冒犯性语言检测方法综述
文本分类;数据预处理中图分类号：TP391.1 文献标识码：A文章编号：2096-4706（2022）05-0005-06A Review of Offensive Language Detection Methods Based on Deep LearningGUO Bolu， XIONG Xuhui（College of Computer and Information Engineering， Hubei Normal Univers
现代信息科技 2022年5期2022-07-10
- 基于CEEMD小波去噪的一种预测碳排放的新方法
排放预测;数据预处理中图分类号：TP302;X321文献标志码：A随着碳排放与日俱增导致全球气候变暖从而对人们生活发展产生了直接而恒久的负面影响。因此，站在国家层面而言，科学地预测碳排放量走势并积极制定相关政策，进而实现绿色可持续性发展开始变得至关重要[1-2]。能源消耗碳排放影响因素研究是预测未来能源消耗碳排放量的一个重要基础。能源消耗碳排放影响因素研究主要是为了探讨能源消耗碳排放与其影响因素之间的关系，主要包括人口规模、产业结构、经济产出、能源结构、运
贵州大学学报（自然科学版） 2022年4期2022-07-06
- 针对滑坡位移监测的数据预处理方法研究
尔曼滤波;数据预处理中图分类号：U416.1+630 引言滑坡是常见的地质灾害，在我国山区，每年都有滑坡灾害发生，造成巨大的生命财产损失。为减少滑坡灾害影响，实现提前感知与防范，可对滑坡进行实时自动化变形监测。但在实际监测过程中，有许多客观环境和人为因素导致测量数据有各类误差因而使得预测结果出现偏差。因此，为了保证滑坡灾害预测的准确性，应该先对监测数据进行预处理，从而达到更为理想的数据曲线，提高预警的准确率。本文针对滑坡自动化监测中的位移数据，采用拉依达准
西部交通科技 2022年3期2022-06-06
- 基于大数据技术的智慧红旗渠纪念馆建设问题研究
数据采集和数据预处理为支撑，以受群众欢迎为目的对每一种数据来源都进行了详细的数据现状分析和数据处理策略分析，并对红旗渠智慧化建设提出了相应的建设意见。关键词：大数据技术;红旗渠纪念馆;智慧博物馆;数据采集;数据预处理中图分类号：TP311 文献标识码：A文章编号：1009-3044（2022）11-0011-04随着人类社会和科学技术的不断发展，博物馆从传统形式向数字博物馆转变，这是科技的重大进步，为广大民众的生产、生活提供了极大的便利[1]
电脑知识与技术 2022年11期2022-05-31
- 数据挖掘中的数据预处理
数据挖掘;数据预处理;获取数据;清洗数据;探索数据;建模数据中图分类号：TP311 文献标识码：A文章編号：1009-3044（2022）04-0027-021 数据挖掘1.1数据挖掘模型的介绍数据挖掘是获取知识的经过，数据挖掘模型是从种种数据源来获取所需要的数据，然后再将这些数据转换成知识，把这些知识再提供给所需要的区域。数据挖掘的流程是从需求的开始到需求的满足，意思就是将所挖掘的数据的精华知识以数据源形式发送到人们的手中。1.2提前处理数
电脑知识与技术 2022年4期2022-04-29
- 浅谈地理国情监测更新手段与内业方法
国情监测;数据预处理;提高效率前言地理国情监测是全面获取地理国情信息的重要手段。可获取地表自然要素、人文地理要素、社会经济信息的空间分布特征及相互关系。2016年以来，地理国情监测和更新已成为常态。近年来的监测成果广泛应用于城市规划实施监督、环境保护与治理、自然资源管理、空间利用控制等诸多方面，发挥了不可或缺的作用。本文根据总体监控方案和技术规程，结合实际生产运行中遇到的问题，以提高生产效率为目的，详细阐述生产过程中的思路和解决方案，为生产运行提供参考。1
家园·建筑与设计 2022年1期2022-03-27
- 基于特征选择集成学习的军事体育训练成绩分析
集成学习;数据预处理中图分类号：TP 181 文献标识码：A文章编号：1009-3044（2022）03-0081-03开放科学（资源服务）标识码（OSID）：军事体育训练是军事训练的重要组成部分，是强健官兵体魄、强化个人素质、提升单兵技能的重要训练手段，是打赢未来战争的基础性工作。军事体育训练是以实战为导向，以任务为牵引，以科学理论为指导，按作战需要和岗位需求进行身体训练[1]。军队院校的军事体育训练是以未来岗位需求为目标，结合军人体能刚性要求
电脑知识与技术 2022年3期2022-03-12
- 数据预处理中缺失数据处理方法的研究综述和展望
摘要：数据预处理是提升数据质量的重要方法，它主要涉及到数据审计、数据清洗、数据变换、数据集成、其他预处理方法等多个方面，本文主要研究数据清洗中的缺失数据处理方法。本文主要阐述了缺失数据的类型、缺失数据处理所面临的主要问题和挑战、填补缺失数据的方法及数据缺失处理最新的研究趋势，通过分析得出今后对于缺失数据的研究将会逐步回到该数据所属的特定领域，充分结合该领域的特点与规律来对缺失数据进行填补，而不仅仅针对数据本身或基于其统计学上的特征进行填补。关键词：数据预处
科学与生活 2021年20期2021-11-18
- GNSS静态数据批量预处理方法研究及实现
NSS静态数据预处理是GNSS静态测量数据处理的重要一环，现阶段的GNSS静态数据预处理方法以人工干预为主，自动化程度较低，数据处理的效率和准确率均有待提高。为解决上述问题，提出了一套GNSS静态数据自动化预处理方法，并基于Python语言开发静态数据预处理软件，完成了GNSS静态数据检查、RENIX数据归类、RENIX数据改正、静态数据质量报表输出等功能。长江水利委员会大江大河水文监测系统建设工程实践表明：使用该软件后，大幅提高了静态数据预处理效率，明显
水利水电快报 2021年5期2021-08-09
- 网络教学资源使用效能的可视化分析平台设计
网络爬虫;数据预处理;可视化中图分类号：G642 文献标识码：A文章编号：1009-3044（2021）03-0008-03Abstract： Now the "teaching" and "learning" based on the Internet has been growin grapidly， at the same time web crawler、data mining technology is also become ma
电脑知识与技术 2021年3期2021-03-15
- 倾斜摄影测量技术在大比例尺地形图测绘中的应用研究
三维模型;数据预处理;倾斜摄影引言：现阶段，基于倾斜摄影测量的进一步发展，其技术运用范围也越来越大，对该项技术在地形图测绘过程中的运用也逐渐重视起来。就大比例尺地形图来看，它是城市规划还有土地管理过程中的重要资料，基于有关要求的提高，其测绘标准也越来越高。在其中引入倾斜摄影测量，可以高效率地收集相關信息，打破原有的垂直摄影限制，运用多角度进行拍摄，以增加数据的准确性。1.技术概述1.1工作原理针对倾斜测量技术来看，一般情况下，是通过无人机来获取建筑信息，基
江苏广播电视报·新教育 2021年38期2021-01-17
- 基于深度神经网络的糖尿病预测分析与研究
预测模型;数据预处理;机器学习;深度神经网络（DNN）;模型评估中图分类号： TP181 文献标识码：A文章编号：1009-3044（2020）32-0018-03Abstract： In the context of the era of big data， artificial intelligence technology continues to develop and spread， and machine learning tec
电脑知识与技术 2020年32期2020-12-29
- 2型糖尿病风险预测模型的比较
2种情况的数据预处理，选择逻辑回归、支持向量机、多层感知机、随机森林等4种分类算法分别构建2型糖尿病风险预测模型，分析对比准确率和F值等评价指标，以验证其对具有空值数据集的应用性能。结果：经过比较，对原始数据进行分类预测时，多层感知机的值最高，随机森林的值最低，4种分类算法对删除属性后的数据集也取得了较好的预测效果。结论：分类算法可以有效预测2型糖尿病，并对具有一定缺失值的数据集具有良好的实用价值。关键词：糖尿病预测;数据预处理;逻辑回归;支持向量机;多层
电脑知识与技术 2020年28期2020-12-14
- 基于概率统计的电力负荷时间序列预测模型
的电力运行数据预处理方法，去除冗余數据。对预处理后的电力运行数据，通过基于多变量时间序列的电力负荷预测模型，实现电力负荷预测。经实验验证，所构建模型对电力负荷的预测结果可信度高，且对短期、长期的电力负荷的预测精度均显著，针对不同时间序列类型的电力负荷预测任务而言，均可实现高精度、全方位的电力负荷预测，可作为电力负荷预测任务中的参考模型。关键词： 电力负荷预测; 概率统计; 时间序列; 预测模型构建; 数据预处理; 实验验证中图分类号： TN911.1?34
现代电子技术 2020年21期2020-12-07
- 基于Pandas的数据预处理方法介绍
本文先介绍数据预处理的定义和概念，然后对常用的数据预处理方法进行详细介绍，包括合并数据、清洗数据、标准化数据和转换数据，并举例说明其实现方法，本文对从事大数据和人工智能的研究人员在数据预处理方面具有一定的参考价值。关键词：Pandas;数据预处理;统计分析0 引言数据预处理是指对数据进行合并、清洗、标准化和变换并直接用于分析建模的过程的总称[1]。其中，数据合并可以把多张相互关联的表格合成一张表格;数据清洗可以去掉缺失、重复、异常或者不一致的数据;
科学与财富 2020年27期2020-11-10
- 基于人工神经网络模型的金融板块指数走势研究
数;国债;数据预处理中图分类号： TP391.41 文献标识码： A DOI：10.3969/j.issn.1003-6970.2020.08.038本文著录格式：杨义，章剑林，刘闯. 基于人工神经网络模型的金融板块指数走势研究[J]. 软件，2020，41（08）：140-146+185【Abstract】： Analyzing and predicting the rise and fall of the sector index in t
软件 2020年8期2020-10-09
- 农业APP的设计与研发
。关键词：数据预处理;非线性逐步回归;定性与定量分析一、问题分析框架依据原始数据选取在相同时间段内的30辆车，以拥堵时间比例作为因变量，依据特征指标的选取原则以行驶路程、转向次数、平均速度、以及时间为影响变量。取部分车辆作为训练集初步建立了多元线性方程，然后进行各指标间的多重共线性与显著性分析，进行逐步回归进行影响汽车拥堵的重要指标变量得到逐步回归后的方程。再依据剩下的部分车辆数据作为测试集，利用由此得到的拥堵时间逐步回归方程得到的预测结果与测试集因变量进
锦绣·下旬刊 2020年4期2020-08-19
- 基于FY?4 AGRI与Himawari?8 AHI的平均太阳光谱辐照度研究
I和AHI数据预处理中;经验证，基于ASTM?E490太阳光谱计算得到的ESUNb值与官方值的绝对误差在10以内，相对误差仅在0.191%～0.571%之间;计算得到的ESUNb值可用于数据的预处理中，经定标和大气校正后发现，校正后影像的对比性更清晰，且AGRI数据的地物边界更为清晰，变化更加明显。关键词： 太阳光谱; 光谱辐照度; 可靠性计算; 数据预处理; 绝对误差; 清晰度计算Abstract： The ASTM?E490 solar spectru
现代电子技术 2020年16期2020-08-14
- 基于BP神经网络的人口数量预测模型研究
预测模型;数据预处理;动量因子引言在科幻电影《复仇者联盟》中，“大反派”灭霸为了维护所谓的“宇宙平衡”，在集齐所有的宝石之后打了一个响指，让宇宙中的生命瞬间减少了一半，他打响指的原因是人口数量急剧增加，资源人口分配不均，宇宙不能持续发展。电影中，在地球少了一半人之后，生态环境得到了改善。人类自从诞生以来，进步一直很快，发展出了辉煌的人类文明。从一二百年前到这几年的时间里，因为工业革命、能源革命，人类改造自然的速度明显加快了很多。但是，对自然不合适的改造的恶
科学导报·学术 2020年36期2020-08-13
- 大数据背景下的电子商务客户流失量预测
测模型; 数据预处理中图分类号： TN911.1?34; TP391 文献标识码： A 文章编号： 1004?373X（2020）11?0144?04Prediction of churn rate of e?commerce customers in context of big dataWU Yongchun（School of Business， Shandong Jianzh
现代电子技术 2020年11期2020-07-14
- 融合型AR模型在雷达故障预测中的应用
曼滤波; 数据预处理; 状态空间模型中图分类号： TN956?34 文献标识码： A 文章编号： 1004?373X（2020）11?0020?04Application of hybrid AR Model in radar failure predictionMA Lili， LUO Zhenghua， HU Dekun（School of Informa
现代电子技术 2020年11期2020-07-14
- 特定领域数据的预处理过程及方法研究
点提出作战数据预处理的方法步骤，为作战大数据建设发展提供支撑。关键词：数据预处理;数据清洗;数据归约1.数据获取在特定领域中，参与单位多元、参与行动多样、协同关系复杂，数据需求种类繁多。如现场环境数据，主要包括：地形地貌、气象水文、空气质量、重力场、电磁环境、交通、建筑物、防御工程设施、网络环境等[1]。传感器、采集器以及相关部门提供的数据都需要系统地、有规律地进行整合。1.1采集要求（1）完整性：保证采集的数据信息不存在缺失现象，不完整的信息数据可能会使
装备维修技术 2020年29期2020-07-01
- 试析基于云计算环境的web数据挖掘
数据挖掘;数据预处理引言在云计算环境下，web数据挖掘的方法发生了较大概念。云计算为web数据挖掘提供动态化资源和高可用行的计算平台，为开发高性能的数据挖掘平台提供技术支持。但web数据量大，而且具有较大的噪音，对挖掘算法的要求比高。而基于云计算环境的web数据挖掘，可有效降低运营在数据挖掘技术上的投入，加快web数据挖掘速度，缩短产品研发周期。基于此，开展基于云计算环境的web数据挖掘的分析研究就显得尤为必要。一、云计算的特性（一）虚拟化云计算是一种全新
锦绣·中旬刊 2020年3期2020-06-24
- 地面三维激光扫描点云数据处理及建模
光扫描点云数据预处理的方法步骤及模型构建过程，通过分析数据处理及建模结果，结合当前的研究状况探讨了模型的相关应用，并展望进一步的研究方向以及工作内容。关键词： 三维激光扫描技术;点云;三维建模;数据预处理中图分类号： TP391. 41 文献标识码： A DOI：10.3969/j.issn.1003-6970.2020.02.050【Abstract】： This paper uses the sign of "Kunming Univers
软件 2020年2期2020-06-09
- 基于成绩的学业预警系统的研究与设计
学业预警;数据预处理;Oracle;ETL中图分类号：G647 文献标识码：A文章编号：1009-3044（2020）05-0097-03开放科学（资源服务）标识码（OSID）：1 背景在高等教育大众化的背景下，学分制已在高等院校得到广泛的应用。学分制在一定程度上为学生提供了多元化、个性化的学习成长环境，但同时也出现了学生选课比较随意和盲目，很少考虑自己的成长目标，甚至出现“考试不通过”可以补考或重修的心态。特别是部分自控力和自主学习能力偏弱的学生，很容易
电脑知识与技术 2020年5期2020-04-24
- 基于Scrapy框架京东网站笔记本电脑评论数据爬取和分析
thon;数据预处理;数据可视化中图分类号：TP311 文献标识码：A文章编号：1009-3044（2020）06-0007-031背景1999年底，随着互联网高潮来临。中国网络购物的用户规模不断上升。2010年中国网络购物市场延续用户规模、交易规模的双增长态势。智能手机的普及更使得网上购物越来越流行，足不出户就能买到性价比高的商品，享受着带来的各项便利和服务。现在人们对于网上购物的需求变得越来越高，這让京东，淘宝，苏宁易购，当当网等电商平台得到了很大的发
电脑知识与技术 2020年6期2020-04-22
- 预训练模型的跨领域跨任务迁移学习
数据集 数据预处理 数据增强中图分类号：TP391.4 文献标识码：A 文章编号：1672-3791（2020）01（b）-0107-04Abstract： In order to solve the problems of large workloads， low accuracy and time-consuming in data-labeling in deep learning， it is necessary to transfer
科技资讯 2020年2期2020-04-07
- 信息经济背景下江苏生态创新系统评价研究
创新系统;数据预处理;熵权法;模糊综合评价Key words： ecological innovation system;data preprocessing;entropy weight method;fuzzy comprehensive evaluation中图分类号：X322;F592 文献标识码：A 文章编号：1006-
价值工程 2020年3期2020-02-02
- 藏语动词形态变化的还原研究与实现
词形还原;数据预处理中图分类号：TP311 文献标识码：A文章编号：1009-3044（2019）28-0205-03动词（）一般就是用来表示动作或状态的词汇（）[1]。词形还原是将一个任何形式的单词还原为一般形式。词形还原作为文本数据分析中数据预处理的一部分，其对数据分析起到降低数据复杂度、提升处理效率的作用。本文把英语中词形还原技术的思想应用到藏语中，对藏语的动词三时一式的变化进行还原操作，还原规范为将未来时、过去时和命令式的藏语动词的形
电脑知识与技术 2019年28期2019-12-10
- 基于行为特征的ATM机用户身份识别研究
，比没通过数据预处理和SVM分类算法参数优化后的识别精确度高出4.5769%。关键词：ATM机;身份实时识别;行为特征;数据预处理;参数优化DOI：10.11907/rjdk.191059开放科学（资源服务）标识码（OSID）：中图分类号：TP301文献标识码：A 文章编号：1672-7800（2019）010-0045-050引言自动柜员机（ATM）是各银行必不可少的存取款智能设备，其不仅方便用户使用，而且极大程度地减轻了银行工作人员负担，但其安全隐患也
软件导刊 2019年10期2019-12-04
- 基于大数据构建污染源在线监控数据有效性评估模型研究
监控数据;数据预处理;异常检测;有效性智能评估中图分类号：TP274 文献标识码：A 文章编号：1674-9944（2019）16-0174-021引言污染源在线监控系统作为环境监管的重要手段，对提升环境监管水平有着重要作用，全国各地大量建设运行，基本实现对在线监测污染物排放情况的实时监控、及时响应处置的效果。污染源在线监控数据的有效性直接关系到污染源在线监控系统作用的发挥，如何利用大数据技术，构建有效性评估模型，对不同粒度（污染源排口，企业）的数据进行有
绿色科技 2019年16期2019-11-22
- 基于大学生手机使用情况的数据挖掘及分析
指标体系 数据预处理 因子分析 主成分分析方差分析一、前言1.1研究目的与意义目的：中国智能手机行业正处于发展的黄金时期，而大学生作为手机市场中一股不可或缺的新兴势力，值得引起企业的高度关注。随着行业之间的竞争越来越大，大学生的思想越来越解放，对手机的要求也越来越挑剔。本研究针对大学生使用手机情况进行调查，利用数据挖掘的方法对数据进行分析，研究学生对手机的功能主要需求，进而对企业研发新的手机功能给予指导意见，而且也能为学校管理層对学生上课使用手机的情况进行
商情 2019年38期2019-09-20
- 数据挖掘技术在软件工程中的应用分析
软件工程;数据预处理中图分类号：TP311.13 文献标识码：A 文章编号：2096-4706（2019）15-0017-02Application Analysis of Data Mining Technology in Software EngineeringZHANG Wei（Guizhou Light Industry Technical College，Guiyang 550025，China）Abstract：Under the
现代信息科技 2019年15期2019-09-10
- 基于相似连接的多源数据并行预处理方法
多源数據;数据预处理;相似连接;MapReduce中图分类号： TP274文献标志码：AAbstract： With the development of large-scale network environments and big data-related technologies， traditional data fusion analysis technology faces new challenges. Focusing on poor f
计算机应用 2019年1期2019-08-01
- 浅谈癫痫脑电自动识别技术
方法，包括数据预处理、脑电特征提取、脑电特征识别三个方面，指出了目前该方面研究存在的一些问题，最后给出总结。关键词： 癫痫； 脑电特征； 数据预处理； 特征提取； 特征識别中图分类号：TP391 文献标识码：A文章编号：1009-3044（2019）12-0205-02开放科学（资源服务）标识码（OSID）：Discussion on Automatic Detection Technology of Epilepsy Electroencephalogr
电脑知识与技术 2019年12期2019-06-01
- 基于Python的数据脱敏与可视化分析
数据导入，数据预处理，及数据分析三个层面结合实例进行分析。首先利用tkinter库设计出数据导入的界面；其次阐述数据清洗、分组、集成以及脱敏等数据预处理的常用算法，并结合高校教学评价这一实际案例进行了演示，借助pandas库中的dataframe数据类型实现了对“脏数据”的清洗，以及对教师姓名的脱敏；最后利用matplotlib库对处理好的数据进行数据可视化，并结合所得图像对各专业班级及教师的学习和教学状况进行分析与评价。通过本文的数据处理，实现了对教师姓
电脑知识与技术 2019年6期2019-05-22
- 基于层次分析的人才需求分析研究
灰色预测;数据预处理招募人才和吸引人才是中国许多城市的亮点之一。因为人才是城市创新发展的动力，可以在更短的时间内学会更好地技能，制作更好地产品，掌握更好地管理方法。人才是城市创新的主要动力，创新扩散是通过高素质人才为媒体来实现的，从而促进新技术的发展。在今天的城市，除了当地的就业市场，人才还可以通过互联网招募，校园招聘会以及公开招聘活动进行招聘。一、数据预处理为了提取研究城市的城市特征，根据相关研究数据，本文将50个职位划分为五个类别。根据国家职业生涯管理
现代营销·经营版 2019年4期2019-04-15
- 基于大数据的O2O平台改进设计与实现
挖掘时缺乏数据预处理，存在平台功能完善度差、功能不健全等缺点，因此设计新的基于大数据的O2O平台。从平台概念框架、平台建设框架和平台设计框架几方面设计该平台，平台概念框架负责平台功能的实现;平台建设框架对开发程序进行模块化、平台化处理;平台设计框架实现将平台与各网站接口对接以及信息交换和管理工作。通过数据采集、数据预处理、数据挖掘完成基于大数据的O2O平台用户数据挖掘流程。采用基于Map Reduce软件架构的聚类挖掘优化算法实现基于大数据的O2O平台用户
现代电子技术 2019年2期2019-04-04
- 基于卷积神经网络的藏文手写数字识别
CNN; 数据预处理; 样本训练; 自动识别中图分类号： TN711?34 文献标识码： A 文章编号： 1004?373X（2019）05?0079?04Tibetan handwritten numeral recognition based on convolutional neural networkXIA Wuji1， 2， SE Chajia1，
现代电子技术 2019年5期2019-03-12
- 糖尿病诊疗的大数据分析
；糖尿病；数据预处理中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2018）20-0014-021 引言控制住院病人的血糖水平对降低发病率和死亡率具有重要作用，许多医疗机构把严格的血糖指标納入重症监护室ICU级别的正式协议。但是，对于大多数非ICU住院病人的接收却没有这样做。事实上，按传统的方式，住院病人的管理比较随意，为了提高患者的安全性，有必要对现有的医院收治的病人的糖尿病治疗模式进行分析评估。数据来自Center for Ma
电脑知识与技术 2018年20期2018-11-15
- 基于支持向量机的击键特征异常用户识别
击键认证；数据预处理；异常用户识别中图分类号：TP18 文献标志码：A 文章编号：1009-3044（2018）19-0186-05Abstract： Due to the user's familiarity with the keyboard， keystroke habits are different， and each user has his or her own keystroke behavior characteristics. This
电脑知识与技术 2018年19期2018-11-01
- 大型数据库的关联挖掘算法设计
分函数； 数据预处理中图分类号： TN919.25?34； TP301.6 文献标识码： A 文章编号： 1004?373X（2018）20?0045?04Abstract： In allusion to the problems of low mining accuracy and poor mining efficiency during the association mining process of the large?scale databas
现代电子技术 2018年20期2018-10-24
- Web日志挖掘中的数据预处理研究
细讨论了其数据预处理的主要步骤及其过程方法，最后阐述了Web日志挖掘在网站建设上的应用，为后继研究提供了参考。关键词：数据挖掘；Web日志挖掘；数据预处理中图分类号：TP311.13 文献标识码：A 文章编号：1003-5168（2018）19-0018-03Research of Data Preprocessing Method for Web Log MiningYU Qi（Library， Henan University of Economics
河南科技 2018年19期2018-09-10
- 数据挖掘中的数据清理技术概述
掘过程中，数据预处理都处于重要地位，占据数据挖掘过程总工作量的60%～80%，数据预处理过程决定着数据挖掘结果的准确性和有效性，而数据清理在数据挖掘中具有重要作用。本文针对各数据挖掘中数据格式不统一、数据清理过程不完善、冗余数据繁多及数据挖掘任务对数据类型的要求不同等问题，探讨了数据清理的基本概念、作用、方法和其中几个关键技术。关键词：数据挖掘；数据清理；数据预处理中图分类号：TP311.12 文献标识码：A 文章编号：1003-5168（2018）20-
河南科技 2018年20期2018-09-10
- 铁鸟测控系统特点分析及解决方法
结构设计、数据预处理、抗干扰技术、多任务系统交联管理的方法。经验证试验，实现多种传感器信号的数据采集、记录与分析，为铁鸟综合试验提供准确、可靠的试验数据。关键词：测控；分布式；数据预处理；抗干扰铁鸟试验台时按照飞机1：1比例搭建的液压、操纵系统试验台。在铁鸟平台上一般安装由真实的飞控系统、液压系统和起落架系统，有些机型还配置航电、电源等系统。铁鸟试验台肩负着飞行控制、液压系统交付飞行试验前的一个系统验证和确认过程。铁鸟试验能够极大程度上验证飞机多个系统性能
科学与财富 2018年23期2018-08-19
- 基于Hadoop平台下日志分析系统的研究
设计、日志数据预处理两个操作环节进行了重点介绍，并进一步提出了针对此类系统的检测方法。关键词：Hadoop平台；日志分析系统；数据预处理Hadoop是Apache软件基金会的一个开源项目，在并行处理大数据的研究与应用领域，属于一款极具代表性的产品。Hadoop平台提供的是一种分布式系统基础框架，适用于多种分布式应用的开发，且能够支持海量数据的高效运算与存储。由此可见，在进行日志分析系统的设计时，Hadoop是首选的支持平台，对实现日志分析系统的高效运行目标
无线互联科技 2018年5期2018-06-27
- 数据挖掘在电能质量监测数据分析中的应用
在电能质量数据预处理、扰动识别、谐波源定位中的相关应用，并就其应用前景进行了展望。关键词：电能质量；数据挖掘；数据预处理；扰动模式识别；谐波源定位数量巨大的参数对于开展电能质量这项工作的预估监测、对于出现的问题进行辨别、对于出现干扰因素的源头进行识别及随时把控，最终成为了极大的挑战。若是发生了此问题，急切地需要参数探究的智能方式，可以从电能质量干扰波动的参数当中摘取实用的信息，使用参数进行挖掘公作的这项技术能够获得发展的原因。一、理论及方式（一）基础概念参
科技风 2018年23期2018-05-14
- 基于数据挖掘技术的飞行试验数据分析应用研究
主要过程：数据预处理、数据挖掘方法应用、结果分析；并在后续各章节结合实例对每个过程的目的、典型方法和实施依据等进行详细描述。【关键词】飞行试验数据 数据预处理 数据挖掘方法 结果分析1 引言飞行试验简单而言是指在实际飞行中展开科学研究，并进行一系列的产品鉴定试验；而通过这种方式获得的数据是航空武器装备非常重要的研究资料，具有很高的学术价值，现代飞机系统愈来愈复杂，从而导致试飞数据量也不断增长。飞行试验数据是在进行实验的时候，通过现代化的工程测试技术，取得对
电子技术与软件工程 2018年5期2018-04-09
- 基于主成分分析法的潜油电泵技术评价指标
【关键词】数据预处理 相关性矩阵 主成分分析 SPSS1 问题提出系统运行评价体系主要由评价指标的筛选、指标权重的确定、模型的选取三部分组成。评价指标的确定关系到评价模型的质量、评价结果的准确度，因此评价指标的确定是构建好的评价体系的关键一环。以潜油电泵系统运行技术评价为例，在众多预选指标的基础上，如何筛选出与评价目标贡献率最大的、相关性最强的、更合理的评价指标，这是一个数据挖掘的过程，本文采用主成分分析的方法来解决这一问题。2 理论分析2.1 主成分分析
电子技术与软件工程 2018年5期2018-04-09
- 决策树算法在学生就业方向预测中的应用研究
学生信息；数据预处理；决策树；预测；学生工作中图分类号：TP311.51 文献标识码：A 文章编号：1009-3044（2018）06-0217-03教育领域积累了大量的学生信息，例如成绩、文体科技活动参加情况以及毕业发展状况等信息，这些信息直接反映了学生在校的学习状态、性格特点甚至发展方向。对学生信息的分析能够指导教学，引导学生工作者工作的展开，对学生的培养和发展起到一定的辅助作用。目前，对学生数据的利用主要是对学生成绩的简单分析，例如：对学生成绩计算平
电脑知识与技术 2018年6期2018-03-31
- 面向战场态势数据智能分析的预处理方法
供一种模拟数据预处理方法，为战场态势认知的研究打下基础。【关键词】模拟战场 仿真数据 数据预处理1 引言在信息技术和战争实践的推动下，联合作战和体系对抗己成为了现代战争的基本特征，现代战争与以往不同，战争的节奏越来越快，产生的战场信息呈现几何级增长，所以战场态势认知的研究势在必行。在一次对抗演习中，数据是兵棋演习的基础支撑部分，一般意义上来讲，数据可以对应、有序、准确的显示出演习中的一切行动和特征，贯穿于演习的整个过程。在演习数据分类中，运行数据由系统自动
电子技术与软件工程 2017年16期2018-03-30
- 数据挖掘在培训管理系统中的应用
初步探索、数据预处理以及数据挖掘过程。其中数据预处理和数据挖掘是培训系统的核心功能。【关键词】数据挖掘 培训管理系统 数据预处理1 引言对很多培养机构而言，目前急需解决的问题主要有：如何根据不同成员需求设置合理的课程、如何通过教学方式提高成员学习积极性、如何提高成员培训效果、如何通过考核检验成员学习成果等，都是培养机构发展过程中必须而对的问题。随着我国信息化进程的加快，一些培养机构也开始进行信息化建设，通过信息系统对培训相关事宜进行管理。但目前在针对培养机
电子技术与软件工程 2017年15期2018-01-30
- 基于支持向量回归的短期负荷预测
负荷预测；数据预处理；支持向量回归机前言随着人类生产力的持续发展，使得对能源消费的依赖日趋增加，化石燃料等传统能源仍然是能源消费的主体。不可再生资源快速消耗如油、煤炭、天然气等，这加速了源危机的到来。环境污染和温室气体排放也不容乐观，只有改变现有的能源市场消费结构，才能使人类经济社会良好，可持续地发展。而风力发电无疑成为了近年主推的一项新型能源建设，但由于风力发电间歇性、不稳定性，并网后对电网冲击巨大，因此对风功率进行准确实时的预测、对提高风电的利用率、加
科学与财富 2017年35期2018-01-29
- 数据清洗方法研究综述
大。阐述了数据预处理过程中的数据清洗方法，介绍了缺失值填充及去除数据噪声的常用方法，总结了数据挖掘的应用前景，展望了数据清洗研究方向。关键词：数据预处理；数据清洗；数据质量；缺失值DOIDOI：10.11907/rjdk.172093中图分类号：TP301文献标识码：A 文章编号：1672-7800（2017）012-0222-03Abstract：Data is an important guarantee for data mining and app
软件导刊 2017年12期2018-01-09
- 浅析数据挖掘中的数据预处理技术
掘过程中，数据预处理都处于重要的地位和作用，占据数据挖掘过程总工作量的60-80%，数据预处理过程决定着数据挖掘结果的准确性和有效性，本文主要针对数据预处理的基本工作内容进行介绍。关键词：数据预处理；数据挖掘；过程；数据清洗中图分类号：TP39 文献标识码：A 文章编号：1007-9416（2017）10-0216-02现实世界的数据库系统中的数据量迅速膨胀，目前数据存储的数量级已经达到G-T-P的级别，由于用户输入、数据库设计与界面设计等各种原因，在海量
数字技术与应用 2017年10期2017-12-21
- Web数据挖掘在智能网络课程系统的研究与应用
关联规则；数据预处理中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2017）30-0027-02Research and Application of Web Data Mining on Intelligent Network Course SystemZONG Xiao-zhong（Shazhou Polytechnical Institute of Technology， Zhangjiagang 215600， China）
电脑知识与技术 2017年30期2017-11-17