数据质量评估

摘要： 移动式空气质量传感器作为一种成本低、机动性和灵活性高、使用场景丰富的测量工具,近年来在大气环境监测和污染溯源领域得到广泛应用.本研究通过文献调研方式对国内外移动式空气质量传感器的研究和应用进行综述.移动式空气质量传感器的研究主要有数据质量评估及数据校准,本研究总结了移动式空气质量传感器数据质量的评价指标和校准方法.根据移动式空气质量传感器搭载平台的移动路径可将其应用分为固定路线移动监测、随机路线移动监测以及可操控移动监测三大类,总结其在环境空气质量监测、污染源监控、个人健康暴露研究、排放源清单动态识别等领域的优势和不足,并展望其发展方向和应用前景.移动式空气质量传感器的应用主要存在以下几方面问题:①与固定式传感器相比,移动式空气质量传感器除受环境影响较大外,还受搭载平台的运行速度及振荡幅度影响,且校准困难;②移动式空气质量传感器的不足限制了其监测能力,因此应用场景有一定局限性;③移动式空气质量传感器能产生大量高时空分辨率的数据,但目前利用率较低且与其他数据的融合度较差.因此,应通过硬件或算法升级,以提高移动式空气质量传感器的稳定性及可靠性,适应更复杂的走航环境,保证数据质量,并与多种数据进行融合,丰富应用场景.

摘要： 分析校内单基准站的数据质量,可以检测校内基准站运行性能。利用TEQC及RTKLIB软件对学院CORS站观测数据进行处理分析,根据观测数据有效利用率、信噪比、多路径效应影响等指标评定数据质量,为今后基准站建设位置选址提供依据。

摘要： 甲基叔丁基醚(MTBE)作为汽油添加剂被广泛使用,其具有较强的水溶性且在水体中难以被降解。为估算MTBE的预测无效应浓度(PNEC),本研究通过文献调研法和数据库检索法收集MTBE危害信息,并对危害数据进行质量评估。采用物种敏感度分布(SSD)法预测不同种类水生生物5%物种危害浓度(HC_(5)),应用评估因子法推导获得PNEC值。数据质量评估结果显示,在调研的17篇文献179条数据中,高质量可靠数据54条,占评估数据的30%。另有33条来自数据库的数据满足质量要求。采用SSD法获得全部物种、鱼类、水生植物、节肢动物的HC_(5)值,其中正态分布模型得到的HC_(5)值分别为128.56、491.13、143.25和117.71 mg·L^(-1);逻辑斯谛分布模型得到的HC_(5)值分别为129.62、485.78、151.83和121.5 mg·L^(-1)。应用评估因子法估算出全部物种、鱼类、水生植物和节肢动物的PNEC分别为42.85、161.93、47.75和39.23 mg·L^(-1)。研究表明,MTBE对不同种类水生生物的PNEC值存在差异,其中节肢动物生物相对敏感。本研究基于现有数据完成,以期为MTBE的环境风险评估及水质基准建立提供科学依据。

摘要： 为了有效解决沿岸及岛礁等复杂区域难以开展大比例尺船载海洋磁力测量的问题,在总结梳理动力滑翔机航磁系统海上测量实施流程基础上,以黄海某区域航磁试验为例,探讨了动力滑翔机航磁系统开展海区磁力测量中的关键技术。研究结果表明:结合本文给出的海上测量实施流程,本次试验的飞行质量评价指标、系统动态噪声水平均满足《航空磁测技术规范》要求,切割线统计的均方误差满足《海洋磁力测量要求》一等精度测量要求,重复线均方误差的统计结果进一步验证了该系统在试验区域测量的稳定性;不同高度的实际测量结果可以为测区地磁分布特征的描述及相关延拓算法的验证提供数据基础,从而为构建海区三维磁空间背景场模型提供数据支撑。

摘要： 有效发挥统计监督职能作用是党的十九届四中全会作出的重大决策部署,是中央全面深化改革委员会作出的重大制度安排。加强统计监督,是发挥统计工作在经济社会发展中重要综合性基础性作用的关键环节,也是推进国家治理体系和治理能力现代化的重要内容。统计监督是指监督主体对监督客体在贯彻落实党中央、国务院重大决策部署,依法依规依制开展统计工作,提高统计数据质量等方面进行监察、督促、检查,对经济社会运行进行统计监测和综合评价。作为党和国家监督体系的重要组成部分,统计监督包括权力监督、执法监督、监测评价、管理监督4个层面的内涵,其主要形式有:统计督察、统计执法监督检查、监测评价、统计制度监督、统计数据质量检查评估。每一监督形式有各自的监督主客体、监督内容,从而形成系统完整、协同高效、约束有力的统计监督体系。

摘要： 联邦学习中用户的数据数量不同得到的聚合权重不同,数据质量不同也会对参与联邦训练的用户聚合权重产生影响。针对传统联邦学习中因单一因素确定聚合权重导致的贡献不公平问题,并且基于用户的数据数量和用户的数据质量提出一种基于数据质量评估的公平联邦学习方案。首先,结合相对熵定义了评估公平标准。然后,运用熵权法定义用户数据质量计算方法,根据用户数据质量得分和数据数量得分计算用户的综合得分,并用综合得分作为用户的贡献。最后,根据用户的综合得分定义用户的聚合权重设计公平的隐私保护联邦学习方案。实验分析表明,所提出的方案比传统联邦学习方案更加具备公平性。

摘要： 针对传感器精度下降时的航迹关联问题,提出了一种基于数据质量评估的自适应序贯航迹关联算法。将实时数据质量评估结果引入关联门限的调整,结合熵值法和效用函数法对传感器性能和局部滤波质量两项指标分别进行评估,构建了两项指标与算法显著性水平之间的模糊关系,实现关联门限的自适应调整。仿真表明,在局部传感器精度下降的场景下,改进算法的关联性能优于对比算法,且良好的关联效果有益于融合精度的提升,在目标机动的情况下也具有良好的适应性。

摘要： 随着人们生活水平的提高,众多日用化学品(以下简称日化品)走进家庭,部分日化品中可能含有潜在致癌性、致突变性和生殖毒性的物质(CMR),在方便生活的同时带来了污染,也危害了人体健康。本文通过文献调研法与数据库检索法收集了包括国际香料组织香水成分清单、国际化妆品原料标准中文名称目录2018(草)清单和食品用洗涤剂原料(成分)名单(第一批)(草)在内的8类日化品成分清单,通过与高关注物清单、致癌物清单和内分泌干扰物(EDCs)清单等进行名录比对筛重,识别出典型高危害污染物邻苯二甲酸二丁酯(DBP)。DBP作为广泛使用的增塑剂、软化剂等,多应用于化妆品、洗涤用品中,对环境和生物体具有潜在危害。本研究通过收集整理DBP对我国水生生物的急、慢性毒性数据,开展了危害数据质量评估。评估结果表明,在调研的23篇文献以及数据库数据中,共计41条有效数据满足评估要求。采用物种敏感度分布法(SSD)获得通过质量评估的全部物种、鱼类和藻类的5%物种危害浓度(HC)值,其中正态分布模型得到的HC值分别为0.59、1.97和0.42 mg·L^(-1);逻辑斯蒂分布模型得到的HC值分别为0.63、2.08和0.23 mg·L^(-1)。应用评估系数法估算出全部物种、鱼类和藻类的预测无效应浓度(PNEC)值分别为0.118、0.394和0.046 mg·L^(-1)。研究表明,DBP对不同种类水生生物的PNEC值存在差异,其中藻类相对敏感。本研究基于现有数据完成,以期为DBP的环境风险评估及水质基准建立提供科学依据。

摘要： 广东省积极推进地方优先控制化学品环境管理实践,在省内开展了壬基酚环境风险评估研究工作。本研究以生态环境部发布的系列文件为指导,收集不同介质中壬基酚环境暴露数据并进行质量评估,结合壬基酚危害效应最新研究进展确定预测无效应浓度(PNEC),最终采取商值法表征环境风险。研究结果表明,根据收集到的现有数据,在淡水、淡水沉积物、土壤和污水处理厂中,壬基酚的PNEC分别为0.33μg·L^(-1)、4.62 mg·kg^(-1)(以干质量计)、0.344 mg·kg^(-1)和9.5 mg·L^(-1),经质量评估的环境浓度范围分别为ND~33231 ng·L^(-1)、ND~28830μg·kg^(-1)(以干质量计)、ND~6.38μg·kg^(-1)(以干质量计)和93~872 ng·L^(-1);淡水、淡水沉积物和土壤中壬基酚浓度中位值分别为353 ng·L^(-1)、525.24μg·kg^(-1)(以干质量计)和1.86μg·kg^(-1)(以干质量计)。广东省污水处理厂排放是壬基酚进入环境的主要途径。基于2002—2015年间历史监测数据,淡水与淡水沉积物中部分点位风险表征比率>1。鉴于历史监测数据的时间跨度导致较大不确定性,建议持续关注壬基酚环境风险,进一步开展现状研究,必要时采取相关措施。

摘要： 互联网时代,个人数据信息安全成为重要议题。将数据与信托概念融合,或许是一个好的解决方案。本研究分为两部分。首先构建八角色五阶段的数据信托运行机制流程,然后聚焦监管部门,尝试利用层次分析法,以数据源质量、数据录入方式、产品化技术手段、业务处理流程和管理制度四项标准给每个数据产品进行评分,构建数据产品质量量化评估模型。

摘要： 随着气象雷达技术的不断发展,中国新一代多普勒天气雷达组网建设已经具有一定的规模,目前国内的业务雷达基本都是应用的S/C波段非双偏振雷达,主要应用方向还是大范围扫描的预警监测方面,目前存在两方面的不足:(1)降水粒子的相态识别、云微物理结构;(2)局地强对流单体的精细观测,预报和快速预警.为了解决上述两个问题,应用X波段双偏振天气雷达观测是一个趋势.本文首先根据需要评估的雷达计算雷达参量(反射率、差分反射率、互相关系数、差分传播相位)的标准偏差的理论值，再对实际观测数据进行分析，首先选出观测区域，在同一时刻，雷达网中的不同雷达观测对同一个气象目标进行观测，对观测数据进行分析，计算数据的实际标准偏差，再对标准偏差的分布进行统计，统计结果与理论值进行对比，验证数据评估效果。该方法可以有效的分析雷达数据的起伏情况，可以作为雷达数据质量评估的一种方法，今后还需利用该方法分析更多的雷达观测数据，来验证该方法的有效性，为X波段雷达的数据评估提供一种新的分析手段。

摘要： 本文通过分析与描述书目数据制作过程中产生差错的两大因素,对如何提高书目数据质量提出了三个观点。通过建立简单数学模型的方法完成数据质量评估与激励工作,定量、客观地对编目员的工作进行评价,为提高书目数据质量开辟了一条新路。

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 卫星雷达高度计是海洋动力遥感的重要传感器,采用我国自主研制的HY-2卫星高度计的IGDR数据,分析了HY-2A高度计的测高误差改正,针对中国近海区域(0°N～40°N,102°E～138°E),对数据进行数据编辑与筛选和地球物理参数改正,并对沿轨道分布和测高交叉点不符值进行分析,通过共线处理和交叉点平差等方法确定中国近海平均海平面,同MSS_CNES_CLS11模型进行对比验证,验证结果表明HY-2A高度计数据质量是可靠的.

摘要： 该文简要介绍风洞数据不确定度分析方法。利用该方法不仅可以迅速地估算出试验数据的不确定度，为用户提供安全设计依据，并为风洞人员提供有效的试验质量监控方法。该方法已在一些国家推行，并正在形成标准。

摘要： 该文简要介绍风洞数据不确定度分析方法。利用该方法不仅可以迅速地估算出试验数据的不确定度，为用户提供安全设计依据，并为风洞人员提供有效的试验质量监控方法。该方法已在一些国家推行，并正在形成标准。

摘要： 本发明涉及一种数据质量的评估方法及评估系统，其特征在于，包括以下步骤：1)获取说话人的待评估语音数据；2)获取待评估语音数据的采样参数；3)计算待评估语音数据的评估指标；4)根据采样参数和评估指标计算说话人待评估语音数据中所有单条语音数据的质量分数；5)根据所有单条语音数据的质量分数计算该说话人待评估语音数据的质量分数；6)重复步骤1)～5)计算所有说话人待评估语音数据的质量分数；7)获取说话人的特征；8)根据说话人的特征和预先设定的质量目标计算匹配度，并根据匹配度和所有说话人待评估语音数据的质量分数计算整体待评估语音数据的质量分数，本发明可以广泛应用于语音识别技术领域中。

摘要： 本发明涉及一种数据质量的评估方法及评估系统，其特征在于，包括以下步骤：1)获取说话人的待评估语音数据；2)获取待评估语音数据的采样参数；3)计算待评估语音数据的评估指标；4)根据采样参数和评估指标计算说话人待评估语音数据中所有单条语音数据的质量分数；5)根据所有单条语音数据的质量分数计算该说话人待评估语音数据的质量分数；6)重复步骤1)～5)计算所有说话人待评估语音数据的质量分数；7)获取说话人的特征；8)根据说话人的特征和预先设定的质量目标计算匹配度，并根据匹配度和所有说话人待评估语音数据的质量分数计算整体待评估语音数据的质量分数，本发明可以广泛应用于语音识别技术领域中。

摘要： 本发明公开了一种基于数据挖掘的配网拓扑数据质量评估方法及装置，所述方法包括：采用滑窗算法和标准差计算的方法获取电压波形稳定的临界点，对台区电压曲线噪声处理；对出现三相不平衡现象的台区电压数据做配变出口电压归算的处理；按照供电单位和线路利用皮尔逊相关系数计算同一线路下任意两个台区之间的电压曲线的相关系数，获取电压曲线之间的相关系数矩阵；对相关系数矩阵中的相关系数求概率密度分布，获取概率密度分布函数，对该函数积分并分析，获取评估结果；本发明的优点在于：利用电压曲线之间的相似性来判断配网拓扑的数据质量，提供一种较为可靠的评估配网数据质量的方法。

摘要： 本发明实施例提供一种数据质量评估方法、装置和用于数据质量评估的装置。其中的方法包括：接收来自第二方的安全标记及密文的抽检数据，安全标记为第二方基于待提供数据中的数据条目的密文所生成，抽检数据为待提供数据中的部分或全部数据，待提供数据包括密文数据；从接收的安全标记中，查询得到抽检数据中的数据条目对应的第一安全标记；基于抽检数据中的数据条目的密文，生成抽检数据中的数据条目对应的第二安全标记；对第一安全标记与第二安全标记进行逐一匹配；在匹配成功情况下，对抽检数据进行质量评估，得到抽检数据的质量评估结果，从而确定待提供数据的质量评估结果。本发明实施例可以提高密文数据交易的可靠性。

摘要： 本发明公开了数据分析技术领域的一种基于大数据技术的政务数据质量评估和异常数据修复技术，先建立建立数据库，再进行数据质量评估，最后进行数据质量修复；本发明通过对数据字段进行空值、值域、规范、逻辑、引用性、重复数据检查，从数据完整性、关联性、唯一性、准确性、一致性以及规范性六个维度综合评估数据质量，并生产数据质量评估报告，由使用者对数据进行手工修复或规则修复或深度学习修复，帮助政府打破内部数据壁垒、盘活数据资产、提升数据价值，对外提供统一的智能化数据服务，进一步深挖和释放大数据的价值红利。

摘要： 本申请提供了一种数据中台的数据质量评估方法、装置、电子设备及计算机可读存储介质。该数据中台的数据质量评估方法，包括：获取待质检评估数据及其对应的质检评估规则和权重；将待质检评估数据及其对应的质检评估规则和权重输入预设的质检评估模型，输出对应的数据质量评估结果；其中，质检评估模型包括预先配置的多个质检评估对象及其分别绑定的质检评估规则和权重。根据本申请实施例，能够对数据进行质量评估。

摘要： 本发明涉及一种面向数据交换的业务数据质量评估方法，属于计算机数据处理领域。本发明基于电子检务标准框架体系中的应用系统分体系中数据元类、信息分类与编码类的数据标准规范，构建业务数据知识图谱和业务数据检查规则；对业务数据进行质量评估，对交换数据的质量评估，对交换汇聚数据的质量综合分析。本发明有很好的自动化检测和客观性等技术效果，本发明能实现自动检查、记录、评估数据交换后的数据质量的技术效果。

摘要： 本申请公开了疾病注册数据库数据质量的评估定量方法，所述方法包括：获取疾病注册数据库的数据字典和备份数据集；参考既往文献对医学数据库数据质量评估的描述和方法，本专利定义至少五个维度对疾病注册数据库的数据质量进行定量评估，所述维度至少包括：校正后的疾病注册数据库病例量、疾病注册数据库数据采集的变量个数、病例数据完整性、病例数据可靠性、年度随访完成率；根据所述五个维度的组合定义数据质量评估指数及其计算公式，根据所述数据质量指数对所述疾病注册数据库数据质量进行数据质量的综合评估。本申请有利于基于数据库的癌症研究，可以系统灵活地评估不同数据库，提高数据库的有效性和可比性，促进其最优用。

摘要： 本发明提供一种基于数据处理的数据质量评估方法，包括：步骤1、获取毁伤目标‑毁伤工具属性数据；步骤2、基于ETL工具对毁伤目标‑毁伤工具属性数据进行预处理，获得结构化的毁伤目标数据以及毁伤工具数据，加载至数据仓库；步骤3、基于毁伤目标数据以及毁伤工具数据，采用基于量子粒子群优化的逻辑回归评估模型评估毁伤概率，作为第一质量评估结果；步骤4、将第一质量评估结果与基于毁伤目标‑毁伤工具属性预定的评估体系进行比对，获得第二评估结果输出，其中所述的评估体系包括不同毁伤概率下毁伤等级。

摘要： 本发明公开了一种用于互联网数据挖掘的数据质量评估系统，包括数据资源云平台、读取系统和整理系统，所述数据资源云平台的输出端分别与读取系统和整理系统的输入端连接，所述读取系统包括检索单元、输入单元、选择单元、中央控制器、识别单元、输出单元、分析单元、对比单元、评估单元、分类单元、提取单元和存储单元，所述检索单元的输出端与输入单元的输入端连接，所述输入单元的输出端与选择单元的输入端连接，本发明涉及数据评估技术领域。该用于互联网数据挖掘的数据质量评估系统，可以根据个人评估方法进行设定，得到最佳评估效果，解决了现有的数据质量评估都是系统化的，不能根据个人评估方法设定，使用具有局限性的问题。