关键词： 二类水体   遥感反射比光谱   QA Score   Seadas   Acolite   胶州湾  

摘要： 海洋水色遥感研究中,精确的水体遥感反射比R_(rs)(λ)光谱数据是应用海洋光学卫星数据反演海洋生物地球物理参数的关键。实际工作中,遥感反射比是根据遥感仪器接收到的辐亮度经大气吸收和散射校正、太阳距离以及太阳高度角校正后计算出来的。因此对卫星传感器数据进行大气校正是我们得到精确的水体遥感反射比光谱数据的关键因素之一,也是海洋水色遥感研究中的一个重要问题。胶州湾是黄海西部的一个半封闭海湾,是北温带海湾生态系统的重要代表,该海域内规划了大范围的海洋牧场养殖区域,水体生物光学性质复杂。Landsat是美国NASA的陆地卫星计划,最初是为了观测陆地而研发,但是其高空间分辨率(30 m)的优势在海洋遥感监测中表现突出,使得其成为卫星遥感监测河流、湖泊、内陆环湾等水体不可忽略的数据源之一。基于QA(quality assurance)Score光谱质量评价体系对Landsat8/OLI数据处理中五种大气校正算法在胶州湾海域的大气校正结果进行了评价分析。五种大气校正算法分别是NASA(National Aeronautics and Space Administration)标准近红外大气校正算法(Seadas采用为默认大气校正算法,记为Seadas Default);Acolite默认大气校正算法—暗光谱拟合算法(dark spectrum fitting,记为Acolite DSF);以及Acolite指数外推算法(exponential extrapolation),根据算法中所使用波段的不同,分别记为Acolite SWIR,Acolite Red/NIR,Acolite NIR/SWIR。分析结果表明在胶州湾海域Seadas Default的大气校正算法得到的R_(rs)(λ)数据QA得分为1的概率(83.95%)要远大于Acolite DSF(49.66%),Acolite SWIR(4.13%),Acolite Red/NIR(7.25%),Acolite NIR/SWIR(1.38%)四种大气校正算法。Acolite DSF大气校正算法优于Acolite SWIR,Acolite Red/NIR,Acolite NIR/SWIR。应用MODIS/Aqua卫星数据对Seadas Default大气校正算法和Acolite DSF大气校正算法处理Landsat8/OLI卫星数据得到的R_(rs)(λ)在443,483,561和655 nm的数据进行了对比分析,结果表明在各个波段的Seadas Default算法所得的大气校正结果都要优于Acolite DSF算法。据此,建议在胶州湾及其附近海域应用Landsat8/OLI数据进行遥感应用研究时以NASA标准近红外大气校正算法为首选。

关键词： 逻辑回归   数据描述   异常值   数据处理  

摘要： 随着计算机技术和网络技术的不断发展,各个产业内的过程信息、数据呈现出爆炸式的发展态势,在此背景下,也产生了海量的流量数据。因此,如何科学地应用数据成为目前各行各业高质量发展的核心,面向大数据的机器学习等人工智能算法具有极大的优势,能够显著提升数据分析的效率、准确挖掘大数据背后的深刻要义,而逻辑回归的数据分析方法是线性分析中的关键,尤其是在大数据信息分析架构中,具有良好的应用效果。对此,文章对逻辑回归基本模型进行了概述,探究了逻辑回归模型的估计方法以及逻辑回归的 L1、L2 正则化处理方法,同时探讨了逻辑回归的惩罚机制及数据描述方法,剖析了逻辑回归的异常值处理的核心要义。文章的研究内容能够为横向的技术研发和数值分析提供参考和借鉴。

关键词： 数据保护   机密数据   数据处理   Facebook   隐私安全   数据泄露   源代码   个人信息数据  

摘要： 2022年已经过半,企业用户数据泄露事件接连不断。仅就全球知名的大型企业来说,三星的源代码和机密数据遭到公开,Meta(原Facebook)因为数据处理和隐私安全等问题累计被罚超10亿美元,宜家(IKEA)加拿大公司约9.5万名客户个人信息数据被泄……随着数据泄露(data breach)越来越屡见不鲜,一般意义上的用户数据泄露事件甚至已经失去了新闻价值,比如上述几起事件其实性质非常严重,说明相关企业在数据保护方面存在巨大漏洞,但并没有在媒体上引起太大的传播热度。

关键词： Excel表格   不确定度   有效位数   数据修约   最小二乘法  

摘要： Excel表格具有强大的数据处理功能.利用Excel表格自带函数探究了在物理实验误差处理中的直接测量数据个数统计、平均值、标准偏差、A类不确定度、B类不确定度、合成不确定度等计算方法,基于四舍六入五取偶原则,对平均值、合成不确定有效位数和修约结果求取、标准表达式的计算程序进行编写;同时,采用对数法编写了间接测量的误差传递不确定度计算程序.其次,编写了线性关系函数的最小二乘法拟合相关参数的计算程序,如截距和斜率的平均值和不确定度、相关系数等,并给出了计算结果的修约程序.实际数据显示表明,计算结果与Origin软件拟合结果完全吻合.

关键词： 煤矿开采   地质勘探   物探方法   数据处理  

摘要： 为了获得更为详尽的地质资料,物探被广泛应用。对物探数据进行有效处理,获得有效的信息十分关键。简单介绍了无线电坑透法和瞬变电磁法的原理,探讨了物探数据的处理方式。最后,结合斜沟煤矿物探的情况,分析了物探结果对应的地质异常情况。研究发现,结合相应的地质资料可以准确地探测工作面中出现的异常区域,为安全开采提供技术支持。

关键词： 计算机信息处理技术   计算机系统   大数据时代   数据处理   互联网   应用与实践   信息数据   应用和发展  

摘要： 随着科技的不断进步和发展,计算机渐渐发展成为人们生活中不可缺少的一部分,而随着互联网不断地发展,信息数据变得越来越庞大,大数据时代就应运而生。在大数据时代下计算机信息处理技术应用和发展大大增加了工作和生活的便利性,尤其是计算机信息处理技术能够很好地反作用于社会经济,有效地推动社会经济的健康发展。

关键词： 空间数据   航测遥感   资料收集   数据处理  

摘要： 在现代社会迅猛发展下,航测遥感技术在诸多领域广泛应用,极大的促进了航测遥感行业发展,相配套的设备和技术也在更进一步创新发展。由于航测遥感技术专业性较强,工作中所采集的数据类型多样,对于数据处理的专业性要求大大提升,因此选择合理有效的技术进行航测遥感内业数据处理十分有必要,可以有效提升数据处理效果,从海量数据中挖掘有价值信息,为关联工作开展提供可靠数据依据。基于此,文章就航测遥感内业数据处理工作着手探究,分析数据处理的关键技术,以期改善测量结果存在偏差的问题。

关键词： 数据处理  

ISBN: (纸本)9787111710820

摘要： 本书采用理论学习与实践操作并重、上层应用与底层原理相结合的方式，讲解数据分析师需要掌握的数据分析基础知识，包括基础理论、关联规则分析、回归分析、分类分析、聚类分析、集成学习、自然语言处理、图像处理和深度学习。每章内容从7个方面展开讲解，包括：应用场景、算法原理、核心术语、Python编程实践、重点与难点解读、习题和主要参考文献及推荐阅读书目。

关键词： 数据处理软件   高等职业教育   教材  

ISBN: (纸本)9787568083775

摘要： 本书主要围绕大数据处理技术展开编写，配套教学资源完善（包含录制的操作性较强的视频微课和教师授课PPT资料）。全书共分8章，第1章概述了大数据；第2章介绍了大数据平台部署的详细过程；第3章介绍了Hadoop应用开发、使甩Java操作HDFS和认识MapReduce；第4章介绍了Hive数据仓库开发、Hive开发环境的搭建租Hive高级操作；第5章介绍了Flume开发应用、安装Flume、Flume自定义实现；第6章介绍了Kafka开发应用、Kafka的安装与配置、Kafka监控和编程实现；第7章介绍了PySpark开发应用、PySpark配置和PySpark案例；第8章介绍了Flink开发应用、Flink部署和Flink案例。 本书项目案例通俗易懂，大数据开发技术采用的是目前行业主流技术。实训环境部署简单，学习案例步骤完备。可作为高等职业院校大数据专业核心课程的教学用书，也可作为大数据处理技术爱好者的参考用书。

关键词： 高等学校   教材   数据处理  

ISBN: (纸本)9787111711834

摘要： 本书以面向应用、面向实战为指导思想，紧扣企业技术人才培养的特点，在知识点讲解和实验中避免复杂的理论，使读者能够快速上手，感受大数据处理的魅力，以激发读者的学习兴趣。本书覆盖了大数据生命周期的主要技术要点。全书共8章，第1章介绍了大数据的产生、特点、价值、产业、思维等，第2章介绍了大数据生态，第3-7章按照大数据的生命周期，分别介绍了大数据采集与预处理、大数据管理、数据可视化、大数据分析、大数据应用的基本原理和方法，第8章介绍了大数据安全面临的挑战。本书可作为本科、高职院校大数据技术或数据科学及相关课程的参考书或教材，也可供数据科学相关技术人员阅读。