基于大数据的地下水环境监测系统研究

地下水环境监测是及时发现和解决地下水污染问题的关键。本文基于大数据技术搭建了一款地下水环境监测系统,采用监测点层级、区域层级和云平台层级的三层级架构。同时,为了实现对地下水环境监测数据的分析,本文提供了基于知识库和基于数据驱动两种路径,并结合地下水环境监测的具体应用场景进行分析。研究结果对于构建高效可靠的监测系统具有一定的参考价值和借鉴意义。     

大气环境科学综合数据采集共享平台建设及应用研究

为实现大气重污染成因与治理攻关项目数据的统一管理和数据共享,基于美国电子政务共享框架（Federal Enterprise Architecture Framework,FEA）方法论和数据中台思想,采用JAVA平台和SOA框架,以大气重污染成因与治理攻关项目科研数据为主,整合全社会大气科学数据资源,面向京津冀、汾渭平原大气污染成因与治理改善分析的核心业务需求,建设集多源异构数据采集、治理、共享、分析、发布于一体的大气环境科学数据采集与共享平台;建立完善的线上数据治理流程,采用多种算法实现大气业务数据集的实时质控;采用分级、分权限的数据共享机制和共享接口动态编辑技术,建立一站式数据枢纽.结果表明:①建立大气科学数据规范分类体系,提供从原始数据、二次数据产品、大气攻关信息发布等多种类型的数据共享服务.②建立海量多源异构综合数据集,包括空气质量、组分、污染源、气象、健康等11类,数据总量4.3 TB,包括7.5亿条数据和66万个文件.③开发交互式GIS服务和线上评估分析工具,实现环境空气质量评估、气象影响分析、组分变化、污染源统计四类主题数据服务.④向大气重污染成因与治理攻关项目各课题组、七省（市）提供多种形式共享,开放104个数据接口,实现21亿条数据、2万份文件、15个专题共享,有力地支撑了大气重污染成因与治理攻关项目的各项研究.      

信息共享平台在环境管理中的支撑作用

建立环境信息共享平台,使环境管理数据实现共享,实现各类数据及时的关联,是环境管理工作发展的必然趋势,将为环境管理提供强有力的技术支撑。信息共享平台利用了大型数据库在性能、安全性、可靠性、数据一致性、分布式处理等方面的优势,将各主要环境业务部门的统计、收费、审批、监测等数据集中管理起来,数据管理人员、各级领导、业务部门员工通过统一的Web界面进行管理、查询分析大量的环境数据,从而简化环境数据管理的难度,提高环境数据管理的水平,大大方便用户对环保数据的访问,提高了数据利用效率。     

基于镶嵌数据集的海量数据存储管理 ——以青海湖流域为例

如何对多源、多尺度和不同分辨率的海量影像数据进行高效存储与管理已成为当前地理信息数据库建库的关键。镶嵌数据集是当前管理栅格影像数据的新技术。本文详细阐述了镶嵌数据集管理海量数据的处理方法与入库技术流程。同时以青海湖流域为研究区,选择最新的Landsat 8遥感影像数据与Aster DEM两种数据格式为例,应用新的镶嵌数据集数据处理与入库技术,实现了不同格式影像数据的镶嵌处理、数据系列产品的生成以及不同格式栅格数据的标准统一与数据建库工作。实验结果表明,使用镶嵌数据集可以高效地处理不同来源、不同时期以及不同格式的影像数据,可以实现多种类型影像数据及相关数据产品的实时构建、快速查询以及大容量数据的高效存储,说明应用镶嵌数据集在多源数据集成管理、数据显示以及网络并发访问等方面具有巨大的优势。     

面向服务架构的南海地理信息决策模拟系统功能设计与实现

南海具有丰富的自然资源与重要的战略地位,实现多源海洋环境数据的集成与共享,从而为南海情势分析与决策模拟提供支持是当前急需开展的工作。本文在分析国内外海洋地理信息系统(MGIS)的研究成果及相关技术的基础上,设计实现了面向服务架构(SOA)的南海地理信息决策模拟系统。该系统不仅集成了从传统观测网获取的南海地区卫星影像、水文气象、自然资源等结构化数据,同时集成了从互联网中检索到的文字、图片等非结构化数据,实现了围绕南海地区的信息查询、可视化表达、分析评价等功能,并以服务方式实现了数据与功能的集成与互操作,为南海海域的科学管理、分析和决策提供强有力的工具。     

浅谈深圳市环境监督管理全覆盖移动执法系统的建设和应用

环境监督管理全覆盖移动执法系统,是利用现代无线通信技术、计算机技术等先进技术手段,利用手持终端(PDA)、手提电脑等设备,通过无线数字通信网的支持,实现在任何执法地点都可从后台业务系统中获取所需的业务数据、文字、图片、视频等信息,同时将现场执法的信息及时回传至后台系统中.本文介绍了移动执法系统的建设以及应用的情况.     

JAVA解决环境监测中的数字修约问题

在环境监测中经常要对监测的数据进行计算并进行数字修约和数理统计,通常用手工或计算器计算会很繁琐且很难实现枇量数据的计算从而影响监测分析的效率,同时计算机本身的“四舍五入”设置原则也不能达到分析数据的要求,进而影响最后的分析结果。因此,可以借用JAVA简洁、面向对象、安全、健壮等优点,并按照“四舍六入五单双”的修约规则来编写程序对数据进行自动修约,从而实现对监测数据及时处理和分析,借此大大地提高了监测工作效率的目的。     

基于GeoServer海底数据RIA WebGIS系统设计与建立

由于海底数据获取的困难性及数据的多源性,导致其共享与管理存在诸多问题,Web GIS可以将这些海底数据以矢量化的方式展现在网络上,实现大范围的数据共享。文章在分析海底数据特征基础上,将海底数据进行专题分类入库,并采用开源地图服务器Geo Server及开源GIS框架Open Scales技术,提出海底数据的RIA(Rich Internet Application,富互联网应用程序)Web GIS数据管理系统的设计与实现,介绍了系统开发的关键技术和流程,并以莱州湾为例实现系统的应用,最终实现了莱州湾海底数据的显示、管理及常规GIS功能。     

环境监测数据异常数据处理研究

准确、可靠的环境监测数据是环境管理的重要现实依据,本文在分析环境监测异常数据产生的原因基础上,提出了从代表性、完整性、精密性、准确性以及可比性等方面做好环境监测审核工作,以保证环境监测数据的质量,并提出了异常数据的判断及处理办法。     

海洋环境监测数据集成系统的研究与实现

针对全国海洋环境监测数据的检查、入库等操作,国家海洋环境监测中心研究与实现了海洋环境监测数据集成系统,以保证数据入库的完整可靠,减少工作人员的劳动强度,方便数据的管理。     

环境因素数据质量审核方法研究

目的 解决大气环境试验站的气象数据报表存在数据缺失、数据超过边界、数据内部不一致、数据时间不一致等问题,采用数据质量审核技术找出缺失、可疑或错误的数据,对科研人员进行警示,使其能够追根溯源,分析存在问题的原因。方法 参照相关规程和标准,建立环境因素数据质量审核算法和审核流程,并使用计算机语言编程固化流程和算法,利用多线程算法对数据进行扫描,实现大批量气象数据的并行审核。结果 利用Python语言设计了环境因素质量控制软件,通过该软件的应用证明了该方法合理、有效,能够快速、准确地标注气象数据报表中存在质量问题的数据。利用软件统计了存在问题数据的数量和正确率。结论 通过加载数据测试,证明了环境因素数据质量审核方法和审核流程合理有效,利用设计的审核软件实现了气象数据报表快速审核,提高了审核效率,减少了科研人员的劳动强度,为进一步填补、修正和利用数据奠定了基础。     

浅议环境监测数据可靠性分析方法及其提高途径

环境监测数据的质量包括数据的准确性、精密性、代表性、可比性和完整性,直接影响到执法效果和反映环境质量的真实性。在第一时间判断出监测分析数据是否合理的基础上,再对监测分析的数据作进一步的分析评价,是整个数据综合分析的基础,为进一步综合分析数据提供了依据。本文介绍了影响环境监测质量的主要影响因素,通过分析几种常用的监测数据的分析方法,重点说明了综合分析对监测数据是至关重要的,并进一步阐明了获得数据可靠性的途径。     

应用对地观测卫星遥感数据建立共享平台

以整合、共享为宗旨,充分利用现有的大量遥感数据建立综合卫星遥感应用和服务的公共平台。通过WebGIS形式,实现用户的网上浏览及分析处理,从而达到提高遥感数据使用率,实现其社会效益及经济效益的目的。     

编程Tser211处理团岛大气试验站气象采集数据

编写了处理团岛试验站气象数据的程序,实现了试验站气象数据的自动化统计处理与分析,提高了处理数据的效率,对处理统计该站的气象数据工作大有裨益。     

数据新闻:大数据时代新闻的变迁——以网易、搜狐、腾讯、新浪的数据新闻为例

与传统新闻相比,数据新闻是"在事实本身之上进行深入的挖掘而获得表面事实背后蕴涵的故事",其生产过程包含五个方面:新闻选题、收集数据、处理数据、可视化、故事化。本文分析了网易"数读"、搜狐"数字之道"、新浪"图解天下"、腾讯"数据控"等栏目的数据新闻,并随机选取网易70篇数据新闻对网易"数独"产品进行分析后发现,网易的数据新闻基于大量的数据进行新闻挖掘,"社会生活"为题材的新闻居多,而且大都用圆形类图标进行可视化呈现。     

环境监测中异常数据研究及具体实例的探讨

监测数据审核是整个环境监测质量管理中的重要一环,关系到监测数据的真实、公正、有效。针对异常数据产生的原因进行了探讨,尤其是结合实际监测工作,列举了一些具体实例,对环境监测过程中出现的异常监测数据进行了分析并找出异常数据存在的原因,最后分析了监测数据审核过程中应注意的问题并提出了保证监测数据准确的合理化建议。     

典型装甲车辆平台环境数据采集与数据库管理

通过54次不同条件下的跑车试验,使用温湿度和振动传感器采集了典型装甲车辆大量的平台环境数据。利用ASP＋SQL server2000设计了数据库管理软件,实现了对装甲车平台环境数据、二次数据、相关文献的有效管理和高效查询。     

十三陵地震台观测技术系统优化改造

在北京十三陵地震台建设了一个高度集成的地震观测监控系统,将原来分散的观测项目(如测震、GPS、气氡、气汞、电磁波、地电场等测项),改造为集中到一台服务器管理,在一个监控平台上统一实现了对台站数据的收集、入库、管理、处理、监控等业务;对这些观测项目可以在控制台上直接取数并将数据入库;初步实现了观测数据的收集、数据处理、数据管理、数据监控的软件管理系统,减少了系统维护工作量,方便台站工作人员操控。监控系统的地震前兆数据监管软件系统DataMonitor可准实时监视数据,检查数据的异常和到达情况,并向台站数据管理人员告警;可对数据库数据进行统计,包括数据到达情况统计、缺数统计、数据连续率统计等。该系统还提供多种前兆数据处理方法,实现对前兆数据的各种常规分析处理。     

大数据时代下杭州城市形象传播研究

城市形象体现了一个城市的文化特征和城市精神,对城市发展具有重大影响。在大数据时代,超级计算机、无线接入、传感技术、"云计算"等是实现城市形象进一步广泛而有效传播的基础,随之而来的数据仓库、数据分析、数据挖掘等也开始发挥作用。本文以杭州为例,分析城市形象传播如何借力大数据,进行顶层设计,制定传播策略,从而提升城市影响力。     

我国"硒与健康"数据库数据质量评价

数据库数据质量评价是数据库设计与实现的必要基础工作之一。鉴于数据源往往是兼容并蓄,数据质量如何应向用户交待,以期在应用时做为重要参考。不久前,我们实现了我国“硒与健康”数据库。首先应用常见的统计方法进行了单因素数据质量评价。继而参照不久前Megien的工作,尝试应用膜式识别方法建立了多维数据的评价模式,对“硒与健康”数据库中所储多因素数据进行了质量评价。