探究6.1数据库技术:了解数据存储与管理的新趋势 (6.1 数据库)

随着互联网技术的不断发展,数据已成为现代社会的一项重要资源。无论在商业、教育、等领域,数据处理和管理都占据着核心地位。而在数据处理和管理的过程中,数据库技术是至关重要的一环。本文将探究6.1数据库技术的新趋势,为读者了解数据存储和管理的新趋势提供一定的指南。

一、数据管理与存储的新趋势

1. 列存储技术的应用

列存储是目前较为流行的一种数据库存储方式。它能够使数据库系统在数据查询和分析方面表现出更高的性能和灵活性。列存储技术的应用越来越广泛,被大量用于数据仓库、数据分析等场合。

2. 预测性分析的发展

预测性分析是借助机器学习和数据挖掘技术将已知的数据映射到未知的数据中,进而预测未来的趋势。预测性分析在业务决策、金融市场预测、自动驾驶等领域中被广泛应用,因此其在数据管理和存储中的应用也越来越受到关注。

3. 数据自的重视

数据自是指个人和企业在对自己的数据拥有掌控权和拥有数据使用权的权利。在数据泄露、数据滥用等问题频频出现的背景下,数据自的重视已成为趋势。因此,隐私保护、数据权限管理等技术备受关注并应用于数据管理和存储。

二、6.1数据库技术的发展趋势

1. 云数据库技术

随着云计算技术的发展,云数据库已成为一个热门话题。云数据库将数据存储在云端,用户只需付费使用即可享受其服务。云数据库以其便捷、高效的优势实现了大规模数据存储和处理,成为近年来数据库技术的热门领域之一。

2. 大数据处理技术

随着数据量的不断增大,传统的关系型数据库无法满足对大数据的存储和处理需求。因此,大数据处理技术应运而生。大数据处理技术包括Hadoop、Spark等开源框架,可满足高速、低延迟、低成本的处理需求。

3. 技术

技术将与数据库技术不断进行融合与创新。技术可以通过对海量数据进行分析和处理,提高对数据的理解和使用,进而在数据管理和存储中发挥更大的作用。云计算、大数据处理和技术的融合将推动数据库技术在处理、存储和分析大规模数据方面的能力得到普遍提高。

结语

本文对6.1数据库技术的新趋势进行了探究。数据存储和管理的新趋势包括列存储、预测性分析和数据自的重视。而6.1数据库技术的发展趋势则包括云数据库技术、大数据处理技术和技术。通过了解这些新趋势,我们可以更好地了解数据库技术的发展方向,进而更好地应对未来的数据存储和管理挑战。

相关问题拓展阅读:

数据库检查技术在土地变更调查中的应用研究

高梅 王斌

(荆州市国土资源局,荆州,434000)

摘要:本文以荆州市应用数据库检查技术进行土地变更调查为例,介绍了变更数据库建设的技术流程,变更数据库检查的内容、方法及程序,为数据库检查技术在土地变更调查中的应用提供借鉴。

关键词:数据库;土地变更调查

1 引言

准确的土地调查数据资料,是正确认识土地国情、国力的前提,也是制定科学的土地政策,合理利用和科学管理土地,有效监管土地市场,确保国民经济持续、协调发展和社会安定团结的重要基础。1998年《土地管理法》修订时,又对土地调查制度作出规定:“国家建立土地调查制度。县级以上人民土地行政主管部门会同同级有关部门进行土地调查。土地所有者或者使用者应当配合调查,并提供有关资料。”

而土地部门自建立以来,开展了大量城镇地籍调查、土地利用现状调查、建设用地勘测定界、土地权属调查、土壤调查等工作,完成了之一轮土地利用现状调查及变更调查等许多基础性技术工作。各地国土资源管理部门根据国土资源部对“数字国土工程”的规划和对国土资源信息化管理的具体工作要求,都相继建立土地利用现状数据库,从而将广义上的土地利用现状调查工作,通过土地信息系统的管理功能简化为主要是同步进行土地变更调查,以满足科学管理土地的统一性、现势性、实用性要求。

为了进一步规范和提高土地变更调查工作数据的准确性,本文就在荆州市土地利用变更调查中数据库检查技术的应用与各位专家和同行做一次交流和探讨。

2 荆州市土地利用现状概要

荆州市随着经济的快速发展,工业化、城市化进程的加快,全市建设用地增幅较大,农业产业结构调整很大,土地利用现状变化显著。近年来,根据国土资源部的要求,进行了年度的变更调查,使土地变更调查工作步入了日常化、规范化和制度化的轨道,积累了一定的经验。但由于变更时间跨度长、技术陈旧、没有及时进行图件更新和数据同步等原因,造成土地利用现状现势性较差,图、数、实地不一致,在实际应用中不能准确反映土地利用现状,难以适应新时期土地管理和经济建设的新要求。

2023年5月按照国土资源部《2023年国土资源大调查项目计划》和《关于报送国土资源大调查项目实施方案的通知》的精神,荆州市承担了基础图件与数据更新项目的试点任务,结合荆州市的实际,荆州市国缓运土资源信息中心采用武汉瑞得信息工程有限责任公司(以下简称“瑞得公司”)开发的GIS软件和土地利用现状管理信息系统软件,先后完成了荆州市1988年土地利用现状数据库和2023年变更数据库的建设,之后每年按要求及时统一进行数据更新,基本实现了土地利用现状数据的动态管理。

3 变更数据库建设的技术流程

在以2023年土地利用现状数据库为本库的基础上,根据2023~2023年所收集汇总的土地变更调查数据资料,建立变更数据库——即2023年土地利用现状数据库。变更数据库建库流程如图1所示。

图1 变更数据库建库流程

4 变更数据库检查内容

同初始数据库一样,变更数据库的检查,也是对变更调查工作流程中每一个阶段生成的数据成果进行自我检查、纠正错误、保证数据库的质量技术手段。

4.1 资料预处理阶段

4.1.1 建库基础资料检查

该项工作主要是对建库所用的土地变更调查基础资料进行统计、核查,看是否符合建库的要求。

(1)荆州市国土资源局信息中心提供建库的变更图件资料为2023年土地利用现状图生成的蓝晒图(标准分幅),该蓝晒图上标示出了2023~2023年的变更图斑(点状、面状、线状图斑),共有120张变更型哪唤图纸(89 幅标准分幅图)。

首先对变更图件资料中的以下内容进行检查:①变更图斑是否完整,有无未闭合情况;②变更图斑中图斑号、地类号标注是否正确,变更图斑编号是否符合规定;③跨村界、乡镇界的变更图斑接边情况(例在检查中发现宜黄高速公路荆州段中涉及变更众多图斑,由于判读地物产生误差,各乡镇之间的高速路出现不衔接的情况,到实地进行地调后及时更正。卜凯);④变更图斑内线状地物处理情况等。对部分图纸不符合《县(市)级土地利用数据库建设技术规范》要求的,必须由技术人员对其进行重新实地调绘、转绘,然后再提交作业人员进行数据采集。

(2)根据图历簿填写内容的要求,逐项认真填写,并检查变更标准分幅图图纸质量。

(3)对各部门提供的属性资料进行整理,对不完整的资料要求相关部门进行补充完善。

4.1.2 图件扫描质量检查

因为变更图纸是由2023年薄膜图蓝晒而成的纸质图,图面不是很清晰,且已经用了几年的时间,变形和图面磨损都比较大,给变更数据的采集造成了一定的难度。因此,对变更底图的扫描质量要求就比初始薄膜图扫描的要求更高。

图件扫描的分辨率不能低于300dpi,256 灰度扫描,图纸不清楚时可采用400dpi 或更高的分辨率进行扫描。扫描前必须进行扫描仪系统误差的检查和处理,尽量减小系统误差对整个底图质量的影响。对于一些局部变形较大的图纸在扫描的时候须进行特殊的处理,主要是采用分块扫描、校整的办法进行处理。

4.1.3 底图校正质量检查

使用瑞得公司矢量化软件RDSCAN,对扫描并经预处理过的底图进行图幅校正和坐标系转换。在图幅校正中将每幅图的图廓计算边长与其标准边长进行比较,对误差较大的图纸进行分析,并协同技术人员解决。

4.1.4 底图拼接质量检查

瑞得土地利用现状数据库管理系统 RDLUS 对数据的管理采用的是“市—县—乡—村”行政级管理模式,所以在进行底图拼接质量的检查时主要是看相邻底图的接边情况是否良好,对于拼接误差较大的图幅要进行较整、处理。检查底图拼接一般误差主要表现为以下两种类型:

(1)两端的内图廓拼接较好,但图幅中间的图斑线拼接有误差(如图2a)。这种情况可采用对每幅图分块扫描拼接以减小图幅间的拼接误差。

(2)两图幅中公里格网线之间拼接良好,但地物拼接误差较大(如图2b)。这种情况仅通过对底图进行较整以提高地物之间的接边精度是行不通的,只能在矢量变更数据采集时通过“取中采集”的原则来减小地物拼界接差造成的不良影响。

图2 底图拼接误差示意图

4.1.5 阶段性数据成果检查

检查阶段性数据成果是否保存为最新最完整的数据,并进行异地备份。该阶段数据处理过程中遇到的资料问题和重大的技术问题以及处理方法等是否进行了详细的记载。

4.2 矢量变更数据采集阶段

4.2.1 真实行政界线矢量变更数据检查

核实真实有效的村权属界线,严格核查原详查接边情况表,明确工作界线,达到全市无缝化是初始数据库中最基础环节,所有数据均按村为单位统计汇总。凡是扫描汇总后图上村辖区总面积与村台账的差值超过该村台账面积1%的,必须有针对性地找出问题(村与村间不重合,多是原来所属的行政区划不同,接连存在争议造成的,要求到实地核实后加以改正),并要求所有的村在打印图上都有检查人及审核人签字,并盖该镇土管所公章认可。变更数据库建设若不涉及行政界线调整,则可省略此步骤。

4.2.2 图斑矢量变更数据检查

(1)根据《技术规范》的要求,非行政区划采集的绝对误差必须小于0.3mm。图斑矢量变更数据采集完成之后,要检查其绝对误差,对超过限差的变更数据应进行修正。因为变更蓝晒图有变形,与初始建库所用的薄膜图不能完全吻合,所以将2023年初始矢量数据引入到变更蓝晒底图上以后,部分矢量数据与变更蓝晒底图之间有偏差。针对该问题,在变更矢量数据采集时的处理原则是:①以2023年初始矢量数据线划为准,尽量保持其不变,然后根据变更蓝晒底图进行矢量数据修改。②如果2023年初始矢量数据图斑线划与变更底图图斑线不吻合,则需要沿着变更图斑线采集数据,应采用“平行位移的”办法,数据采集时可以偏离变更底图图斑线,以保证变更图斑面积尽量准确。

(2)以行政村为单位检查图斑与真实行政界线之间以及图斑与图斑之间的无缝化。①检查变更图斑矢量化数据的属性是否与底图上图斑的属性一致,主要是检查变更图斑的地类代码输入是否正确,图斑编号是否与底图一致,如果因为重号的问题改变了原来的图斑编号,要查看是否按照作业规范的要求进行编号并做了记录。②检查变更过的线状地物的分段是否与底图一致且合理,线状地物的宽度输入是否正确。③检查穿过变更图斑的线状地物的处理是否正确。A.道路遇到70大类的变更图斑时一般应截断处理,遇到其他地类一般应保留;B.沟渠遇到70大类的变更图斑时一般应保留,遇到50类一般应截断处理,遇到其他地类一般予以保留。

4.2.3 背景界线矢量数据检查

因变更数据库建设不涉及行政界线调整,故不需检查。

4.2.4 地物矢量数据检查

(1)根据《技术规范》的要求,非行政区划采集的绝对误差必须小于0.3mm,检查时对超过限差的数据进行修改。

(2)要检查变更地物矢量化是否有丢漏。

4.2.5 阶段性数据成果检查

(1)检查阶段性数据成果是否保存为最新最完整的数据,且进行异地备份。

(2)该阶段数据处理过程中遇到的资料问题和重大的技术问题以及处理方法等是否进行了详细的记载。

4.3 矢量变更数据入库阶段

4.3.1 矢量数据拓扑检查

该步工作由瑞得土地利用现状数据库管理系统 RDLUS 自动完成。如果拓扑检查有错误,返回进行修改,直到拓扑检查没有错误为止。

4.3.2 数据库正确性检查

(1)检查变更数据库中的权属目录、辖区目录、图斑地类、系统分类设置是否符合《技术规范》要求和荆州市实际情况。变更后的图件首先打印出图幅接合表,将89 幅图幅落实到每个检查人员,并在接合表上标明责任人后,由责任人着重检查以下几项内容:①本图幅与周边图幅的接边情况:图幅每边都由本图幅检查人与相邻边检查人进行图幅接边检查,经过核对无误后由双方签字认可;②真实行政界线是否正确:根据村界处的现状地物和背景村界的调绘情况判断真实行政界线的位置,并检查背景村界是否正确;③线状地物是否丢漏:检查是否有丢掉线状地物完全没有进行矢量化和线状地物少做一段不完整现象;④线状地物属性错误:检查农路、公路与沟渠属性是否赋反;⑤图斑无明显界线的划分是否符合现状;⑥图斑号与地类号是否与薄膜图一致,图斑的权属单位、权属性质是否正确;⑦两图核对是否有明显跑线超标的情况等并以图幅为单位做好记录。检查过程中发现变更图纸容易出现以下四类问题:①掉漏应变更图斑;②变更图斑中应保留的岛状图斑未予以保留;③应进行变更的图斑未合并入新图斑;④线状地物取舍有差异。

(2)检查数据库运行是否正常,各种图件是否能正常查询出来,主要有以下图件:①89 标准分幅图;②320 幅村土地利用现状图;③19 幅乡土地利用现状图;④19 幅乡或村行政边界图;⑤全市行政边界及分幅信息结合图。

(3)按照《技术规范》所要求的各类统计报表是否能正常统计并打印出来:①2023年土地利用现状统计台账;②2023年土地利用现状乡统计簿一、二、三;③外单位面积统计表;④本村集体面积统计表;⑤村辖区面积表;⑥乡单位面积汇总表;⑦年度变更平衡表。

(4)从数据库中查询出土地利用现状标准分幅图并输出进行叠加检查,检查其是否与建库资料标准分幅图一致,如果有错、漏,返回“矢量变更数据采集”阶段进行数据修正,然后重新入库。

4.3.3 计算机量算面积与变更调查量算面积的对比检查

通过该项检查工作,分析造成面积差异的可能原因(包括建库资料中存在的问题和数据采集过程中存在的问题)。

(1)按照 《技术规范》 13.2.9 的要求 原始调查辖区总面积与计算机量算面积的误差控制在1%以内;计算机图幅量算面积与理论面积的相对误差控制在0.1%以内。

(2)按照 《技术规范》 14.3.2.8 的要求 原始调查全辖区一级地类面积与计算机量算面积相对误差超过2.5%或者详查辖区总面积与计算机量算面积的相对误差超过1%时,应提交补充说明。

(3)计算机量算面积与调查量算面积存在一定的差异,是由于两者在面积量算方法和量算汇总的过程上都存在很大的不同。但不能排除数据采集过程中产生的错误或者误差造成的面积差异。因此,为了查找出面积问题的真正原因所在,应将面积对比分析细化到以行政村为单位进行。

4.3.4 阶段性数据成果检查

(1)检查输出的乡土地利用现状图和标准分幅土地利用现状图,看图幅上的要素和图面的整饰是否符合《技术规范》的要求。

(2)检查提交的各种统计报表是否符合《技术规范》的要求。

(3)阶段性数据成果是否保存为最新最完整的数据,且进行异地备份。

(4)该阶段数据处理过程中遇到的资料问题和重大的技术问题以及处理方法等是否进行了详细的记载。

5 检查方法与程序

5.1 检查程序

检查流程图如图3所示:

图3 变更数据库检查流程

5.2 检查方法

目前,在“3 S”技术(遥感技术 RS、全球定位系统技术 GPS、地理信息系统技术GIS)未能全面推广应用的条件下,通过以下所述手工比对和数据检验手段的方法能解决单纯航片转绘无法确定村级行政界线等实际问题,更能准确描述图、数、地的现状,确保数据库质量。

须建立完善的质量控制体系,即三检一验制度。每道工序作业员首先进行自检和互检,然后提交专业检查人员,关键环节交由国土资源局检查,三检合格后,方可进入下一环节。从而保证质量,避免出现较大的返工现象。

5.2.1 作业过程中的自检和互检

按照建库作业流程,对于每一个数据单位的数据成果,都要按照《技术规范》的要求经过作业员自检、项目组长检查、数据检查员三次检查,无误后才能保存为阶段性数据成果,提交技术人员检查。

5.2.2 打印、输出相关图形数据进行图形套合检查

通过矢量数据采集阶段对数据的检查修正处理,矢量数据与变更资料的一致性已经基本得到保证,但是并不能保证在数据采集过程中无任何错误或者误差,应打印输出标准分幅图进行叠加检查,进一步排查错误。

(1)数据库建立完成后,查询出每一个村、乡土地利用现状图、标准分幅现状图叠加变更底图进行检查。

(2)打印出标准分幅土地利用现状图,与用于建库的变更蓝晒图进行重叠检查。

检查方法是:用透明的纸打印出89幅标准分幅图,套合变更蓝晒标准分幅图检查,检查方案如下:①村界检查。全面核实村界与相邻单位的位置,确保村界的准确性;每个乡镇针对村界若有变化或台账面积与计算机量算面积相差较大的情况须做出相应的说明。②图斑检查。严格依据台账、2023年变更蓝晒工作底图与打印出的检查图对照检查。注意图斑号是否相符、地类代码是否正确;图斑变更是否无错误无遗漏;按新的地类代码进行转换的情况等,特别涉及原50地类的图斑。③线状地物检查。对照2023年变更图查看有无漏绘或宽度未标注等情况。特别是针对发生变更的图斑,各乡镇了解实地情况的检查人员要注意变更后图斑内的线状地物情况,是否该线状地物仍然存在,另外要在图面上交代清楚线状地物的地类、宽度等。④检查发现的其他有关问题及处理意见。对发现的错误首先要在打印的检查图上以村为单位编号并注明是什么样的错误,并签字确认;其次要将所有错误以村为单位汇总后认真填写在乡镇变更检查错误汇总表上,存档备查。

要求以乡镇为单位,每个村说明检查责任人和检查情况,并对所发现的问题提出修改意见。如实填报内容,由区(分)局负责人签字确认。

5.2.3 通过面积对比分析进行检查

将数据库管理系统RDLUS统计得到的面积成果与建库资料中的面积成果进行对比、分析,尽可能从中找出引起面积差异的问题所在。通过这种方式,可有效地检查出诸如权属性质录入、权属单位录入、地类输入等错误。

(1)对每个行政村的2023年详查面积与计算机统计面积进行对比分析,面积差异较大的,排查原因。

(2)2023年详查统计的国有/集体面积与计算机统计的国有/集体面积不吻合的,对照台账资料,对矢量数据进行修正,尽量保持矢量数据与原始数据的一致性。

6 检查结论和成果

6.1 数据库图形部分

(1)建成数据库的图形部分覆盖了整个荆州市辖区,共89 幅标准分幅图,应无遗漏,数据完整。

(2)标准分幅土地利用现状图与矢量化底图叠加检查,数据采集应无遗漏、无严重跑线现象,符合《技术规范》的限差要求。

(3)输出的标准分幅图图面要素应符合《技术规范》的要求。

(4)乡、村土地利用现状图图面要素和整饰应符合《技术规范》的要求。

(5)图斑变更应正确,无遗漏。

6.2 数据库属性部分

(1)数据库中各图形要素的属性应输入完整。

(2)各项计算机统计面积与2023年变更调查面积的差异应在《技术规范》要求的限差范围以内。

(3)系统应能正确输出要求的各项统计报表。

(4)数据库文件在土地利用现状数据库管理系统 RDLUS 中应运行正常。

6.3 检查成果资料

(1)89幅标准分幅图的图例簿及其补充材料。

(2)变更图斑矢量化记录表。

(3)各种台账面积与计算机汇总面积对比分析表(市区两级辖区汇总面积对比、地类面积对比、变更图斑台账面积与计算机面积对比)。

(4)两套标准分幅检查图。

7 成果应用

检查成果所形成的数字、图表和有关资料对土地数量、质量、分布、权属和利用状况及动态变化,进行了全面记载、整理和分析,可直接实现土地行政管理中最基础的土地统计功能。

其具体的应用可通过在土地更新调查中常见的建设用地增加而耕地只减少的成因实例予以说明:

(1)耕地面积更新调查数比年度变更数减少 原因在于违法用地及历年变更调查遗漏的建设用地因未在年度变更调查中统计,而仍视同为耕地,但在更新调查数据检查工作中按建设用地进行调查统计予以纠正。

(2)建设用地更新调查数比年度变更数增加 原因在于历年违法用地及历年积累的变更调查漏查的建设用地未在年度变更调查进行变更统计,而在更新调查数据检查工作中均进行调查统计予以更正。

其应用技术还可广泛应用土地利用总体规划修编、土地动态监察等土地宏观调控管理工作。

应用数据库检查技术进行更新调查是目前较科学且可行的技术手段,可提高土地利用总体规划修编基数的准确性和确保土地利用现状的现势性。

数据库检查技术为国土资源管理,特别是地籍管理等基础业务性工作创造了新的发展机遇,促使国土管理技术发生质的飞跃,以往传统的技术手段正逐步被新兴的信息系统技术所代替。特别是现状库与规划库之间的同步互动在土地更新调查与管理上的应用,已成为国土资源管理手段上的新热点,将更大程度地提高工作效率,更好地服务于经济建设。

6.1 数据库的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于6.1 数据库,探究6.1数据库技术:了解数据存储与管理的新趋势,数据库检查技术在土地变更调查中的应用研究的信息别忘了在本站进行查找喔。


数据运维技术 » 探究6.1数据库技术:了解数据存储与管理的新趋势 (6.1 数据库)