大数据处理平台及可视化架构设计说明书 版本：1.0 变更记录
目录 1 1. 文档介绍 (3) 1.1文档目的 (3) 1.2文档范围 (3) 1.3读者对象 (3) 1.4参考文献 (3) 1.5术语与缩写解释 (3) 2系统概述 (4) 3设计约束 (5) 4设计策略 (6) 5系统总体结构 (7) 5.1大数据集成分析平台系统架构设计 (7) 5.2可视化平台系统架构设计 (11) 6其它 (14) 6.1数据库设计 (14) 6.2系统管理 (14) 6.3日志管理 (14)
1 1. 文档介绍 1.1 文档目的 设计大数据集成分析平台，主要功能是多种数据库及文件数据；访问；采集；解析，清洗，ETL，同时可以编写模型支持后台统计分析算法。 设计数据可视化平台，应用于大数据的可视化和互动操作。 为此，根据“先进实用、稳定可靠”的原则设计本大数据处理平台及可视化平台。 1.2 文档范围 大数据的处理，包括ETL、分析、可视化、使用。 1.3 读者对象 管理人员、开发人员 1.4 参考文献 1.5 术语与缩写解释
2 系统概述 大数据集成分析平台,分为9个层次，主要功能是对多种数据库及网页等数据进行访采集、解析，清洗，整合、ETL，同时编写模型支持后台统计分析算法，提供可信的数据。 设计数据可视化平台 ,分为3个层次，在大数据集成分析平台的基础上实现大实现数据的可视化和互动操作。
3 设计约束 1.系统必须遵循国家软件开发的标准。 2.系统用java开发，采用开源的中间件。 3.系统必须稳定可靠，性能高，满足每天千万次的访问。 4.保证数据的成功抽取、转换、分析，实现高可信和高可用。
技术向：如何设计企业级大数据分析平台？ 传统企业的OLAP几乎都是基于关系型数据库，在面临“大数据”分析瓶颈，甚至实时数据分析的挑战时，在架构上如何应对？本文试拟出几个大数据OLAP平台的设计要点，意在抛砖引玉。 突破设计原则 建设企业的大数据管理平台（Big Data Management Platform），第一个面临的挑战来自历史数据结构，以及企业现有的数据库设计人员的观念、原则。数据关系、ACID 在关系数据库几十年的统治时期是久得人心，不少开发人员都有过为文档、图片设计数据表，或将文档、图片序列化为二进制文件存入关系数据库的经历。在BDMP之上，我们需要对多种不同的格式的数据进行混合存储，这就必须意识到曾经的原则已经不再适用——One size dosen’t fit all，新的原则——One size fits a bunch. 以下是我列出的一些NoSQL数据库在设计上的模式： 文档数据库：数据结构是类JSON，可以使用嵌入（Embed）或文档引用（Reference）的方式来为两个不同的文档对象建立关系；
列簇数据库：基于查询进行设计，有宽行（Wild Rows）和窄行（Skinny Rows）的设计决策； 索引数据库：基于搜索进行设计，在设计时需要考虑对对每个字段内容的处理（Analysis）。 搜索和查询的区别在于，对返回内容的排序，搜索引擎侧重于文本分析和关键字权重的处理上，而查询通常只是对数据进行单列或多列排序返回即可。 数据存储的二八原则 不少企业在解决海量数据存储的问题上，要么是把关系数据库全部往Hadoop上一导入，要么是把以前的非结构化数据如日志、点击流往NoSQL数据库中写入，但最后往往发现前者还是无法解决大数据分析的性能瓶颈，后者也无法回答数据如何发挥业务价值的问题。 在数据的价值和使用上，其实也存在着二八原则： 20%的数据发挥着80%的业务价值； 80%的数据请求只针对20%的数据。 目前来看，不管是数据存储处理、分析还是挖掘，最完整和成熟的生态圈还是基于关系型数据库，比如报表、联机分析等工具；另外就是数据分析人员更偏重于查询分析语言如SQL、R、Python数据分析包而不是编程语言。 企业大数据平台建设的二八原则是，将20%最有价值的数据——以结构化的形式存储在关系型数据库中供业务人员进行查询和分析；而将80%的数据——以非结构化、原始形式存储在相对廉价的Hadoop等平台上，供有一定数据挖掘技术的数据分析师或数据工
空间规划（多规合一）数据库 一、概念内涵 数据库通俗的讲就是存储数据的仓库，那么空间规划数据库就是在计算机、服务器等硬件上存储的相关地理空间数据的总和。我们建立空间规划数据库就是为了将各类规划数据、图纸、地理信息等数据转化为计算机语言后，合理的、有顺序的存放在相关硬件介质上。就好比在仓库内分门别类的将物品存放。这样的好处是数据库调取内容方便、快捷，并且具有较高的易扩展性和独立性。空间规划数据库是后续建设空间规划信息平台的核心，因此空间规划数据库的建设是一项至关重要的工作。 空间规划信息平台的使用需要以空间规划数据库为基础，数据库是信息平台的内容支撑，信息平台的使用要以数据库的调用为前提。因此空间规划数据库的建设是搭建空间规划信息平台的一项基础性也是一项核心工作，是连接空间规划成果与信息平台的纽带。 二、提出背景 党的“十八大”提出“五位一体”总体布局，并首次将生态文明建设纳入国家总体战略。2015年9月，中共中央国务院颁发《生态文明体制改革总体方案》提出生态文明建设八项措施，其中明确提出要构建以空间治理和空间结构优化为主要内容，全国统一、相互衔接、分级管理的空间规划体系。2017年1月，中办、国办印发了《省级空间规划试点方案》，开展9个省级空间规划试点，总体要求是编制统一的省级空间规划，为实现“多规合一”、建立健全国土空间开发保护制度积累经验、提供示范。空间规划是国家空间发展的指南、可持续发展的空间蓝图，是各类开发建设活动的基本依据。推进空间规划，实现“多规合一”
已成为党和国家当前一项重要工作，并放在突出位置加紧安排部署并持续推进。 《省级空间规划试点方案》明确六项主要任务，其中之一是要搭建基础数据、目标指标、空间坐标、技术规范统一衔接共享的空间规划信息管理平台。《国家信息化发展战略纲要》提出要着力增强国家信息化发展能力，着力提高信息化应用水平，着力优化信息化发展环境，推进国家治理体系和治理能力现代化。《国务院办公厅关于印发政务信息系统整合共享实施方案的通知》要求加快推动政务信息系统整合共享，建设“大平台、大数据、大系统”。《住房城乡建设部关于城市总体规划编制试点的指导意见》提出各试点城市要在新一版城市总体规划编制时，同步完成空间规划信息平台的建设。 三、建设流程 空间规划数据库的建设包括资料收集、数据转换、数据编辑、数据质检、数据入库，如下图所示。 资料收集数据转换数据编辑数据质检数据入库各种图形、图像、文本数据，规划成果数据。 针对各部门规划数据、各种类型的数据、不同坐标系的数据，进行必要的数据转换工作，统一坐标系统并尽量保持原始数据的信息量。 对空间数据进行数据的编辑和数据属性表的录入。 针对在数据转换中出现的各种问题，如属性表字段问题，空间实体的拓扑问题，进行修改和修正。 在进行完上述工作后，把满足多规合一一张图标 准数据库的数据导入数据库。 空间规划数据库建库过程图
国土空间规划体系下的“多规合一”分析与展望 摘要：目前我国城市规划不断发展，在这个过程中，运用“多规合一”可以更好地实现国土空间规划。在对空间进行规划时，不仅推动了城市空间的规划和发展，也利用了多学科和其他的形式进行有效的互动，这样不仅完善了城乡规划和建设，更好地实现了城乡一体化进程，也为乡镇振兴和发展起到非常积极的作用，从而推动了我国现代化文明建设的发展。 关键词：国土空间；规划体系；多规合一 1、前言 我国在城乡规划和立法方面，得到了飞跃性发展，在城乡规划方面，已经面向了全域的范围，所以人们更加广泛地关注城乡统筹和区域一体化问题。近年来，随着不同部门之间的规划，使得对空间的管控力度不断增强，全国在实行多规合一，消除空间管控冲突，有效提升审批效率上已经取得了一定的成效。 2、内涵分析 在我国的城乡规划、土地利用总体规划以及相关规划实施过程中，通过多年的整合，有效地呈现了国民经济发展成果，使得土地的利用和规划更加合理，也使得社会发展规划更加科学。然而，由于法律依据、指标体系、规划范围及期限，实施管理主体的不同，会存在规划冲突及规划盲点，在实施过程中不仅造成了社会资源的浪费，也降低了空间治理的效率，影响了社会经济健康发展。目前
“多规合一”可以有效地将国民经济和社会发展规划、城乡规划、土地利用规划以及生态环境保护等多个规划有效地融合，同时在实际工作中，也破除了技术和管理以及制度体系方面的障碍。当前在技术体系方面，由于缺乏一定的数据基础，使得用地标准和分类方面存在一定的差异，导致了空间管控方面的差异。2013年11月，十八届三中全会提出完善城镇化健康发展体制机制，优化城市空间结构和管理格局；2014年5月国家发改委指出推动经济社会发展规划、城乡规划、土地利用规划、环境规划“多规合一”；2016年2月，国务院提出了实现一张蓝图干到底的规划目标，再到今天的机构改革，这整个过程就是多个目标的规划和协调，而且每次规划都是多规模的升级。所以多规合一不是单独的新编规划，也不是比较简单的空间规划，重点是协调和有效消除空间冲突，是有效实现蓝图的基础性工作，也是融入空间整体规划，以及全过程常态化的工具。这个过程有效地驱动了城市发展进程。 3.对多规合一的发展阶段分析 3.1初级阶段分析 初级阶段主要是上个世纪八十年代到两千年之间，这个时期的土地规划，主要依据的是《土地管理法》等法律法规、国民经济发展和社会发展规划以及土地利用现状等，明确建设用地的标准，对基本农田进行规划。环保部门在编制环境保护规划时，也要依据法律法规及土地承载能力、污染物现状等，提出生态环境保护及污染物防治等目标及措施，给各类开发和建设活动提供一个控制底线。而
大数据处理综合处理服务平台的设计与实现 （广州城市职业学院广东广州510405） 摘要：在信息技术高速发展的今天，金融业面临的竞争日趋激烈，信息的高度共享和数据的安全可靠是系统建设中优先考虑的问题。大数据综合处理服务平台支持灵活构建面向数据仓库、实现批量作业的原子化、参数化、操作简单化、流程可控化，并提供灵活、可自定义的程序接口，具有良好的可扩展性。该服务平台以SOA为基础，采用云计算的体系架构，整合多种ETL技术和不同的ETL工具，具有统一、高效、可拓展性。该系统整合金融机构的客户、合约、交易、财务、产品等主要业务数据，提供客户视图、客户关系管理、营销管理、财务分析、质量监控、风险预警、业务流程等功能模块。该研究与设计打破跨国厂商在金融软件方面的垄断地位，促进传统优势企业走新型信息化道路，充分实现了“资源共享、低投入、低消耗、低排放和高效率”，值得大力发展和推广。 关键词：面向金融，大数据，综合处理服务平台。 一、研究的意义 目前，全球IT行业讨论最多的两个议题，一个是大数据分析“Big Data”，一个是云计算“Cloud Computing”。
中国五大国有商业银行发展至今，积累了海量的业务数据，同时还不断的从外界收集数据。据IDC（国际数据公司）预测，用于云计算服务上的支出在接下来的5 年间可能会出现3 倍的增长，占据IT支出增长总量中25%的份额。目前企业的各种业务系统中数据从GB、TB到PB量级呈海量急速增长，相应的存储方式也从单机存储转变为网络存储。传统的信息处理技术和手段，如数据库技术往往只能单纯实现数据的录入、查询、统计等较低层次的功能，无法充分利用和及时更新海量数据，更难以进行综合研究，中国的金融行业也不例外。中国五大国有商业银行发展至今，积累了海量的业务数据，同时还不断的从外界收集数据。通过对不同来源，不同历史阶段的数据进行分析，银行可以甄别有价值潜力的客户群和发现未来金融市场的发展趋势，针对目标客户群的特点和金融市场的需求来研发有竞争力的理财产品。所以，银行对海量数据分析的需求是尤为迫切的。再有，在信息技术高速发展的今天，金融业面临的竞争日趋激烈，信息的高度共享和数据的安全可靠是系统建设中优先考虑的问题。随着国内银行业竞争的加剧，五大国有商业银行不断深化以客户为中心，以优质业务为核心的经营理念，这对银行自身系统的不断完善提出了更高的要求。而“云计算”技术的推出，将成为银行增强数据的安全性和加快信息共享的速度，提高服务质量、降低成本和赢得竞争优势的一大选择。
国土空间规划知识点梳理 一、政策时间轴线 2014.08国家发改委等四部联合下发《关于开展市县“多规合一试点工作的通 知”》 2019.05.23《关于建立国土空间规划体系并监督实施的若干意见》 2019.06.02《自然资源部关于全面开展国土空间规划工作的通知》 2019.06.04《自然资源部2019年立法工作计划》 2019.12.31《自然资源部办公厅关于国土空间规划编制资质有关问题的函》 2020.01.17自然资源部办公厅关于印发《省级国土空间规划编制指南》（试 行）的通知 二、主要工作内容及要求 各级自然资源主管部门要将思想和行动统一到党中央的决策部署上来，按照《若干意见》要求，主动履职尽责，建立“多规合一”的国土空间规划体系并监督实施。按照自上而下、上下联动、压茬推进的原则，抓紧启动编制全国、省级、市县和乡镇国土空间规划（规划期至2035年，展望至2050年），尽快形成规划成果。部将印发国土空间规划编制规程、相关技术标准，明确规划编制的工作要求、主要内容和完成时限。 (一)编制时限要求 2020 目标 基本建立国土空间规划体系；基本完成市县以上各级国土空间规划编制 2025 目标 形成以国土空间规划为基础，以统一用途管制为手段的国土空间开发保护制度
2035 目标 基本形成富有竞争力和可持续发展的国土空间格局 (二)编制要求 各地不再新编和报批主体功能区规划、土地利用总体规划、城镇体系规划、城市（镇）总体规划、海洋功能区划等。已批准的规划期至2020年后的省级国土规划、城镇体系规划、主体功能区规划，城市（镇）总体规划，以及原省级空间规划试点和市县“多规合一”试点等，要按照新的规划编制要求，将既有规划成果融入新编制的同级国土空间规划中。 对现行土地利用总体规划、城市（镇）总体规划实施中存在矛盾的图斑，要结合国土空间基础信息平台的建设，按照国土空间规划“一张图”要求，作一致性处理，作为国土空间用途管制的基础。一致性处理不得突破土地利用总体规划确定的2020年建设用地和耕地保有量等约束性指标，不得突破生态保护红线和永久基本农田保护红线，不得突破土地利用总体规划和城市（镇）总体规划确定的禁止建设区和强制性内容，不得与新的国土空间规划管理要求矛盾冲突。今后工作中，主体功能区规划、土地利用总体规划、城乡规划、海洋功能区划等统称为“国土空间规划”。 按照“管什么就批什么”的原则，对省级和市县国土空间规划，侧重控制性审查，重点审查目标定位、底线约束、控制性指标、相邻关系等，并对规划程序和报批成果形式做合规性审查。 三、成果内容要求 本次规划编制统一采用第三次全国国土调查数据作为规划现状底数和底图基础，统一采用2000国家大地坐标系和1985国家高程基准作为空间定位
城市空间规划的“多规合一”与协调机制王维 发表时间：2018-12-19T15:46:58.147Z 来源：《建筑学研究前沿》2018年第25期作者：王维 [导读] 本文基于“多规合一”内涵和工作特点的分析，并提出一些个人观点，以供参考。 库尔勒开拓规划设计研究院新疆库尔勒 841000 摘要：快速城镇化伴随信息化时代的到来，对城市空间管理的精确度和部门之间的协调配合提出了更高要求，城市空间的分部门管理可以使管理更为精细化和专业化，符合社会化分工的要求。目前各地纷纷开展“多规合一”工作，工作中部门之间、部门规划之间的协调和衔接是工作中的重要环节。本文基于“多规合一”内涵和工作特点的分析，并提出一些个人观点，以供参考。 关键词：“多规合一”；工作协调机制；空间协调工作组织； 1“多规合一”内涵 “多规”的差异具有其本源原因。以国民经济和社会发展规划、城乡规划、土地利用总体规划为例，无论是从规划内涵、规划法理基础、规划理念，还是从规划体系、技术内容和规划期限，以及规划审批、实施方式和监督检查手段，“三规”均存在差异。这种本源差异导致了“多规”的空间布局差异在我国普遍存在。 2 “多规合一”空间协调工作组织 2.1纵向工作组织 “多规合一”工作纵向涉及省市县，横向涉及发改、国土、规划、环保等多部门，协调内容涵盖全域城乡空间，包括建设空间与非建设空间，地块和图斑数量巨大，建立强有力的规划协调工作组织对顺利推进工作具有重要的意义。协调工作机构一般包括专门议事协调机构、临时议事协调机构和部门联合办公等多种方式。从各地的“多规合一”实践来看，应成立由主要领导牵头的工作领导小组――工作办公室――工作专责小组的多层级的协调组织机构，下一行政层级应参照上层级设定相应的组织结构，及时协调解决相关问题，共同推进相关工作。 2.2横向工作分工 受部门利益的影响，不同规划部门从各自的角度争夺空间管控的主导权，很多地方行政长官经历了这样的变化：90年代规划局局长重要，2000年后国土局局长重要，现在发改委主任重要。目前，各个规划部门争坐龙头的现象依旧存在。国民经济和社会发展规划作为国家加强和改善宏观调控的重要手段，要求其他规划均要以该规划为依据进行编制；城市规划充分利用其在空间布局上的优势，进一步在城市发展战略、城市发展定位、资源保护等方面扩大其话语权，强化其在城乡建设方面的龙头地位；土地利用总体规划在将重点放在耕地与基本农田保护的基础上，进一步强化土地资源的保护与综合利用，强调建设用地的节约集约利用，国土部门通过严把土地“闸门”使得土地利用总体规划地位凸显。规划部门的“龙头”之争是规划与规划之间出现矛盾的根本原因，争做“龙头”必定在规划主导内容上强调“以我为本”，导致各类规划自成体系，规划与规划之间的衔接存在困难。 3“多规合一”空间协调技术 3.1用地分类标准衔接 结合覆盖全域的城乡规划用地分类和土地利用规划分类的异同点，对土地利用规划分类标准进行对接，明确建设用地与非建设用地的内涵，将城乡规划用地分类中的城乡居民点建设用地、区域交通设施用地、区域公用设施用地、特殊用地、采矿用地以及其他建设用地定义为城乡规划建设用地，将土地利用规划分类中的城乡建设用地、交通水利用地、其他建设用地定义为土地利用总体规划建设用地，城乡规划的非建设用地与土地利用总体规划的农用地及其他土地对照，实现两者详细分类的一一对应，为规划之间的对照分析搭建土地利用分类衔接平台，确保土地分类标准的衔接。 3.2空间坐标体系转换 “多规合一”工作所需要的基础资料主要包括规划、发改、国土、环保、林业等部门的规划数据、基础地理数据、审批数据等。其中，城乡规划成果与规划审批数据一般采用地方城建坐标，土地利用总体规划成果与国土审批数据采用西安80坐标，发改委及其他部门相关数据因基础不同采用坐标不一。“多规合一”基础数据坐标的不统一，导致各类规划数据、行政审批数据之间难以进行精确的对照比较。因此，面向地方城市建设管理，“多规合一”工作应建立西安80坐标系、北京54坐标系与地方城建坐标系的转换参数，搭建坐标转换平台，实现多个坐标系的实时转换。 3.3控制线体系设置 “多规合一”工作突出运用底线思维，抓住城市空间管理中建设与保护的核心问题，建立了由生态控制线、建设用地规模控制线、建设用地增长边界控制线和产业区块控制线构成的控制线体系。在广州市基础上，厦门市“多规合一”创新设置了结构控制线和用地控制线，将生态控制线和建设用地增长边界设置为结构控制线，以两者区分区域是否进行空间开发。结合大量的“多规合一”工作实践，通过控制线衔接不同规划的用地分类表达，形成引导发展、控制发展、强化保护等不同类型的管制区域，并确保相同管制区的用地内涵一致。 3.4信息联动平台建设 完善“多规合一”工作协调机制，重要内容之一是建设形成“多规合一”的信息联动平台。建设“多规合一”信息管理平台，其目标是建立“多规”信息管理汇通机制，实现部门间的信息共享，支持“多规合一”过程中的差异分析处理，消除规划矛盾，推动“多规”信息的共建、共享、共用，推动各部门业务的协同办理。远期将涵盖城乡规划、重大项目、土地资源、环境保护、交通水利等涉及空间的信息要素叠加，建成统一的信息联动平台，便于发改、规划、国土、建设、环保、水利、交通等部门审批过程中及时沟通和协同，为“智慧城市”建设、实现“多规合一”、城市高效管理提供信息技术支撑。 4“多规合一”空间协调运行 4.1建立联动修改机制，推动法定规划落实 在完成“多规合一”建设用地规模边界、建设用地增长边界、生态保护边界等用地边界合一的基础上，通过“多规合一”控制线方案与现行
空间规划（多规合一）三区三线 一、概念内涵 “三区”指生态、农业、城镇三类空间；“三线”指的是根据生态空间、农业空间、城镇空间划定的生态保护红线、永久基本农田和城镇开发边界三条控制线。 城镇空间：是指以城镇居民生产生活为主体功能的国土空间，包括城镇建设空间和工矿建设空间，以及部分乡级政府驻地的开发建设空间。 农业空间：是指以农业生产和农村居民生活为主体功能，承担农产品生产和农村生活功能的国土空间，主要包括永久基本农田、一般农田等农业生产用地，以及村庄等农村生活用地。 生态空间：是指具有自然属性、以提供生态服务或生态产品为主体功能的国土空间，包括森林、草原、湿地、河流、湖泊、滩涂、荒地、荒漠等。 城镇开发边界：是指为合理引导城镇、工业园区发展，有效保护耕地与生态环境，基于地形条件、自然生态、环境容量等因素，划定的一条或多条闭合边界，包括现有建成区和未来城镇建设预留空间。 永久基本农田：是指按照一定时期人口和社会经济发展对农产品的需求，依法确定的不得占用、不得开发、需要永久性保护的耕地空间边界。 生态保护红线：是指在生态空间范围内具有特殊重要生态功能、必须强制性严格保护的区域，包括自然保护区等禁止开发区域，具有重要水源涵养、生物多样性维护、水土保持、防风固沙等功能的生态功能重要区域，以及水土流失、土地沙化、盐渍化等生态环境敏感脆弱区域，是保障和维护生态安全的底线和生命线。 二、划定技术路线
“三区三线”划定是《省级空间规划试点方案》确定的以主体功能区规划为基础，统筹各类空间性规划，推进“多规合一”的战略部署，是《省级空间规划试点方案》的总体要求和主要任务。主体功能区规划是“三区三线”划定的基础，“两个评价”是对国土空间本底条件的反映，是“三区三线”划定的技术依据。 其具体技术路线简要如下： 1、三线划定 （1）生态保护红线划定 第1步：现状资料搜集。第2步：明确划定范围。 第3步：确定红线边界。第4步：划定生态保护红线。 生态保护红线划定技术路径图 （2）城镇开发边界划定 第1步：资料收集。第2步：用地条件评价。 第3步：城镇规模确定。第4步：城镇开发边界规模确定。
空间规划改革与“多规合一” 一、空间规划的现实及问题 规划是为实现定目标而预先安排行动步骤并不断付诸实践的过程。空间规划是对国土空间系统统筹的安排，是公共管理部门实施国土空间的管理手段和方法。规划伴随着人类产生及经济社会的发展，始终前瞻远谋、走在前沿，约束、规并指导发展。 科学发展，规划先行。由于规划本身的特性要求，空间规划一贯以严肃、严谨、科学、法定、连续、系统、刚性、权威等个性特征为自身标签和社会认同。但近年以来，随着市场经济深入发展，经济社会飞速发展，城镇化进程加速，规划的本能严重退化，规划的个性日渐缺失，规划任性和管理随意问题严重且呈蔓延之势。 一是规划繁杂且不协调、不衔接、不统一问题突出。我国现行规划类型众多，涉及到空间资源利用的规划包括国民经济和社会发展规划、主体功能区规划、城乡规划、土地利用总体规划、生态功能区划、环境保护规划等多项规划，在同一空间存在较大差异甚至相互矛盾。规划的不协调、不衔接、不统一已严重削弱了规划的科学性和权威性，甚至造成空间管理无序、土地资源浪费、环境保护失控等问题。 二是规出多门、各自为政，协调统一管理难的问题突出。现行的各项空间规划体系 “条块分割”现象严重，职能被分散到几个行政主管部门体系中。从地方层面看，各规划在各自的行政体系架构中展开，均采取“政府负责、部门落实”的垂直管理方式，分别对各自的规划工作进行管理，使得出现“条条”协调不力、“块块”关系混乱的局面，规划协调实 施难以落实。 三是规划容边界模糊，指标、标准等技术不兼容问题突出。规划职能边界模糊，容交叉重叠，也造成部门职责难以厘清。国民经济和社会发展规划、主体功能区规划、城乡规划、土地利用总体规划等各项空间规划发展历程不一、关注的侧重点不尽相同，使得各自编制的出发点、技术路线均有差异，从而导致目标和结果差异明显，给指导实践带来困惑。 四是规划视同“花瓶”，有法不依、有规不执问题突出。我国规划管理随意、刚性 不足、法定性不强、连续性缺失已成顽疾。公共管理部门受发展观、政绩及考核导向等多种因素影响，导致规划贯彻执行及管理随意任性，政府换届规划随之换届，领导变化思路随之变化。同时规划虽然均经历的相关法规法定程序，但在权利和法律之间，利益与法规之间，往往权利任性至上，将规划束之高阁，计划赶不上变化，规划赶不上调整。 从十八届三中全会关于全面深化改革若干重大问题的决定，到全面小康社会、全面深化改革、全面依法治国、全面从严治党，我国经济社会发展进入了新常态、新阶段，深化推进规划体制改革，加快规划立法，建立空间规划体系，推动规划体系及管理方式创新，探索 实施“多规合一”，确保空间规划权威性、严肃性、连续性已成为我国规划领域的迫切任务。
如何设计企业级大数据分析平台？ 传统企业的OLAP几乎都是基于关系型数据库，在面临“大数据”分析瓶颈，甚至实时数据分析的挑战时，在架构上如何应对？本文试拟出几个大数据OLAP平台的设计要点，意在抛砖引玉。 突破设计原则 建设企业的大数据管理平台（Big Data Management Platform），第一个面临的挑战来自历史数据结构，以及企业现有的数据库设计人员的观念、原则。数据关系、ACID在关系数据库几十年的统治时期是久得人心，不少开发人员都有过为文档、图片设计数据表，或将文档、图片序列化为二进制文件存入关系数据库的经历。在BDMP之上，我们需要对多种不同的格式的数据进行混合存储，这就必须意识到曾经的原则已经不再适用——One size dosen’t fit all，新的原则——One size fits a bunch. 以下是我列出的一些NoSQL数据库在设计上的模式： 文档数据库：数据结构是类JSON，可以使用嵌入（Embed）或文档引用（Reference）的方式来为两个不同的文档对象建立关系； 列簇数据库：基于查询进行设计，有宽行（Wild Rows）和窄行（Skinny Rows）的设计决策；索引数据库：基于搜索进行设计，在设计时需要考虑对对每个字段内容的处理（Analysis）。搜索和查询的区别在于，对返回内容的排序，搜索引擎侧重于文本分析和关键字权重的处理上，而查询通常只是对数据进行单列或多列排序返回即可。 数据存储的二八原则 不少企业在解决海量数据存储的问题上，要么是把关系数据库全部往Hadoop上一导入，要么是把以前的非结构化数据如日志、点击流往NoSQL数据库中写入，但最后往往发现前者还是无法解决大数据分析的性能瓶颈，后者也无法回答数据如何发挥业务价值的问题。 在数据的价值和使用上，其实也存在着二八原则： 20%的数据发挥着80%的业务价值； 80%的数据请求只针对20%的数据。 目前来看，不管是数据存储处理、分析还是挖掘，最完整和成熟的生态圈还是基于关系型数据库，比如报表、联机分析等工具；另外就是数据分析人员更偏重于查询分析语言如SQL、R、Python数据分析包而不是编程语言。 企业大数据平台建设的二八原则是，将20%最有价值的数据——以结构化的形式存储在关系型数据库中供业务人员进行查询和分析；而将80%的数据——以非结构化、原始形式存储在相对廉价的Hadoop等平台上，供有一定数据挖掘技术的数据分析师或数据工程师进行下一步数据处理。经过加工的数据可以以数据集市或数据模型的形式存储在NoSQL数据库中，这也是后面要讲到的“离线”与“在线”数据。 理解企业的数据处理需求 数据库到数据仓库，是事务型数据到分析型数据的转变，分析型数据需要包括的是：分析的主题、数据的维度和层次，以及数据的历史变化等等。而对大数据平台来说，对分析的需求会更细，包括： 查询：快速响应组合条件查询、模糊查询、标签 搜索：包括对非结构化文档的搜索、返回结果的排序 统计：实时反映变化，如电商平台的在线销售订单与发货计算出的库存显示 挖掘：支持挖掘算法、机器学习的训练集 针对不同的数据处理需求，可能需要设计不同的数据存储，还需要考虑如何快速地将数据复
湖南省市县级“多规合一”信息平台 建设指南 湖南省住房和城乡建设厅 长沙市规划信息服务中心 2018年5月
1 总则 1.1 编制目的 为全面贯彻落实党的十九大精神，深入落实中央城镇化工作会议、中央城市工作会议精神，及中央关于空间规划改革、“多规合一”的安排部署，指导我省各市（州）、县（市）开展“多规合一”信息平台建设工作，促进空间治理体系和治理能力现代化，制定本指南。 1.2 适用范围 适用于湖南省各市（州）、县（市）“多规合一”信息平台的建设，为“多规合一”的规划编制、数据建库、成果管理、应用开发及管理运维工作提供技术指导。 2 建设要求 2.1 建设目标 近期目标是通过信息平台整合各类空间性规划和相关规划，做到“发展目标、用地指标、空间坐标”相一致，形成城乡统筹、全域覆盖、要素叠加的一本规划、一张蓝图，促进相关部门信息共享交互，实现项目协同审批，提高行政服务效能。中期通过对城市规划建设管理信息资源的全面感知、全面整合、全面协同，提高城市管理信息化水平。远期集成大数据、云计算、移动互联、人工智能等新技术，促进智慧城市建设，提升城市治理水平。 其中，近期建设目标具体为：
全域现状数字化：摸清城乡发展现状，汇集相关部门数据，以基础地理信息为底图，叠加人口、土地、建筑、经济、社会、环境资源、城市运行等数据，制作全域数字化现状图，并建立更新机制。 空间管控精准化：统一空间参考、数据基础、差异协调规则，开展国土空间开发适宜性评价、资源环境承载能力评价，落实主体功能区战略，精确划定各类空间管制分区、控制线，优化空间格局和功能布局，加强资源要素的精准配置，提升空间治理能力。 项目审批协同化：实现信息共享、项目生成、空间协调、协同审批，各职能部门相关审批业务在线协同运行，最大程度利企便民，提高政务管理和服务水平。 实施监督动态化：辅助行政监管和社会监督，建立利用卫星遥感监测等多种手段共同监督规划实施的工作机制；基于规划核心指标，建立评估考核模型，支持开展规划实施“一年一体检、五年一评估”。 2.2 建设原则 统一标准、互联互通：建立“多规合一”数据资源、服务应用、基础环境、管理运行等标准，保障信息平台统一管理、功能交互、信息互通、动态更新。 统筹建设、共建共享：落实政务信息化工程相关规划，整合各部门相关信息系统和数据资源，建立物理分散、逻辑集中、资源共享的大数据，构建深度应用、上下联动、纵横协同的大平台。 整体设计、分步实施：立足城乡空间治理全局，坚持问题导向，做好顶层设计；根据管理工作特点和实际需求，突出重点、分步实施，确保信息平台建设有序推进。
1.1.多维大数据平台设计 1.1.1.大数据关联分析设计 1.1.1.1.概述 大数据基础平台承载了公安数据的管理，为上层公安应用提供数据支撑。 1.1.1. 2.数据关联查询 全文检索引擎是分布式的全文检索引擎，可提供对实体，关系，文档的全库实时检索。基于各类汇聚、整合形成的数据资源提供各类数据查询应用，系统为提供实体、关系、档案等全文查询，将查询结果的明细级数据的显示，并不涉及具体数据型态的图形化应用，相关应用可由各警种业务系统根据实战需要自行研制。 综合检索服务 通过输入身份证、号码、姓名、案件关键字等内容，实现海量数据的全要素检索，系统将查询结果明细数据的列表展示，其中涉密数据将进行脱敏展示。 关联搜索 系统为了便于检索，建立动态电子档案，实现数据汇聚实时动态更新，展示人员基本信息、活动轨迹和各类关联信息。通过简单要素查询出多维度信息，包括人员档案、车辆信息、出行信
息、轨迹信息以及关系人关系等。 多要素关联查询 提供带有复杂查询条件的关键词检索，如：逻辑组合检索（与、或、非）、通配检索、同义词查询、渐进检索、词根检索、关键词检索、分类检索、二次检索（渐进检索或在结果中检索）、时间段检索、年龄检索、姓名拼音检索等多种专业检索方式。 全文动态档案查询 全文动态档案查询，提供基于全库数据的实时、动态的完整档案查询 同时为了便于检索，建立动态电子档案，实现数据汇聚时实时动态更新，展示人员基本信息、活动轨迹和各类关联信息。通过多维度展示人员档案，包括基本信息、车辆信息、出行信息、轨迹信息等。 电子档案的具体功能如下： 1）重点人电子档案优化 传统的重点人员电子档案，仅实现了一人一档，在可维护性、和内容动态关联性方面存在缺陷，电子档案再造，实现的是重点人员档案库、关联内容库等自动更新，并动态填充至电子档案库，可针对省部级、本级重点人员电子档案进行人工、自动补充、纠错、编辑实现动态实时更新，增强重点人员管控的实时
公安大数据警务大数据分析系统方案设计(图文) 产品推荐1:智慧消防:水源采集系统方案 产品推荐2:激光投影:最佳的大屏解决方案产品推荐3:智慧展厅:综合应用解决方案 物联网与大数据作为信息时代的技术产物，受到社会各界的广泛关注，如何利用物联网技术与大数据分析算法提升办案效率，已成为各国警方分析研究的课题。本文构想了一套基于物联网技术的警务大数据分析模型，意在探讨该套模型在实际应用中的可行性，以及可能遇到的困难。背景介绍警察作为一个国家的重要机构，肩负着维护社会稳定，打击违法犯罪的重要职责，面对着越来越狡猾的犯罪分子，警方需要有效提升预防和打击犯罪的能力，单靠警员人工破案已无法满足社会需求，因此国家提出“科技强警”的发展战略，借助高科技装备、信息化手段帮助警方打击违法犯罪，“金盾工程”更是将公安信息化建设推向了高潮。然而，随着信息时代的到来，犯罪分子作案手段越发多变、隐蔽，传统的信息化手段已很难帮助警方快速分析研判。 近年来，“物联网”、“大数据”越来越被人们所熟知，著名的“谷歌汽车”、“大数据流感预测”更是成为物联网技术与大数据预测应用的经典案例。这两个在几年前还不为人知的技术名词，仿佛是在一夜之间闯入了我们的生活，将人们拉
入了科幻电影中的场景。那什么是“物联网”、“大数据”呢？物联网技术是利用互联网等通信技术手段把传感器、控制器、机器、人与物通过新的方式联系在一起，形成人与物、物与物互联，实现信息化，远程管理控制和智能化的网络。 作为物联网之后IT行业又一大颠覆性的技术革命，大数据是信息爆炸时代的产物，人们每天上网、交流、购物、订票……产生了数以亿级的数据，而这项技术的意义并不在于掌握了庞大的数据信息，而在于对这些含有意义的数据进行专业化的预测处理。 警方分析研判的关键是挖掘人员、组织、案（事）件、阵地以及物品五要素之间的关联关系，如果能够借助物联网技术获取五要素信息，那么将大大提升警方获取线索信息的效率，同时也能避免人为错误。而面对庞杂的线索信息，则可以借助大数据分析技术实现深入，高效的挖掘分析，进而快速找出五要素之间的关联关系。 本文试图探讨构建一套基于物联网技术的警务大数据分析 模型，借以提高警方线索采集和分析研判过程的准确性和效率。 技术架构基于物联网技术的警务大数据分析模型是一种利 用大数据分析算法对海量警务物联网线索信息进行深度挖 掘分析的系统模型。它包括了物联感知层、数据传输层、数据分析层以及数据展示层，同时，它还要与现有的公安信息
大数据智能催收平台需求设计书 众益天成 金融科技（大连）有限公司
2018年3月修改历史
目录 第一章业务背景 (5) 第二章平台目标 (5) 2.1 总体目标 (5) 2.2 整体平台架构图 (6) 2.3 业务服务总览....................................... 错误!未定义书签。 2.3.1 资产委托服务................................... 错误!未定义书签。 2.3.2 催收方服务..................................... 错误!未定义书签。 2.3.3 有偿服务....................................... 错误!未定义书签。 2.4本期目标............................................. 错误!未定义书签。第三章本期建设内容. (7) 3.1 系统管理模块 (7) 3.1.1 账户权限 (7) 3.1.2 参数配置 (7) 3.1.3 策略配置 (7) 3.2 案件管理模块 (7) 3.2.1 案件管理 (8) 3.2.2 跟踪管理 (8) 3.2.3 还款管理 (8) 3.2.4 逾期管理....................................... 错误!未定义书签。 3.2.5 坏账管理....................................... 错误!未定义书签。 3.3 催收管理模块 (8) 3.3.1 外呼管理 (9) 3.3.2 短息管理 (9) 3.3.3 信函管理....................................... 错误!未定义书签。 3.3.4 外访管理 (9) 3.3.5 法务管理 (9) 3.3.6 委外管理 (9) 3.3.7 综合管理 (9) 3.4 数据报表模块 (9) 3.4.1 还款报表....................................... 错误!未定义书签。 3.4.2 逾期报表....................................... 错误!未定义书签。 3.4.3 坏账报表....................................... 错误!未定义书签。 3.4.4 内催报表 (10) 3.4.5 委外报表 (10) 3.4.6 财务报表....................................... 错误!未定义书签。第四章技术环境. (10)
城市空间规划的“多规合一”与协调机制 发表时间：2017-07-12T14:29:35.510Z 来源：《建筑知识》2017年12期作者：燕三义[导读] 城镇化的快速发展和信息时代的到来，社会发展对城市规划管理的要求越来越高，人类对城市空间的需求越来越多。（合肥市规划信息中心安徽合肥 230000）【摘要】城镇化的快速发展和信息时代的到来，社会发展对城市规划管理的要求越来越高，人类对城市空间的需求越来越多，对城市空间 管理部门之间的协调配合提出了新的要求。城市空间进行分部门管理可以提升管理的专业化和精细化，是社会分工化的必然趋势。当前政府相关部门推行的“多规合一”的工作，协调机制在其工作的开展中有重要的推动作用。协调机制能够有效的促进部门之间的沟通与合作，推动“多规合一”工作的顺利开展。【关键词】“多规合一”；城市空间；规划；协调机制【中图分类号】TU984.1 【文献标识码】A 【文章编号】1002-8544（2017）12-0001-02 城市规划是研究城市的未来发展、城市的合理布局和综合安排城市各项工程建设的综合部署，是一定时期内城市发展的蓝图，是城市管理的重要组成部分，也是城市建设和管理的依据。“多规合一”的城市规划理念科学、生态、平衡的对城市经济结构、空间结构、社会结构发展进行规划，促进城市综合管理工作的推行。协调机制通过促进城市规划管理各部门之间的协调合作，进一步的推进“多规合一”工作的长效开展。 1.城市规划的“多规合一”内涵 “多规合一”指的是在一级政府一级事权下，为了促进国民经济和社会发展规划、城乡规划、环境保护规划、土地利用规划等各类规划的衔接，确保“多规”确定的保护性空间、开发边界、城市规模等重要空间参数一致，并在统一的空间信息平台上建立控制线体系，以实现优化空间布局、有效配置土地资源、提高政府空间管控水平和治理能力的目标。城市规划在城市发展中起着战略引领和刚性控制的重要作用，做好城市规划，是任何一个城市发展的首要任务。现阶段国家所提倡的“多规合一”城市规划理念，旨在促进城市经济发展与生态平衡之间的有效协调。 2.“多规合一”的工作要点 “多规合一”的工作要点主要是成立协调机构。为了有效推进“多规合一”工作的开展，需要成立“多规合一”工作领导小组，政府和党委相关部门领导为成员，成立协调机构。协调机构办公室应与牵头部门合署办公，工作内容主要有：编制工作方案，明确规划成果，建立工作队伍等。“多规合一”编制工作是一项涉及多部门、多专业、多学科的系统工程，因此，成立协调机构是进行“多规合一”工作的基本保障。 3.构建城市空间规划的“多规合一”协调机制的重要性 2014年8月，国家发改委、国土部、环保部以及住房和城乡建设部联合发文，在全国范围内推动开展28个现市县开展“多规合一”工作试点，文中明确提出构建空间规划协调机构是主要的任务之一。协调机制的建立为城市空间管理精细化、专业化的分工提供了有力的支持。协调机制能够有效的促进每个分工部门之间职能的准确划分，防止部门职责的重复、或缺失、或越位现象的发生。 4.城市空间规划的“多规合一”的协调工作组织 4.1 纵向的工作组织 “多规合一”纵向工作协调组织主要是指涉及省、市、县的相关部门，工作内容主要包括城乡空间的协调规划。工作协调部门主要由省、市、县各级相关部门领导成员组成，形成领导小组、工作办公室、工作专责小组等多层级的协调组织机构。有关部门应加紧促进城市空间规划的“多规合一”纵向协调机构的建立。 4.2 横向的工作组织 横向工作组织主要是涉及多部门之间的协调。“多规合一”涉及国民经济和社会发展规划、城乡规划、土地利用规划、环境保护规划等多个行业、多个部门，横向协调组织主要是针对于发改部门、国土部门、规划部门、环保部门等多个部门之间建立有效的协调机制。 5.城市空间规划的“多规合一”协调机制建立的主要措施 5.1 做好用地分类标准的有效衔接 通过对涵盖全领域的城乡规划用地和土地利用规划用地进行分类，并根据它们的异同点对现行的城乡规划用地的土地利用规划标准分类进行有效的对接，明确建设用地和非建设用地的具体内涵。为城市空间“多规合一”工作的开展提供相关的数据支持。 5.2 建立信息联动平台 “多规合一”信息联动平台的建设，其主要目的在于促进协调机制之间各部门的信息交流与沟通。统一信息联动平台的建设，能够使各部门之间工作的对接和传输时间大大的缩短，提高各部门的工作效率，提升“多规合一”工作的工作质量，从而为城市规划建设服务。此外，信息力联动平台的建立，有利于各类空间数据、规划数据、项目信息数据等的有效共享，促进城市空间规划的“多规合一”工作的开展。 5.3 建立法定规划的联动机制 按照“多规合一”工作的工作成果，在现行的机制环境下，对“多规合一”工作建立法定的规划，对城市发展的空间和用地的布局进行统一，促进法定规划边界衔接的一致，同时，推动动态协调，最终推动“多规合一”工作的有效开展。 5.4 规范编审的流程 在“多规合一”协调机构的构建中，完善各部门和各规划之间的协调关系，促进各部门之间的联动合作，需要建立有效的规范的编审流程。明确各部门之间的报审模式，在启动编制以及上报审批和进行修编之前进行统一的管理，各种专项的城市空间规划要由“多规合一”的协调机构进行统一的把关检查，在审查通过之后，再依据相关的程序进行报送。工作小组要对专项的城市空间规划开展严格的全程跟踪，对规划编制进行严格的把控。 5.5 建立动态的维护机制 建立“多规合一”的动态维护机制，促进“多规合一”工作的长效开展。动态维护机制的建立是城市空间规划“多规合一”工作开展的重要保障。城市空间规划的“多规合一”是国家规划发展和国民经济建设的需要，这种规划理念能够有效促进空间布局的优化和土地资源的有效配置。通过动态维护机制的建立，能够及时的对现实工作中存在的问题以及缺陷进行相关的反映，推动有关部门工作的及时修改和整理，为城市空间规划提供有力的保障。