图10Hadoop优化架构数据集成层。数据集成层是基于元数据的多源数据交换平台的基础架构。文件存储层为上层应用屏蔽了存储设备类型、型号、接口协议、分布位置等技术细节，提供了数据备份、故障容忍、状态监测、安全机制等多种保障可靠的文件访问服务的管理性功能。与传统的关系数据库不同，基于Hadoop的大数据处理架构中的数据存储层组件不要求完整的SQL支持能力，也不要求采用关系型数据模型存储数据。......
2023-10-21
多源数据交换治理的应用案例
【摘要】：谷声呼叫平台服务的数据由于系统开发委托于不同的开发商，导致数据分散在不同数据库中，不仅不便于管理，而且数据库中存在着大量过时不可用的数据，成为影响数据库分析应用的垃圾数据。基于元数据的多源数据交换系统的主页面展示如图8所示。图9元数据配置页面
谷声（上海）信息科技有限公司成立于2011年2月，公司致力于发展成为在国内有影响力的、一流的“云客服”呼叫中心。该公司以为客户提供良好服务为企业宗旨，提供整合的电话营销一条龙业务。谷声呼叫中心为客户提供了五大平台、五大系统、两大基础服务。五大平台即呼叫中心运营平台、企业服务平台、人力资源平台、软硬件配套与研发平台以及呼叫产业孵化平台。五大系统即平台系统、运营系统、接口系统、接续系统、支撑系统。两大基础服务即呼入和呼出服务。
谷声呼叫平台服务的数据由于系统开发委托于不同的开发商，导致数据分散在不同数据库中，不仅不便于管理，而且数据库中存在着大量过时不可用的数据，成为影响数据库分析应用的垃圾数据。随着公司业务规模的扩大和业务量的增加导致数据量与日俱增，且公司决策对于业务数据的依赖性也逐渐增加，数据分散和不统一的缺陷势必会带来严重的后果。因此上海软件中心与该公司开展了治理项目，应用本文所述的基于数据仓库技术的多源数据交换治理的设计思想，开发出谷声数据中心管理系统，根据原来多个数据分库的数据，建立了一个统一的中心集中库，把几个物理上分散的数据库内的部分表的数据抽取集中存储到中心集中库中，并在中心库上实现简单的查询和统计功能。针对谷声公司不同客户群体特点，可以拟定搜索条件，从库中搜索到适合新项目的客户目标群体。
基于元数据的多源数据交换系统的主页面展示如图8所示。
图8 系统主页面(www.chuimin.cn)
元数据配置页面如图9所示。
图9 元数据配置页面
有关2017年软件工程论文专集的文章
- 详细阅读
-
学习平台多租户应用案例详细阅读
从当前现状来看，各类中小教育机构打造学习平台主要有三种模式，一是自己建设，二是购进商业软件，三是租赁在线学习平台。图6-17是学习平台多租户体系架构。在图6-17所示的架构中，基于较高层次的SaaS成熟度模型，构建适合学习平台的多租户模式，实现系统整体的松耦合，为未来平台扩展奠定基础。......
2023-11-30
-
水体污染源的调查与治理方案详细阅读
水体污染源分人为污染源和自然污染源两类。查找主要污染源，为控制及消除污染，保护水资源提供科学依据。城镇生活污染源调查以下内容：城镇人口、居民区布局和用水量。调查直接污染河道（湖、库）水域的以上点、面污染源时，调查者主要通过资料搜集、防问、现场查勘和实测等形式进行调查，并填写、整理相应调查表格。为掌握污染源的变化状况，污染源调查每5年进行一次。新增与扩建污染源应及时调查上报。......
2023-06-21
-
数据剖析：挖掘多源数据的统计信息详细阅读
数据剖析，也称为数据概要分析，或者数据探查，是一个检查文件系统或者数据库中数据的过程，由此来收集它们的统计分析信息。数据剖析不仅有助于了解异常和评估数据质量，也能够发现、注册和评估企业元数据［48］。传统的数据剖析主要是针对关系型数据库中的表，而新的数据剖析将会面对非关系型的数据、非结构化的数据以及异构数据的挑战。多源数据的统计信息则包括主题发现、主题聚类、模式匹配、重复值检测和记录链接等［47］。......
2023-06-23
-
结合城市化进程，综合治理流域点源、面源和内源详细阅读
我国国土面积大，又缺乏治理面污染源的经验，应尽早采取有效措施迅速启动对面污染源的防治。面源治理应与生态农业的建设相结合，通过合理使用化肥、农药，回收利用畜禽养殖业废水、废渣和秸秆等农业废料，以及在乡镇工业推行清洁生产，防治污染，将面源污染减少到最小限度。面源治理还必须与城镇化发展战略相结合，减少乡镇企业污染，综合防治面源污染。......
2023-11-20
-
京津风沙源治理工程：生态补偿与流域生态共建共详细阅读
林业部1999年制定了《京津风沙源治理规划》,工程主要通过退耕还林、禁牧舍饲、小流域治理等措施,尽快恢复北京周围地区的林草植被,解决首都的风沙危害问题。京津风沙源治理工程建设范围的总面积达45.8万km2。大力营造防风和固沙林,形成防风阻沙固沙体系。......
2023-11-21
-
温州家族企业治理:多继任者与财产分配详细阅读
余功文、李海婴提出用“货币价值分配法”来解决家族财产均分所带来的问题。将家族企业所有财产评估后确定明确的货币价值总量，根据参与分配后代人数，确定继承人可分配财产的货币价值，从而实现财产的公平分配。......
2023-11-27
-
利用本书进行创意产业多案例比较研究详细阅读
前文已经指出，本书研究的总体框架可以运用到其他城市案例，然而根据不同案例的不同情况需要作出相应调整，例如模型所包含的行为主体的类型、各行为主体之间的互动关系、影响创意企业和创意工人区位选择的因素、模型中的城市空间等。为回答这一问题，就必须将本书研究的基本方法运用到尽量多的城市案例中，不仅需要涉及中国多个城市案例，还应该将其应用到其他国家，特别是土地私有的国家，以尽可能全面地反映不同案例的不同情形。......
2023-08-10
相关推荐