简介:关于本文可作为数据金融方面的大学硕士与本科毕业论文数据金融论文开题报告范文和职称论文论文写作参考文献下载。
文 郜新鑫 蔡津津 付建俐
近年来,我国金融市场的快速发展使得各种金融数据和信息每天以几何级数的惊人速度增长着.无论是金融业务的开展,还是金融决策与金融监管,都需要大量准确及时的金融数据作为支撑.而随着信息技术的快速发展和普及,各行各业都迅速建立起各自的数据信息系统,并越来越依赖这些系统,一度产生出巨大的经济效益.
然而,经过一段时期相对独立的信息化建设之后,各个行业的企业内部都建立起大大小小众多孤立的信息应用系统,不论是从系统技术构建,还是数据格式的定义等,都是分散、独立的.有时用户为了得到某个行业较为全面的数据,便不得不登陆不同的信息系统,艰难的寻找所需的数据.这样做的后果除了效率低下以外,往往还会因不同资源中的数据的统计口径不同、数据格式相异、数据质量良莠不齐等因素,极大的影响了金融业务决策的准确性.这些异构的数据信息和数据资源也越来越难以单独满足用户对金融数据信息共享、联合分析的较高需求.
在论文范文08结构化数据库不断发展成熟的今天,也必然会遇到异构数据整合的问题.随着目前新数据资源的不断引入,论文范文08结构化数据的规模日益扩大,数据领域、品种种类、数据来源等都大大丰富,目前已经涵盖了宏观经济、行业经济、金融市场等诸多领域,既有低频度更新的统计类指标数据,也有高频行情报价数据,这些都在为用户提供权威准确的数据信息.但如果不对这些海量的数据进行合理的加工、组织、管理,便无法满足用户跨市场、跨行业、全方位、多角度的深层次使用金融数据的需求.
一种被国内外专家普遍认同的解决方案就是利用元数据技术来统一管理、整合来自不同行业、不同系统、缺乏统一标准的分散数据源,并使之标准化,能够令数据最大程度的实现共享与服务.
本文将就如何利用元数据技术解决论文范文08金融数据异构整合做一尝试性的探讨,并结合目前论文范文08结构化金融数据库已有的元数据开发流程、元数据管理平台的建设,对比其他较为成熟的元数据管理平台,尝试总结出一些利用元数据管理技术整合数据的有益经验.
论文范文08金融数据服务形式与用户需求浅析
论文范文08金融财经数据库的建设是一个复杂而庞大的工程,涉及到众多国家、地区的金融经济领域、行业和众多数据类型.如何有效、快速、准确的整合这些海量的数据是摆在我们面前的一个艰巨任务.而对数据仓库的合理设计以满足数据的结构化采集、加工、处理、整合等过程,支持数据高效安全的共享和计算分析需求都要从用户的数据使用习惯、数据服务形式出发,脱离了用户需求的数据便显得毫无意义.
根据对国内外知名的金融数据库的调研和不同用户使用数据的行为分析,大体可以分为以下三种：
(1)对数据的检索、浏览,简单的图表分析、基本数值计算等基础功能性需求；
图1,图2是两家专业致力于金融数据研究和相关投资研究的公司开发的金融数据库查询视图.从图中不难看到,对于一个涉及众多领域、行业和业务的海量数据的查询,只要提供一个标准化的查询、浏览的交互接口和流程,就可以方便用户灵活、快速的通过系统提供的标准化的代码、关键字、约束条件等定位所需的数据,而能够实现这一功能的基础,便是对数据进行高质量的规范描述.
(2)专业的统计分析应用需求.在某些应用情景中,数据浏览终端所提供的计算分析工具不能满足该类用户的需求,则要求金融数据库具备易操作的数据接口、能够支持专业的金融数据算法包、计算模型脚本和流程的开发平台等,方便用户使用专业的统计和计算分析软件对数据进行加工处理.
(3)针对高级的系统用户,可能还需要金融数据库开放一些数据共享服务接口、组织良好的数据推送服务,再由客户的研发团队进行加工处理.这就需要数据库对各类金融财经数据进行多维度,多层次,全方位的灵活组织和归纳,以方便用户以不同的组织形式提取和论文范文数据.
此外,对于金融数据的应用还需要与其他各类财经信息服务互通,如希望能够与财经资讯、财务报表、行情报价甚至于视频、图片等相关资源无缝链接与联动等.因此,建立起一套标准化的数据描述、编码的元数据标准体系是建设整个论文范文08金融数据库和金融服务的核心任务.
元数据技术和应用
元数据普遍被人们定义为：“数据的数据”、结构化的数据等,用于描述数据的内容、覆盖范围、质量、管理方式、数据的所有者、数据的提供方式等信息,是数据与数据用户之间的桥梁.元数据是信息共享和交换的基础和前提,它相当于一个信息资源索引,引导用户获取与访问所需的数据资源.元数据被广泛应用于地理信息、图书馆、档案馆等海量数据领域,并成为多领域信息资源共享和整合的基础,也广泛应用于银行、电信等具有海量用户和数据的数据系统.其主要功能如下：
(1)．对数据和信息资源描述
元数据可对信息资源的内容和属性进行全面、详细的描述,可以系统的反映信息资源对象的基础概貌.如我们规范描述一张数码图片时,可以用EXIF信息：
①Image Description图像描述、来源. （描述生成图像工具的元数据）
②Artist作者. （描述图像作者的元数据）
③Make生产者. （描述产品生产厂家的元数据）
④Model型号. （描述设备型号的元数据）
⑤Date Time日期和时间. （描述时间信息的元数据）
⑥等
当我们使用统一的、规范的、被广泛认可的一个元数据集合来描述那些高维度、结构相异、难以直观查询比较的数据信息时,这些数据便通过元数据这一桥梁,被紧密的连接起来.
(2)数据的查询检索和易理解
元数据为用户查询数据提供了多层次、多途径的检索体系,可支持用户利用元数据提供的分类、描述等索引方式快速定位目标数据和信息.
元数据还有助于实现业务模型与数据模型之间的映射关系,从而使用户能够清晰的理解数据仓库中数据的准确含义,并根据用户需要的方式转化应用.
(3)数据质量控制
通过元数据作为工具来组织数据库,有利于业务技术口径和数据源的统一,可以有效的降低数据存储空间,缩短检索数据的时间,提高效率,并能降低各种异构数据库之间的数据转化难度.通过元数据的准确定义和规范,对各种数据都加以严格的解释说明,有利于数据的一致性和同步需求.
同时,通过元数据管理系统,用户还能够方便的了解各种数据的来龙去脉,一旦某个环节的数据出现问题,便可以向上追溯,通过分析其抽取、转换规则,可迅速定位数据中存在的问题,增强了数据的可靠性.
(4)异构数据的转化与共享
元数据在信息系统中不是被加工的对象,它在运行过程中起着以解释方式控制程序行为的作用,方便作为不同系统、不同来源、不同格式数据源整合时的映射标准和依据.
(5)提高系统的灵活性
元数据管理系统还可以将整个业务的工作流、信息流有效的管理起来,从而提高系统的可扩展性.
由上可知,元数据是对信息资源的规范化描述,其按照一定的标准,从信息资源中抽取出相应的特征,组成的一个特征元素集合.这种规范化描述可以准确和完备的说明信息资源的各项特征.元数据为信息的管理、发现和获取提供了一种实际而简便的方法.
通过元数据的使用,人们能够对信息资源进行详细、深入的了解,包括信息资源的格式、质量、处理方法和获取方法等各方面的细节,对于数据生产者来说可以利用元数据进行数据维护、历史资料维护等.元数据标准可适用于资料共享、数据发布、一数据集编目、数据交换、网络查询服务等,也是数据集元数据整合、建库、汇编、发布的标准格式.
因此,为了能更好的提高数据库建库质量,使数据加工达到规范化,加强数据交流与共享,并希望在一定范围内影响行业规范,使之成为事实上的标准,则必须形成一套合理的、科学的元数据开发和定义流程,以保证对数据资源的最大范围内整合、发布、管理和检索等行为的统一.
论文范文08金融数据元数据标准化开发流程探讨
论文范文08的建设担负着捍卫国家金融信息安全、增强中国的金融话语权的重要使命,因此,更应该从宏观的层面上全局考虑金融财经数据信息的元数据标准化建设,并希望能够通过论文范文08金融数据库的建设和元数据标准化来影响行业标准,进一步扩大论文范文08的影响力,为国家实论文范文融类元数据标准注册和维护管理提供一种可适用的操作模式,以促进各类金融数据实现规范化共享,提高信息资源的利用水平,降低国家金融信息化的成本.
本文在研究和借鉴了一些国内既有的元数据标准化开发流程的基础上,尝试简要总结出论文范文08金融数据元数据标准化开发的可行流程（见图3）.
(1)查全.
查全主要包含两方面的内容：
一是数据查全.即对目前论文范文08自身已有的和即将引入的数据的领域、分类、数据结构、逻辑关系等进行归纳梳理,从数据本身抽取出共享的元数据特征和独有的数据特点,以便为元数据标准的建立奠定基础.
二是标准查全.即对各行业领域内已有的元数据标准进行查全.引用已有的或者事实上的元数据标准有利于为各行业领域提供无缝的金融数据服务,这样用户便可保持已有的使用习惯等.
(2)确定元数据规范的论域,制定元数据标准框架.
由于数据具有不同的应用场景,千变万化的应用需求,灵活的使用形式,其所有功用不可能在一个系统中包罗万象、面面俱到.因此,必须定义出一个基准论域,在此论域内讨论各种数据应用,制定元数据规范的标准框架.
(3)在统一框架随内,建立元数据分层.
由于论文范文08金融财经数据涵盖的行业领域广、数据种类多,数据结构也必然相异,只用一套元数据标准来描述管理所有的数据是不现实的.因此,必须考虑形成一套元数据体系,在统一的元数据标准框架内,形成分层元数据（见图4）.
大数据金融:"淘金100"开启大数据金融新篇章 150422
1)共享元数据标准.可涵盖所有数据的基本属性,不涉及具体的行业领域、具体的数据结构,是抽象出的普适性最强的元数据标准.
2)领域元数据标准.由于领域内的各种数据形式仍然相当丰富,领域之间的数据结构也互有交叉,故该层元数据只是对各领域数据进行抽象,不涉及到具体的数据结构.
3.)领域专用元数据标准.该层元数据是对具体的数据结构进行描述和抽象.
(4)形成各层的元数据集合、元素、实体的标准化.
建立了分层元数据标准和定义之后,便根据前期的查全和调研工作,逐步定义各层的元数据集合、元素集合、实体集合,完善和规范各层的元数据元素.
(5)建立元数据动态管理和维护的规范流程.
当完成了以上几个步骤之后,会得到一个基础的原始的元数据标准体系.而随着数据种类的扩充、数据结构的变化、数据统计学科的发展等,需要对这个元数据标准体系进行动态的管理和维护,如修改、新增、删除等.因此,为了保证元数据标准体系的完整和统一,还必须制定出一套元数据动态管理和维护的规范流程（见图5）.
可以看到,论文范文08金融财经数据库的元数据的标准可以在以上几个步骤的循环中建立、发展直至完善,可充分体现与时俱进的特性.
基于元数据的论文范文08金融数据异构整合探讨
耦合度紧的系统是以牺牲灵活性作为代价的,尤其是目前在各种金融财经数据之间的关联、逻辑和应用形式尚不明晰的阶段,更应该考虑到系统的灵活、可扩展性.当其中有一个模块进行调整时,也不会影响到其他的模块应用.
本文的第一部分分析了用户对数据的使用习惯,主要可以分为两类：一是对某领域数据深入而专业的应用需求；二是跨领域数据的无缝联动应用需求,因此可以尝试提出以下的整合方案：
(1)在统一的元数据标准框架内,建立各领域的专业金融财经数据仓库.各个模块可以基于该领域的专业金融财经数据仓库衍生出各自专业的数据应用产品,但各数据仓库的建立必须符合论文范文08元数据标准.
(2)可对用户提供统一的数据查询分析接口,并根据数据应用需求,在统一的元数据标准框架内,对各子模块的元数据进行映射整合,从而达到对异构数据实体的整合（如图6）.
综上,论文范文08金融财经数据库应在统一、科学的元数据标准的基础上逐步建立发展,每个领域的子数据库在符合论文范文08元数据标准的前提下,既可以独立对外提供专业化的数据服务,还可以在元数据管理模块的灵活论文范文下,为用户提供统一的数据查询、浏览、分析等个性化金融数据服务.
（作者单位：论文范文社技术局）
总结：这篇数据金融论文范文为免费优秀学术论文范文,可用于相关写作参考。
大数据金融引用文献:
[1] 大数据营销学论文选题 大数据营销专业论文题目怎么拟
[2] 大数据营销参考文献外国 大数据营销核心期刊参考文献哪里找
[3] 大数据营销论文大纲模板范文 大数据营销论文大纲怎样写
