金融大数据证券项目详细设计说明书.docx
金融大数据证券项目详细设计说明书XX科技股份有限公司编制目录一、金融大数据证券项目软件模块设计4二、金融大数据证券项目系统接口及函数42.1 数据生产42.1.1 数据生产函数42.2 数据采集52. 2.1数据采集接口53. 2.2数据存储函数62.3 数据分析62.3.1 数据分析函数62.4 可视化展示72.4.1 用户接口72.4.2 菜单接口82.4.3 角色接口92.4.4 开户分析接口92.4.5 银行分析接口102.4.6 证券分析接口112.4.7 地区业务分析接口112.4.8 交易量分析接口12三、 金融大数据证券项目系统数据格式123.1 数值类型123.2 日期和时间类型143.3 字符串类型15四、 金融大数据证券项目系统数据库表结构164.1 表结构设计16一、金融大数据证券项目软件模块设计表1金融大数据证券模块设计表序号一效模块二效模块三效模块说明1数据生产金融大致摒证券数据生产2数据采集/存储使用FIUme、Kafka组件将数据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理系统状态监控、系统信息查看5权限管理资源管理系统菜单管理、珞径管理6角色管理系统使用角色管理、权限管理7用户管理系统登录用户管理8证券数据分析开户分析使用图形展示各个开户地区占比情况9银行分析使闻图形展示各个银行在不同时间周期资金越势情况。10业务分析使用图形展示各种业务类型占比情况11证券分析使用图形展示各个券商在不同时间周期中证券金额趋势情况。12地区业务分析使用图形展示各个性别占比情况。13性别分析使用图形展示各种业务类型的交易占比情况。14交易量分析使用图形展示各个开户地区占比情况二、金融大数据证券项目系统接口及函数2.1 数据生产2.1.1 数据生产函数函数类com.product,test.MockRecords生产类TestMockRecords需求优先级高系统输入或系统外激励系统响应系烧调用生产函数,设定相应的输出文件及输出路径根据设定路径，生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注释和说明2.2数据采集2.2.1数据采集接口接口地址hhrzkgsystemdataCo1.Iection用户类系统需求优先级高系统输入或系统外激励系统响应设定f1.ume采集的源文件和数据下沉的位置，将数据采集到kafka集群中KaI'ka集群出现相应的数据功能需求数据采集例外以及相应处理调用的功能数据采集注春和说明2.2.2数据存储函数函数类com.hbase.consumer用户类HbaseConsuiner雷求优先级高系统输入或系统外激励系统响应设置kafka消费主题.使用HBASE消费数据将kafka集群中的待数据存储到HBASE中功能需求数据存储例外以及相应处理调用的功能数据存储注释和说明2.3数据分析2.3.1数据分析函数函数类COn1.bigdata,ana1.ysis,runner用户类CountDurationRunner需求优先级高系统输入或系统外激励系统响应配置源HBASE、目标VYSQ1.数据格式，配置清洗策略将HBASE数据经过分析后存储MySQ1.功能雷求数据分析例外以及相应处理调用的功能数据分析注释和说明2.4可视化展示2.4.1用户接口接口地址hhrzkgsyste11adnin用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入用户名、密码1.比对输入用户是否存在，并返回相应结果。2 .新增用户：3 .捌除用户：4 .修改用户.功能需求用户登录系统、用户修改信息、管理员新增和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新增和删除用户注春和说明2.4.2菜单接口接口地址hhrzkgsyste三res用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入菜单名称、菜单地址、上级目录.1 .比对输入菜单是否存在，并返回相应结果.2 .新增菜单:3 .删除菜单；1.比对输入菜单是否存在，不存在即修改菜单。功能雷求系统管理员查询、新增、修改、删除菜单例外以及相应处理调用的功能菜单查询、新增、修改、删除注释和说明2.4.3角色接口接口地址hhrzkgsystemro1.e用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入角色名称、角色权限1 .显示角色名称、权限等信息2 .新增角色；3 .删除角色:4 .比对输入角色是否存在，不存在即修改角色。功能富求用户授权，系统管理员对角色新增.删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注释和说明2.4.4开户分析接口接口地址hhrzkgsystemopen用户类系统用户需求优高先级用户输入或系统外激励系统响应1.1.显示各个开户地区占比情况功能需求图形化展示各个开户地区占比情况例外以及相应处理调用的功能开户分析注释和说明2.4.5银行分析接口接口地址hhrzkgsyste三bank用户类系统用户需求优先级高用户输入或系统外激励系统响应显示各个银行在不同时间周期资金趋势情况功能需求图形化展示各个银行在不同时间周期资金趋势情况例外以及相应处理调用的功能银行分析注释和说明2.4.6证券分析接口接口地址hhrzkgsystem/stock用户类系统用户需求优先级高用户输入或系统外激励系统响应显示各个券商在不同时间周期中证券金额趋势情况。功能需求图形化展示显示各个券商在不同时间周期中证券金额趋势情况。例外以及相应处理调用的功能证券分析注释和说明2.4.7地区业务分析接口接口地址hhrzkgsystemzone用户类系统用户需求优先级高用户输入或系统外激励系统响应显示不同地区证券业务情况功能需求图形化展示不同地区证券业务情况例外以及相应处理调用的功能地区业务分析注春和说明2.4.8交易量分析接口接口地址hhrzkgsystemamount用户类系统用户需求优先级高用户输入或系统外激励系统响应显示各种业务类型的交易占比情况。功能需求图形化展示各种业务类型的交易占比情况。例外以及相应处理调用的功能交易量分析注释和说明三、金融大数据证券项目系统数据格式3.1 数值类型这些类型包括严格数值数据类型（INTEGER、SMAUJNT、DEC1.MA1.和MMERIC）,以及近似数值数据类型（F1.oAT、REA1.和DOuB1.EPRECISION）0关键字INT是INTEGER的同义词，关键字DEC是DECIMA1.的同义词。B1.T数据类型保存位字段值,并且支持MyISAM、MEMORY,InnoDB和BDB表。作为SQ1.标准的扩展，MySQ1.也支持整数类型T1NYINT.MED1.UMNT和BIGINT。下面的表显示了需要的每个整数类型的存储和范围。表2数值数据格式表林«(W*)U(3Cir)*TINYINT1by¾o(-128.127)<0255)小整数依Sma1.iint2tW8(32768.327671<0.6535)大瞥数位Mediumint3by¾G三(8386608.8(0.16777215)388607INT或INTEGER4by%5(-2147483649.(0.424967大整数侦2147483647)2的BK3INT8tr(<0.184467449.22337203685477073709561615)5.O8922337203685477507F1.OAT4S%8(340282346601.1754”*M438-1.175494351351E38.3.402823於点触价E-3).0.<1.1754&1466E78J351EM.3.402823466351E»38)DOUB1.Eby¾5(-1797693134623157E3O8.-2.225073855072014E-3O8).0.(22250738S85072014308.17976931348623157E3O8)0.(22250738585072014E-3G8.1,79769313486231.57EM我将收怀戏效依DECIMA1.财依俊于MWD的依假FM川d*j小一值DECNA1.MD）如（ftff1.!IJM>D.为U÷2f溯为（23.2 日期和时间类型表示时间值的日期和时间类型为DATETME、DATE、TIMESTAMP、T1.ME和YEAR。每个时间类型有一个有效值范围和一个"零"值，当指定不合法的MySQ1.不能表示的值时使用”零"值。TIMESTAMP类型有专有的自动更新特性，将在后面描述。表3日期时间数据格式表*÷(byiw)BBIMMiftDATETIM8100OOIO1.YYrYY-MMODHWWMfftOOOOW999912-31HHMMSS23:59:59TIMESTAMP41970.0101OOOYYYYMMoD双台H削和Mfq0:002038HHFZMSS值片川成结文”川Ai第2147483647K北京时网2038-1-1911:14:07.fHrefr11d2O3B年1U19日发C03:14:073.3字符串类型字符串类型指CHAR、VARCIIAR.BINARY,VARB1.NARY、B1.OB、TEXT、EUM和SET。该节描述了这些类型如
