《金融大数据银行基本设计说明书.docx》由会员分享,可在线阅读,更多相关《金融大数据银行基本设计说明书.docx(13页珍藏版)》请在优知文库上搜索。
1、金融大数据银行项目基本设计说明书XX科技股份有限公司编制目录金融大数据银行项目2(一)金融大数据银行项目中心架构2(一)数据处理流程3(三)网络拓扑图3数据生产展示4数据采集展示5数据分析展示7数据可视化展示71. 权限管理:72. 金融大数据银行:9项目安排12金融大数据银行项目(一)金融大数据银行项目中心架构图1金融大数据猊行架为图1) 数据生产模块:da1.aS。UrCe金融大数据银行数据源。2) 数据采集/存储模块:通过FIUme采集数据到Kafka集群,然后由HBASE消费Kafka集群中的数据。3) 数据离线分析模块:将数据经过清洗转换后存储到Hive数据仓库中,然后提取其中需要展
2、示的数据到MySQ1.数据库。4) 系统展示模块:通过前端技术jquery,ajax,echarts进行数据展示。(一)数据处理流程(三)网络拓扑图03金融大数据银行项目区络柘扑图网络划分为:用户子网、大数据集群子网、Web服务器子网、数据库服务器子网。数据生产展示孑于奇.亨于万于奇,元68/4/4,*0/4/4,?OV42WV4,?W%?eeW4,拗eW“4m阳,”07防“648.5.皎*十5耳68我以六月夕,68财收通现)6%。.66,*愤基,/(必王平格”中,林当+.”梅中.林峙中,口将中林林中,Roe*b.R0QA6.M%W9b6.JOg/*yXR/*6,RoW”60方,快667,防1
3、,86.畀,0.66,布0不0,6666,王尊格格十*彳+.*.HM.*.M-W.2ee6o2W.2w9e5.09/02.2999/0/e.2999/e/e.2w50gB.5n37,Mkof*6.状.&效口.886讣二月性.S68,IKH欠付.335,女,0.55.*0融依./5升:麦,1听铮诉.除t.*M,tt三f.*Af.J3,2ee933.2W933.2eW33.29W33,209933.299y3少观乙防“。11,0.皎*中敏。,6”.五月今5王0儿,事子.,子伞.萼于奇.子亨子奇,子*25S.2W55,询/5/5,丽/,/5R6Q/S/5,=eSS26O5S斯,皿九防5,KW9/bR
4、0儿-于奇.予于,*.*.*.*Q.2W55.2e955.2ee9V5.e55.2e55.2eM55.2W5A18九6“。|0六月蚀.8财门:乃9讥男.08.审0敷3王子格梅51.2W6”,挑8/6/6个,.”7防”。150.*.51十跤日65五月华,乂81:内付995女,9.”回缺“士知”.王修儿*孑命车:子。于身.多子0,千于奇.子.105C.Kg5八,K)g5RW55,E*C5WVS八.XVV5rftM.53n7.Mdro1.d.55,fteU,886J3.三fr58,iJtW,m5.e.S5.Wtttt.5955.HP.ttWf.a.X*.*a.Wa*.2W6VJ.e9VJ.2W93J
5、.2WJ1.29WJZ3.2999JJ.2999JJ我口,如47,6小。06.$5,和外虹口,8&*0外饰,$658,|1支”.185.女.&.55尸耽?效,8K51于奇月千小于奇多子的.李子。季孑由7988/4/4.2ee44.2W9/4/4.2999/4/4,2909/4/4.2999/4/4.2909/4/4图4获取数据井去抵俄感词通过函数生成金融大数据银行数据,需配置生成文件名和生成路径。数据采集展示T-y*s(Kr1(MB.MBfA*t*wS4w*fKiM*ImIm*Wb*1fca.Ut.*HUHtit*.3”AJrMMU(U41tW,*MQkM*QZNMfrM,X”UW*O.iM.
6、ifJM.wWM.k1rAkhkit3R.Uf1.Q”.,1一MeM%).kr*W*4.*4B*-R.UJXtM*v.)tV*rM1.kwW*.tt(kVMvari4MM1.kf*M1.t*rm,n1.n4*HtnBM1.k*y*femJMMt.k*yt.tMMIQ.k*Mx“tk*-.Q*M*t*VK.f三MMtMtM.M.1r*MM*r*MtBM1.IMt*.r*4ttre.M4iMM1.frt*t*f5.QEE*yt*M*Mm*IMM.w*S*jmIm*f-W*k*1aM.w*1.U*1.M.yWHtU.aM-1.WW3,”1-8WbI1.1.4,metrVBMtHiMRwtrxYMII
7、*MM*“QkS8,三*k1.3,1.M,*vk1.1.U1.MrMMRNH*t*MMQEMW.m*b1.tf4E5f1.ume采集图6kafka集群待消费数据S1.4J:Foundbindingin(jer:fi1.e:/vsr/1.oa1./hba/1.ib/51.f4j-1.og4)12-1.7.5.jar!or1.f4)apVStatic1.Qgernr.c1.,Mf4):Foundbindinginjri1.sr八oc1.h*docp八hr1.MBX)p(an1.ib,1.f4j1.9j1.21.7.SWtor9W4j,p1.Sttid099*rin9foranexp1.anatio
8、n.S1.F4J:Actua1.bindingisoftypeorg.1.f4).Uapt.1.094)1.09QcrfCt0ryMa*She1.1.:enterhe1.p,for1.istofMOrtedto1.e4wtheHUdVMieUVrionI.2.f5.1.4.2.rIMknown.Tve曲,271):11:54POTR18hba(B1.11H1.re1.istTAB1.tcwt1.og2niZ29n*rp4n1.ogbfMxi4n1.ogfM0pc9*r1*:tC1.*mC1.woj1.atX1.F1.ogehdAtqtMMogei(M*paccdatCIean1.og2:dat
9、dC1.can1.o211cspccfc*tx1.og:fenxi1.ogne.Mxcqupiaoto9:gupiaotogne_$pece_in(*mt1.og:intefnt1.ogn三*-p*tiftShn1.og:ji*Sho1.09Ocm(in.2,。CgdSgfeventIoq29151229*.11ae5p0ccbaoxian1.ogrbaoiian1.oQ.nacpcedangcIe;dongIedn.MMedtX1.en1.og01zdtC1.en1.og91.nepcedet1.e4n1.og92:detdC1.een1.og92a(anp*efctxi1.og:fe11xi1.ogavn.*ce-gui1.09:ifo1.09,n*p4ceinter*et1.oq:1ntemet1.09.*三w*p图7HBASE存储数据IxS7X1.OM1.BA9O1XBDes2e16.1.2:45:|xfo1.uMf1.:pkM,tbtdi6141.)a47M8,g1.s3*58xS7m8DXxE5iBAi861e20R1001.a:45:Wstne1.tfN”:rC,2t”xtivt三p*161451SMM.1.ucR1.9A1.87xanxESxBA61.9M29291.ei29: