危险品管理分析基本设计说明书.docx
危险品管理平台项目基本设计说明书XX科技股份有限公司编制目录一、危险品管理平台项目3(一)危险品管理平台项目中心架构3(二)数据处理流程4(三)网络拓扑图5数据生产展示6数据采集展示6数据分析展示8二、数据可视化展示81. 权限管理:82. 危险品大数据分析:9三、项目安排11一、危险品管理平台项目(一)危险品管理平台项目中心架构2图1危险品管理平台架构图1) 数据生产模块:datasource危险品管理数据源。2) 数据采集/存储模块:通过F1.Ume采集通话记录数据到Kafka集群,然后由HBASE消费Kafka集群中的数据。3) 数据离线分析模块:将数据经过清洗转换后存储到HiVe数据仓库中,然后提取其中需要展示的数据到NySQ1.数据库。4) 系统展示模块:通过前端技术jquery、ajax、echarts进行数据展示。(二)数据处理流程图2危检品数相分柝项目数据处理流程图(三)网络拓扑图图3危1.品管理平台项目M络拓扑图网络划分为:用户子网、大数据集群子网、Web服务器子网、数据库服务器子网。数据生产展示三4获取数据并去掂敏感词通过函数生成危险品管理数据,需配置生成文件名和生成路径。数据采集展示MMm一tMMHrif.f*f*t<11T“.«».MM»tMtS<v»H*t111.*<1.M*<1.M*MH<W.k*k*<QfS.4<”.>Q3.*tQMQfQfM<,“yr"H,“一<*MQMM*QMW*<*iM,X,y.1.U4一1.iM<ft'*mbwW«MH.<M4f¼kbk1.t3QkaeIn3一MMMth»«W««.«««U»M*MwWM,t1.<k*<»»WV%ms.,”*>evafkMn*<M531W<<itjrK4MR<1.*1nMWJ"b¼<*1.1.>*O<k*M1.tM5.HY.<<U11IM1./.n%.>.HJMVM*iti«NCHK<*wKte.“Q»*«««.5.*2J*M«O.k*1.*r.¾MMI,“Q.bF<.*VU<re.<*9*M%«U.f*41.JrsIM“1M.>'fQM-tU.<roMMf*<««»<»«»I5.“E2.XU3.QeRQ".“R.QrM"*QAeK<aAMt*»<m<«««*k*.<».%*«Sa1.UMtMn.owetUa«*«*”*«,>.I1.OWCtiU*H>1.1*<ww*"b<M>tNwAI1.A"1.三tM<r*M<M>MNrY1.Q",一Wkt<4<Mt*“1W<,1.U,,十,UIv>II1.»O1.itrvM<MIRMZ*Y1U".4Bk“3:4图5f1.umo栗集图6kafka集群待消费数据*1.-tn>;Z4r,k11.»<M)<4,1.*a>M1.M.*«1«(««.AH*.MU.te1«*ef<4M41H,1k.Mkv.1.fMj1.1.1>Z79JDM>IMtv1.fi.*UM(9MtV!mUtIMdWt>w><8-<1.try1.<fftr.*M.1.fBtQUW<!««Vf1.Mr«aU0M,<J:C1M,CKMMM1.1.*1.X,4>t<AM9*.M*4J,a»4XI.I*rto(MfAM*w1.t*M1.a9>U>>.>*>*<*a*>V1.U1.*1.4w*1.Mj*»4JFwMMMSiIinW:/W(rAKeUW«K<*.(«*4«*Ae«>o»«M»?1.iW»«M1.UfjD1.>.:,/,M*IC1.«1.ow(e1.。.41.U41.tek1MM.1.t4).*c4M.M1.MZtiXU2-*1mCU4*<1.>Im,TJ»,*>UM.«»1.k0!*«u1.1.:,ha11M1.*2UHM«0»-t«4<im>rI*jfVM>t*ImwtMMto-U«*<*>*1.>><.M>>.Utew*.TNMIf1.>!>1.-MR>1»WIMIAKt图7HBASE存储数据I./AH«.M1.,A1.”W»»I,”乂1.WI、IUw41*,.<1.t4rWiMIM*WA:I',kjimt*wIwm*WM11U1*3I'j;*?.-.-IA.“*g«x“,一,,"-“Nx、I*z.nI*WIM1.,-f>I;>.MI.MKI:-'.-''-、,>«.-<,"、”"八1,I*'1.*1.1.<IM1.?/"z1匕A,.IAMWM1.-,W*M>”1E'.:,'-I»«1M1.<.-,II%A.IZ.”"C"IC112M1V1iKtIIIMMKI*IZ.".1.IIMIMJNIJWTA、1NII>UW1.r-M4*>HM*iI,“,,'.1.IV.n4<.I-,、.,”.,r»/I.1M,Z.II*>.>I>M>41.1.fnsv.1.S*Z>1.Mt'gu2"1"-R"7,*1.1.*1,S4”,nI三I«zvr>7mvw)7>>.,.,”.1IMM*AI",1.M>Mr*I,R.1E,1”1-.'IIFM4.1IMM*1*Z.I.Aur,*/,«i”/.r-.Ig,“t,”1.Mw.n?*wtmtMr1.JiH/*:1.»t1.MM1.«|1i-KCW1.ZISI1.m1."5-S1T.-Ir.E1.、I_xr>u*.,-1.M1.1.Utv«MBnM>JMtfI2fH*-If4t,1.*tt4M*><tvM11M¼<r>¾n>rtar>t%Mn2N.*i4M)n<UmmHIiA<f1.ia.t><wUIMVtf1.I*mM5<MM1t'A,«1av*1<1.>IMMt/IM.wmI(t1.*w«1.:toeiU_tiav.Q37a91.31.M4*2m.TwRAgJIeO<U<awi;Uta三1t*MMv*Mi.*<.wUmiwiwmmwa*M*4,*>MVBf*t.*mtjnr11QMn1.wmIM!MN3mm*,1I»»1<»KIMVW>.1m*t*a1.<41.tw,0*1.>IMMn71:.v*iw1.<"MM41.3Giaa.tiM1.a*1.<4iM7U1.Tw2A*K“,”bu1.U.tM.1<U*M*U>iMWII.mU*>IWIWUM*><4t,>*va)Mn/*,*mw7>rr>cU*mM1.sc4U.titWUMmn1.,U«4M»1.;dnan.tW.OW>MIM*M7><I.1.*w,MI»4t"ai,r>wMaM”.MPwU41.1.-tiw1iiM*MA47.T9R2*力15:11:»<Umm1UUUtM1.tUMM*1.*1.1.M4Mmr.MUM1.WtMtMMM<<*MU.4H1.to*>M*>mr.*wniMMn<*4ww*i:(u.ta(<w)ti)4*nm.bi",;MaM<d*M4U4tt1.>,tMMW>1.>MV*a.1.MM1.Qtf*>“61.ar*v>t<1*4mmr."1一1<<MM>41.ibiU.t1.M.tUMMav-IUiMaeMm.rU*2*W*"«08D<1.*M>4tteiU<UU1M3a*1.M:MwM>.*U*IW1M41MMM*tf*nt,f*wM%777<U4*1R2.tteta*H1.1.MAMM.*1.MH1.1.1.)M<Ug*mUmtIMMMAT.MM<*<三w<t.<Mv*1W1.)1.M4BM*V%.w1.w<*1.*三Ht;ha1.¼«1W.t1.Mt*1.M1.54WU>W.*w1.w2n1.*"J1.(UtfWX;Utia»1tM*1.M*1.1.i%M*t>W.MuMIW1.MW1.M*>三w*t4H>.Q”,W1.IRIUiE*BX4RN«immhi:c«iu.tw2M9wmme.BJw1.mutaMtW*M*ZB,1.*M.Vkk<*<I,».<1.ww1.nM*7.W1.MM1.<UMMnzt<UB.tB1.*1.M1.544Me*.IWqwaIn>»,1一mi.«t(Mta>U1.1.M4K*.T1.WMMM.1.三w<.r1.11*atw.*vH1.¼MTMMK.*w1.<c1.w*t1.c1U.tte*Mt1.t1.1.M>MC.*Mif>t>M3*<ua,W.tC*-I*1.IMOMMB.Im>SM>f*IKM4*M1.*.1.三*v1.MM*Wm.WME8HBASE存信数据2通过f1.ume将客户数据采集到kafka集群,然后使用HbaSe消费kufka集群数掂.数据分析展示0.COUK,>*>Mnx>IJCHMM1.tMiMVW*iM