《煤矿大数据基本设计说明书.docx》由会员分享,可在线阅读,更多相关《煤矿大数据基本设计说明书.docx(12页珍藏版)》请在第壹文秘上搜索。
1、煤矿大数据项目基本设计说明书XX科技股份有限公司编制目录一、煤矿大数据分析项目3(一)煤矿大数据项目中心架构3(二)数据处理流程3(三)网络拓扑图4二、数据生产展示4三、数据采集展示5四、 数据分析展示6五、 数据可视化展示61. 权限管理62. 煤矿大数据7六、 项目安排10一、煤矿大数据分析项目(一)煤矿大数据项目中心架构图1俄矿大数据平台架为图(二)数据处理流程图2爆旷大数据项目数据处理流程图(三)网络拓扑图图3煤矿大数据项目同络拓扑图网络划分为:用户子网、大数据集群子网、Web服务器子网、数据库服务器子网。*MV.图4获取数据并去掉批感词通过函数生成煤矿大数据数据,雷配置生成文件名和生
2、成路径。三、数据采集展示T-y*s(Kr1(MB.MBfA*t*wS4w*fKiM*ImIm*Wb*1fca.Ut.*HUHtit*.3”AJrMMU(U41tW,*MQkM*QZNMfrM,X”UW*O.iM.ifJM.wWM.k1rAkhkit3R.Uf1.Q”.,1一MeM%).kr*W*4.*4B*-R.UJXtM*v.)tV*rM1.kwW*.tt(kVMvari4MM1.kf*M1.t*rm,n1.n4*HtnBM1.k*y*femJMMt.k*yt.tMMIQ.k*Mx“tk*-.Q*M*t*VK.f三MMtMtM.M.1r*MM*r*MtBM1.IMt*.r*4ttre.M4i
3、MM1.frt*t*f5.QEE*yt*M*Mm*IMM.w*S*jmIm*f-W*k*1aM.w*1.U*1.M.yWHtU.aM-1.WW3,”1-8WbI1.1.4,metrVBMtHiMRwtrxYMII*MM*“QkS8,三*k1.3,1.M,*vk1.1.U1.MrMMRNH*t*MMQEMW.m*b1.tf;Z4r,k11.MiM1.M.*1(.Aa*.MU,t21*9fZ79JDMIMtv1.fi.*UM(9MtV!mUtIMdWtw8-1.try1.fyvr.*M.1.fBtQUW!Vf1.Mrf1.UM,tU.*V1.U1.*1.4w*1.Mj*4JFwMMMSiIinW:
4、/W(rAKeUWKoM?1.iWM1.UfjD1.:,/,M*IC1.1.ow(e1.。.41.U41.tek1MM.1.t4).*c4M.M1.MZtiXU2-*1mCU4*Im,TJ,*UM.1.k0!*u1.1.:,ha11M1.*2UHM0-t4rI*jfVMt*ImwtMMto-U*1.Utew*.TNMIf1.!1.-MR1WIMIAKt(M*1t4e.c1.*0w41.7k(4JM.Q.mI!ta.t.tIJamrwMHiCMM.r*MmrwuC*nM*w*m*wwcm*e445*1.N1.2V11mCjtfi“21.M1.rIiar*M,:IvrwnC1.WMX小,A:IA1
5、.eaE”jm*3Am4Mi44Nimniu4)VIM.H:1.*Mm?n|1.|axmsc*m.gnwvnI.M0tA.i1.*iWtAJn1.wrvn11:Int7wntk2miM:Imiimmki11IaMIirftIM1.1.MMK1.mv*ic、im”iiIn,11MJnA.9m:IM1.iMMK1.UC!ISe1.m;6,“MWI”fRK,C1.rAJI8HN11*MMQ*)1.nMIVIMJMW7111.JWIVMNItMMMM)t-M7rMM,yM7”“%IWHMMIWMT11jBM*wt%.amMIi!J*7*1.rMMI1W1MM7I1ICMMI7VM1IMMNCi1.Av
6、eaaX4*wtRmEM711,*BnICKMI”EM2IM1.11V!Krw4i%tMMW.K,*;IVM1.MMNI”MM41.*kM1.1.MMK1.MI4B.HMnIIMMK1.ixm*2W,IMMNMraa11.0wca*图7HBASE存储故据1(4w*1.1.14H1.1.1.rt49e1.t1.1.Mtn*1.HMjrrEtfM*1.“1.t1.Iwtw1.1.44iMtWnwMI-m1.1.e*M三*H1.a.M*vtat.vs1.1.41.MM21.1.TRA力HtP-4UMn;IWMUaRMtaB*ia;MMJ,”.wU*IWIMIMMa*“,”,.-一31UE,0*1E“
7、m”,c1.(三Hkc41V.tiw*ea*H1.1.Mn)i.Bg1.M?MQMI.Im;4(4tfM1t4a.Q1.,*IIMan,:.w1.*U*1.:biiiU.t1.M.t1.MtrU41M4MX47.MIMMR:!:*1.1.MVmr.*WM11MMNU0*Hi!(41U.tMta*三HiiMnm.B1.VM.IOTM1(4mmitm(f.tM*W.1.w2f,fn.Jmu1,tU*t*M1.i44BW.IWMWiMM1.f411t.r-%M*MM%,x1.IBBM%MR%.*!1N1.1111M4M*1.*tttm.tM*WHM4MJT.ImB*a*w41.t4t.Q3,Qv1.
8、IMBME.w.1.,g.t1.M19U41.544*mM.TMMR4。J1.(U*mMtiat,t1.*MM*1.1.%4Mtm.vUmV/1.MWIMt,UMIQ1.i*M1.K7X4ymtUM1.:1.491JU*M1.t1.*t1.M.tMM4*a*U*M*.Za.M.M*U.*三r-1.1.M7.ww1.(uIMietM1.WC.fMvmAA*U*MiM4rMm.*imm)immhu*tMm.*iMntMaj*4MM-4Atem.tMVa*-ut1.MMM*,“I】mfrMM4tMI*,1.*v!*MMOTW%.w1.M图8HBASE存储数据2通过f1.ume将客户数据采集到kafka集群,然后使用I1.basc消费kafka集群数据。四、数据分析展示r-MsCOBtAC1.C.dS1W01.!41SMC444I2IMieMkXO2J*f.4|ISCI1.XM1.e25I.10I.(IUMI9tJSSI,D-IMOOMOVJMI.|TwBoooej71I.|9IiiCOOOUTW71I.|,IH