《生猪大数据项目详细设计说明书.docx》由会员分享,可在线阅读,更多相关《生猪大数据项目详细设计说明书.docx(14页珍藏版)》请在第壹文秘上搜索。
1、生猪大数据项目详细设计说明书。科技股份有限公司三M2.4.8交易数量分析接口12三、 生猪大数据系统数据格式121 .数值类型122 .日期和时间类型143 .字符串类型15四、 生猪大数据系统数据库表结构161.表结构设计图16一、生猪大数据系统软件模块设计表1生猪大数据模块设计表序号一皴模块二皴模块三领模块说明1数据生产生猪大数据数据生产2数据采集/存储使用F1.Um、Kafka组件将数据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理系统状态发控、系统信息查看5权限管理姿源管理系统菜单管理、路径管理6角色管理系
2、统使用角色管理、权限管理7用户管理系统登录用户管理8生猪大数据数据分析出栏均重分析使用图形化展示各类猪出栏时体重对比情况9交易户数分析使用图形化展示各类猪交易数对比情况10交易价格分析使闻图形化展示各类猪开盘收盘价格变化情况11交易金额分析使用图形化展示各类猪交易金额变化情况12交易数量分析使用图形化展示交易情况13生猪出口分析使用图形化展示生猪出口情况14生猪进口分析使用图形化展示生猪进口情况二、生猪大数据项目系统接口及函数2.1数据生产2. 1.1.数据生产函数函数类com.product,test.MockRecords生产类TestMockRecords需求优先级高系统调用生产函数,设
3、定相应的输出文件及输出路径根据设定路径,生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注春和说明2.2 数据采集2.3 .1数据采集接口接口地址hhrzkgsystemdataCo1.1.ection用户类系统需求优先级高系统输入或系统外激励系统响应设定f1.ume采集的源文件和数据下沉的位置,将数据采集到kafka集群中Kafka集群出现相应的数据功能需求数据采集例外以及相应处理调用的功能数据采集注释和说明2.2.2数据存储函数函数类com.hbase.consumer用户类HbaseConsunier需求优先级高系统输入或系统外激励系统响应设置kafka消费主题,使用
4、HBASE消费数据将kafka案群中的待数据存储到HBASE中功能需求数据存储例外以及相应处理调用的功能数据存储注群和说明2.4 数据分析2. 3.1数据分析函数函数类com.bigdata,ana1.ysis,runner用户类CountDurationRunner需求优先级高系统输入或系统外激励系统响应配置源HBASE、目标MYSQ1.数据格式,配置清洗策略将HBASE数据经过分析后存储MySQ1.功能需求数据分析例外以及相应处理调用的功能数据分析注释和说明2.4可视化展示2.4.1用户接口接口地址hhrzkgsystemadmin用户类系统管理员需求优先级高用户输入或系统外激励系统响应1
5、.用户输入用户名、密码1.比对输入用户是否存在,并返回相应结果。2 .新增用户:3 .捌除用户:4 .修改用户.功能需求用户登录系统、用户修改信息、管理员新增和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新增和删除用户注春和说明2.4.2菜单接口接口地址hhrzkgsystemres用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入菜单名称、菜单地址、上级目录。1匕对输入菜单是否存在,并返回相应结果。2.新增菜单;工删除菜单:4.比村输入菜单是否存在,不存在即修改菜单。功能需求系统管理员查询、新增、修改、删除菜单调用的功能菜单查询、新增、修改、删除注释和说明2.
6、4.3角色接口接口地址hhrzkgsystemro1.e用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入角色名称、角色权限1.显示角色名称、权限等信息2 .新增角色;3 .剧除角色;4 .比对输入角色是否存在,不存在即修改角色。功能需求用户授权,系统管理员对角色新增、删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注春和说明2.4.4出栏均重分析接口接口地址ZhhrZkg/system/Wei曲t用户类系统用户需求优先级高用户输入或系统外激励系统响应1.1.展示各类猪出栏时体重对比情况O功能需求图形化展示各类猪出栏时体重对比情况。例外以及相应处理调用的功
7、能出栏均重分析注释和说明2.4.5交易户数分析接口接口地址/hhrzkg/system/nuBber用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各类猪交易数对比情况。功能需求图形化展示各类猪交易数对比情况。例外以及相应处理调用的功能交易户数分析注群和说明2.4.6交易价格分析接口接口地址hhrzkgsystemprice用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各类猪开盘收盘价格变化情况。功能需求图形化展示各类猪开盘收盘价格变化情况。例外以及相应处理调用的功能交易价格分析注释和说明2.4.7交易金额分析接口接口地址hhrzkgsystemmoney用户类系统用户需
8、求优先级高用户输入或系统外激励系统响应展示各类猪交易金额变化情况。功能需求图形化展示各类猪交易金额变化情况。调用的功能交易金额分析注释和说明24.8交易数量分析接口接口地址hhrzkgsystemtransaction用户类系统用户需求优先级高用户输入或系统外激励系统响应展示交易情况O功能需求图形化展示交易情况。例外以及相应处理调用的功能交易数量分析注群和说明三、生猪大数据系统数据格式1.数值类型这些类型包括严格数值数据类型(INTEGer、Sma1.1.int.decima1.和NUMERIC),以及近似数值数据类型(F1.OAT、REA1.和DOUB1.EPRECISION)0关键字INT
9、是INTEGER的同义词,关键字DEC是DECIMA1.的同义词。B1.T数据类型保存位字段值,并且支持My1.SAM、NEMoRY、InnoDB和BDB表。作为SQ1.标准的扩展,MySQ1.也支持整数类型T1.NINTjiediumint和BIG1.NT。下面的表显示了需要的每个整数类型的存储和范围。大小#UIINYINT1bqg(-128.127)0.255)小瞥致侦Sma1.1.int2by三(-32768.32767)0.66535)medumint3by5(8388608.8398607(O.16777215)ftINT或INTEGER4b)5(214743(.2147483647
10、)0.42949672951大整皎值BIGINT8b8(-9,223,372.036554.775,809.9223372036854775807O.D.为M*2杳则为P2依M如D的小股值2.日期和时间类型表示时间值的日期和时间类型为DATETIME.DATE、TIMESTAMP,TIME和YER0每个时间类型有一个有效值范围和一个零值,当指定不合法的MySQ1.不能表示的值时使用零值。TIMESTAMP类型有专有的自动更新特性,将在后面描述。(bytM)VraDATE3Ieoo.4bHM2038-1-1911:14:07,格林YYYYMMDOHHMMSS日雨和睇曾不暇4255个*符的二道初字仍印Tinytext0255bUs三版文本字补申B1.OB065535bQ6二遐觌影式的长文本籍据TEXT0-65535tW长文本做粗MED1.UMB1.Oe016777215S3二送M形欢的中等K咀文本口ME6UMTEXTO1777215SSjS中等长度N本效版1.ONGBtOB04294967295.辿M形式的极大支奉心死1.