农业大数据项目详细设计说明书.docx
农业大数据详细设计说明书XX科技股份有限公司编制目录一、农业大数据系统软件模块设计4二、农业大数据系统接口及函数52.1数据生产52.1.1.数据生产函数52. 2数据采集51. 2.1数据采集接口52. 2.2数据存储接口62. 3数据分析72.3. 1数据分析函数72.4可视化展示82.4.1用户接口82.4.2菜单接口82.4.3角色接口92.4.4产量变化分析接口102.4.5产品价格分析接口102.4.6进出口分析接口112.4.7农产品销售分析接口112.4.8全国种植分析接口122.4.9销售渠道分析接口132.4.10灾害统计分析接口132.4.11种植面积变化分析接口14三、农业大数据系统数据格式143.1数值类型143.2日期和时间类型163.3字符串类型17四、农业大数据系统数据库表结构184.1表结构设计图18一、农业大数据系统软件模块设计表I农业大数据分析系统模块设计表序号-U模块二IuWt=««*说明I数据生产农业大数据分析数据生产2数据枭集/存储使用F1.Ume.Kafka退件将数据存储到HBASE中3数超分析使用MapReduceHBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理装统状态食控.票蜕信息查看5机泯管理资源管孝桑统某隼管理、路径管理6角色管理条统使用角色管理、权泯管理7用户管理裹统登录用户管理8农业大数据数据分析产t变化分析使用图形展示近年来各哭农产品的产景变化情况.9产品价格分析使用图形展示各类农产品价格文化情况。10进出D分析使用图形展示近年来各类农产品的进出D情况。I1.农产£锵售分析使用图形展示全国各类农产品的第E情况.12全国种植分析使用图形展示全国农产品的计划肿植面纪情况.13娟告柔道分析使用图形展示农产m的销售家灌占比情况.14灾害烧计分析使用图形展示全国灾害发生战量情况.15的城面枳变化分析使用图形展示近年来各类农作物的种植IS积变化情况.二、农业大数据系统接口及函数2.1数据生产2.1.1.数据生产函数函数类com.product,test.MockRecords生产类TestMockRecords需求优先领系筑输入或系虢外激励系跳哨应系统调用生产函数,设定相应的输出文件及输出路径根据设定路径,生产相应的数据文件功能求数据生产例外以及相应处理调用的功能数据生产注界和说明2. 2数据采集2.2. 1数据采集接口接口地址hhrzkgsystedataCo1.Iection用户类系烧看求优先较高系筑输入或系境外漱身系筑晌应设定f1.ume采集的源文件和数据下沉的位置,将数据呆案到kafka集群中Kaka集群出现相应的数据功能鲁求数据采集例外以及相应处理调用的功能数据采集注春和说明2.2.2数据存储接口函数类Coa1.hbase.datastorage用户类HbaseConsuinerff求优先级高系院输入或系毓外激励系虢嘀应设置kafka消费主题,使用HBASE消费数据将kafka集群中的待数据存储到HBASE中功能鲁求数据存储例外以及相应处理调用的功能数据存储注科和说明2.3数据分析2.3.1数据分析函数函数类coo.bigdata,ana1.ysis,runner用户类CountDurationRunner«求优先级高系就输入或系统外激励系统响应配置源HBASE、目标MYSQ1.数据格式,配置清洗策略将HBASE数据经过分析后存储VySQ1.功能鲁求数据分析例外以及相应处理调用的功能数据分析注餐和说明2.4可视化展示2.4.1用户接口接口地址hhrzksysteuser1.ntrface用户类系统管理员看求优先被高用户输入或系统外激励系就晌应1.用户输入用户名、省码1 .比对输入用户是否存在,并送回相应结果。2 .新增用户;3 .删除用户;4 .修改用户。功能鲁求用户登录系统、用户修改信息、管理员新消和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新缙和删除用户注邦和说明2.4.2菜单接口接口地址hhrzkgsysteBnenuInterface用户类系统管理员需求优先我高用户输入或系筑外激扇系抗嘀应1.用户输入菜单名称、菜单地址、上皴目录.1 .比对箱入菜单是否存在,并返回相应结果。2 .新增菜单;3 .捌除菜单;4 .比对给入菜单是否存在,不存在即修改菜单。功能鲁求系统管理员有询、新增、修改.捌除菜单例外以及相应处理调用的功能菜单查询、新增、修改、删除注春和说明2.4.3角色接口接口地址hhrzkgsyste三ro1.1.ntrface用户类系统管理员需求优先领用户输入或系籍外激励系筑晌应1.用户输入角色名称、角色权限1 .显示角色名称、权限等信息2 .新增角色:3 .删除角色;4 .比对输入角色是否存在,不存在即修改角色。功能雷求用户授权,系统管理员时角色新增、删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注科和说明2.4.4产量变化分析接口接口地址hhrzksjrste三jrie1.d用户类系统用户备求优先效高用户输入或系统外激励系疑哺应1.显示近年来各类农产品的产量变化情况。功能鲁求图形展示近年来各类农产品的产量变化情况。例外以及相应处理调用的功能产量变化分析注科和说明2.4.5产品价格分析接口接口地址hhrzksyste三price用户类系统用户备求优先效高用户输入或系施外激易系貌嘀应1.显示各类农产品价格变化情况。功能鲁求图形展示各类农产品价格变化情况。例外以及相应处理调用的功能产品价格分析注春和说明2.4.6进出口分析接口接口地址hhrzkgsysteiBport用户类系统用户鲁求优先皴高用户输入或系筑外激助系第应1.显示近年来各类农产品的进出口情况.功能得求图形展示近年来各类农产品的进出口情况。例外以及相应处理调用的功能进出口分析注春和说明2.4.7农产品销售分析接口接口地址hhrzkgsystevsa1.e用户类系统用户鲁求优先蚊尚用户输入或系跷外激励系统响应1.显示全国各类农产品的销售情况.功能鲁求图形展示全国各类农产品的销售情况。例外以及相应处理调用的功能农产品销售分析注春和说明2. 4.8全国种植分析接口接口地址hhrzsyste三area用户类系统用户鲁求优先蚊高用户输入或系统外激励系就响应1.显示全国农产品的计划种植面积情况。功能富求图形展示全国农产品的计划种植面积情况。例外以及相应处理调用的功能全国种植分析注科和说明2.9.9 销售渠道分析接口接口地址hhrzkgsyste三channe1.用户类系统用户看求优先高用户输入或系统外激助系就响应1.显示农产品的销售渠道占比情况。功能鲁求图形展示农产品的销售渠道占比情况。例外以及相应处理调用的功能销售渠道分析注科和说明2.9.10 灾害统计分析接口接口地址hhrzkgsyste三disaster用户类系统用户需求优先被高用户输入或系统外激励系统响应1.显示全国灾害发生数量情况。功能鲁求图形展示全国灾害发生数量情况。例外以及相应处理调用的功能灾害统计分析注科和说明2.9.11 11种植面积变化分析接口接口地址hhrzkgsyste三p1.antingArea用户类系统用户雷求优先圾高用户输入或系筑外激励系统哨位1.显示近年来各类农作物的种植面枳变化情况。功能鲁求图形展示近年来各类农作物的种植面枳变化情况。例外以及相应处理调用的功能种植面枳变化分析注寿和说明三、农业大数据系统数据格式3. 1数值类型这些类型包括严格数值数据类型(INTEGer、Sma1.1.int.decima1.和NUMERIC),以及近似数值数据类型(F1.oAT、REA1.和DOUB1.EPRECISION)o关键字INT是INTEGER的同义词,关键字DEC是DECIMA1.的同义词。BIT数据类型保存位字段值,并且支持My1.SA理MEMORY、InnoDB和BDB表。作为SQ1.标准的扩展,MySQ1.也支持整数类型TINY1.vTjiediumint和B1.GIN上下面的表显示了需要的每个整数类型的存储和范围。表2或值我据格式表*4*«(ww>TINYINT1by(-I2.127)0255)小敛侬Sma1.iint2t7f%8(32768-32767»(0.65535)大瞥数倍Mediumimt3侬(8388608.8388eon(0.16777215)INTA1.RTEGeR4b>oo三(-2147483648.2147483647)(0.4294967295)AftCiABKSint8byc三(9.223,372.036.854.775.808.9223372036854775807(0.18446744073709551615)极大整敷依F1.OAT4by1.e三(3.4Q28234E盹-1175494351E381.O-(1.1754外0.(1.175494351E38.3402823466E.38)度浮力.皎价351E38.3.402823466351E心出DOgIE8by%5(-17976931348623157E308-2.2250736585072014E-308)0.122250738585072014E-3081797693134©623157E*306)022250738585072014E-3O8.1.79731348623157Et30e双W1.度俘点政依DECIMA1.侬收于MKD的位依依FMmD的长小数值Decimahm1Di.S来M>D力如2台划为D*23.9 日期和时间类型表示时间值的日期和时间类型为DATETIME.DATE、T1.MESTAMP、TIME和YEARo每个时间类型有一个有效值范围和一个"零"值,当指定不合法的MySQ1.不能表示的值时使用"零"值。TIMESTAMP类型有专有的自动更新特性,将在后面描述。表3日期时间数据格式表9大创by1.M)a*YEARI1901.215«YYYY年份他Datetiize81000-010100:00009999-12-3123:呢59YyYY-MM-ODHHMMSS施令日期和W(Biimestafp41970-01-01OOO0:002038P1.MM214一:、M2038-1-1911:14:07.格林尼治H旧203B年IH19Hit展03:14:07YVYYMMODHHMMSS今日期日时网<ft.KMtt3.10 字符串类型字符串类型指CHAR.VARCHAR.BINARY.VARBINRY.B1.OB.TEXT.EN1.IM和SET。该节描述了这些类型如何工作以及如何在查询中使用这些类型。CHAR0-255W8S定,?符/VARCHAR06553SbVg支长/中Tinyb1.obq-2S5bytes不前过255小字符的二IUM字制TiNYTexr0-255bytes帆文本字符事etoe0-66535Mtg二出IW影式的长文去故施TEXT065535bytes长文本H期MEDIUMB1.080-16777215ty1.ts二:出IW形式的中等长慢文本默然MEDIUMTEXT0-16777215bt5中等长度文本哉树IONG81.O04294967295byt.进刖影式的梭大文本鼓姒1.ongtext04294967296OytesWiK文本IUM四、农业大数据系统数据库表结构4.1表结构设计图我们将分析的结果数据保存到MySq1.中,以方便Web端进行查询展示。XEJIkJS1MysQ1.数据表设计图