媒体直播大数据项目详细设计说明书.docx
媒体直播大数据详细设计说明书XX科技股份有限公司编制目录一、 媒体直播大数据系统软件模块设计二、 媒体直播大数据项目系统接口及函数42.1数据生产42.1.1数据生产函数42.2 数据采集52. 2.1数据采集接口53. 2.2数据存储函数62.3 数据分析62. 3.1数据分析函数62.4可视化展示71.1.1 1用户接口71.1.2 菜单接口81.1.3 4.3角色接口91.1.4 直播内容占比分析接口91.1.5 直播受众人群年龄分析接口101.1.6 直播用户TG1.分析接口111.1.7 直播平台市场份额分析接口111.1.8 移动用户规模分析接口12三、媒体直播大数据系统数据格式121.数据格式设计说明12四、媒体直播大数据系统数据库表结构151. 表结构设计图15一、媒体直播大数据系统软件模块设计表1媒体直播大数据模块设计表序号一皴模块二皴模块三效模块说明1数据生产媒体直播大数嘱数据生产2数据采集/存储使用FIUm°、Kafka组件将数据存储到HBASE中3数据分析使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQ1.中4可视化展示系统管理系统状态监控、系统信息查看5权限管理资源管理系统菜单管理、路径管理6角色管理系统使用角色管理、权限管理7用户管理系统登录用户管理8媒体宜播数据分析宜播内容占比分析使用图形展示各柠类型宜播内容占比情况。9宜播受众人群年龄分析使用图形展示直播受众人群年超占比和数量情况。10宜播用户TGI分析使用图形展示中国各地地区直播用户TG1.情况。11宜播平台市场份额分析使用图形展示各主要直番平台市场份额占比情况。12移动用户规模分析使用图形展示全年各个时间段移动用户规模趋势情况。13直播市场规模分析使屈图形展示历年直播市场规模趋势情况。14宜播观众分布区域分析使用图形展示各城市间直播观众分布占比情况。二、媒体直播大数据项目系统接口及函数2.1数据生产2. 1.1.数据生产函数函数类cod.product,test.MockRecords生产类TestMockRecords需求优先级高系统输入或系统外激励系统响应系烧调用生产函数,设定相应的输出文件及输出路径根据设定路径，生产相应的数据文件功能需求数据生产例外以及相应处理调用的功能数据生产注释和说明2.2数据采集2.2.1数据采集接口接口地址hhrzkgsystemdataCo1.Iection用户类系统需求优先级高系统输入或系统外激励系统响应设定f1.ume采集的源文件和数据下沉的位置，将数据采集到kafka集群中KaI'ka集群出现相应的数据功能需求数据采集函数类COn1.bigdata,ana1.ysis,runner用户类CountDurationRunner需求优先级高系统输入或系统外激励系统响应配置源HBASE、目标MYSQ1.数据格式，配置清洗策略将HBASE数据经过分析后存储MySQ1.功能雷求数据分析例外以及相应处理调用的功能数据分析注释和说明2.4可视化展示2.4.1用户接口接口地址hhrzkgsyste11adnin用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入用户名、密码1.比对输入用户是否存在，并返回相应结果。2 .新增用户：3 .捌除用户：4 .修改用户.功能需求用户登录系统、用户修改信息、管理员新增和删除用户例外以及相应处理调用的功能系统登录、用户信息修改、新增和删除用户注春和说明2.4.2菜单接口接口地址hhrzkgsyste三res用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入菜单名称、菜单地址、上级目录.1 .比对输入菜单是否存在，并返回相应结果.2 .新增菜单:3 .删除菜单；1.比对输入菜单是否存在，不存在即修改菜单。功能雷求系统管理员查询、新增、修改、删除菜单例外以及相应处理调用的功能菜单查询、新增、修改、删除注释和说明2.4.3角色接口接口地址hhrzkgsystemro1.e用户类系统管理员需求优先级高用户输入或系统外激励系统响应1.用户输入角色名称、角色权限1 .显示角色名称、权限等信息2 .新增角色；3 .删除角色:4 .比对输入角色是否存在，不存在即修改角色。功能富求用户授权，系统管理员对角色新增.删除、修改、查询例外以及相应处理调用的功能角色查询、新增、修改、删除注释和说明2.4.4直播内容占比分析接口接口地址hhrzkgsystemcontent用户类系统用户需求优高先级用户输入或系统外激励系统响应1.1.展示各种类型直播内容占比情况O功能需求图形化展示各种类型直播内容占比情况。例外以及相应处理调用的功能直播内容占比分析注释和说明2.4.5直播受众人群年龄分析接口接口地址hhrzkgsyste三age用户类系统用户需求优先级高用户输入或系统外激励系统响应展示直播受众人群年龄占比和数量情况。功能需求图形化展示直播受众人群年龄占比和数量情况。例外以及相应处理调用的功能直播受众人群年龄分析注释和说明2.4.6直播用户TGI分析接口接口地址hhrzkgsystem/tgi用户类系统用户需求优先级高用户输入或系统外激励系统响应展示中国各地地区直播用户TG1.情况。功能需求图形化展示中国各地地区直播用户TGI情况。.例外以及相应处理调用的功能直播用户TG1.分析注释和说明2.4.7直播平台市场份额分析接口接口地址hhrzkgsystemp1.atforn用户类系统用户需求优先级高用户输入或系统外激励系统响应展示各主要直播平台市场份额占比情况。功能需求图形化展示各主要直播平台市场份额占比情况。例外以及相应处理调用的功能直播平台市场份额分析注春和说明2.4.8移动用户规模分析接口接口地址hhrzkgsystemuser用户类系统用户需求优先级高用户输入或系统外激励系统响应展示全年各个时间段移动用户规模趋势情况。功能需求图形化展示全年各个时间段移动用户规模趋势情况。例外以及相应处理调用的功能移动用户规模分析注释和说明三、媒体直播大数据系统数据格式1.数据格式设计说明Text类型。CHAA(S1.M)个字符.VARCMAA(Mt)伸存可要Kf1.rE(可包含字.ImMHM祎)在基号E9aw大长>2SS个K11wmMWJtass.m力TexTb.T1.NYTeXT存放大Zt为255个升丽TfXTWM大较力5,535个钟丽音B1.OBJif认OeS(5rv38OBjects).%M+5.535TMWK.MeOtUMTIXT中放大怕力,777,zi5-rwms.MeDtUMBtOBHfBtoe*(SrV38OBjcti).11tt*1,”九XSTWMK.1.0NGTBXT用航大帔为4.294.967t29StTWT.or*G1.RTUOBs(皿r1.>qOBjcti).4.2X,X7.295m0MB.ENUMWc.)的仲人司三K1B司IUaNUM列中内由大65535个.如内*中不存人附«.KBA1M1.HW即UUrais1.aA司HMieNuM(M,v.)SeT与ENUH4HU.SeTS含M个K1.1.,和SFT可IH1.一个以上方.Number类型。这些整数类型拥有额外的选项Unsignedo通常，整数可以是负数或正数。如果添加UNSIGNED属性，那么范围将从O开始，而不是某个负数。T1.NYINY(3)-12W1271t«.0M2SS无符SMAUJNT(Sije)3278M“767«®.0M65535班号大使!.MediuminT(W)-3860e鼾8388607««.0to16777215无符q.在Jeq中电»大恰IHT(Z)-2X4743648H2147483647IM1.0列4294967”S无符勺在0号型艮定0tt.BIGINT(Rt)92233720Ue5477S>eM922337203MM77507W1.0H1B44744073709S51615JUW.我!»««火粒。,F1.OAYg带有淳RM1.Bzr.ttw>wrxttM.在ae中埋定石大00.DOVB1.e(Stt.d)懵&补WDr大位Rd中曜/4M6KN大馆管.DeC1.MAM5,SG为加率3MDOUetf鬟R.比济f1.Mf1.NW,Date类型。即便DATETIME和TIMESTAMP返回相同的格式，它们的工作方式很不同。在INSERT或UPDATE查询中，TIMESTAMP自动把自身设置为当前的日期和时间。timestamp也接受不同的格式，比如Yyyymmddhhmmss、Yymmddhhmmss,yyyymmdd或yymmddoOATK)BB.式：YYYY-MM-DD克随BM100O-O1.-Or!9W-12-31,OATFHMf()日漫合.Ie式YYYY-MM-DDNH：MM:5Siiw9M)9UUM100O-O1.-O1.00:00:00,*9999U3123:59:5911MCSTAMP()WW.11MESTAMPmxe('1970-01)1.00:00:00'c)M专的Iitf尊万W式：YYYY-MM-DDIiW丈MHtUMM,19700X0100:00:01'UTCr,203S>1.>903：14：0TUTCT1.MCOBh式HH：MH:SSriW：变>H91.f1.UBM7"：59:59'划018:59:59注“4位式晰元评的值1901M21SS.2第正元壮的709169.1970H2069.四、媒体直播大数据系统数据库表结构1.表结构设计图
