中粮集团商务智能系统项目需求分析

中粮集团商务智能系统项目需求分析1概述决策支持系统(以下简称“本系统”)的建设是围绕本单位及各利润点经营分析活动的需要，实现各项报表、分析功能，以满足本单位及各利润点管理层决策支持需要及日常业务管理需求。本系统的功能总体包括：1．报表功能：针对本单位及各利润点各应用系统的数据以及Excel日报表等非结构化数据，进行加工提炼，形成整体的面向各相关部门的汇总日报表，帮助本单位及利润点各相关部门及时掌握经营、财务情况等；2．系统、全面的统计分析功能：系统的统计分析功能针对目前本单位及利润点各应用系统的数据情况，对业务系统源数据进行加工提炼，形成面向不同用户分析层面的统计分析要素，帮助本单位各级决策层和管理部门以及利润点决策层及管理部门掌握各自职权范围内的经营情况、财务状况、市场运作和市场竞争情况等；3．系统的管理功能：系统需提供必要的管理和监控功能，实现各级层面经营分析系统的管理和监控，保障系统的稳定性。以上这些系统功能的实现，需要从总体上把握面向不同层面用户的需求，所提供功能应做到重点突出，覆盖面完整。系统从应用层次上区分主要分为三个层次，即：高级管理层、业务管理层、业务操作层。1．高级管理层是指事业部总经理助理以上的领导，通常关注事业部整体经营情况，并对所分管的部门和利润点进行考评；2．业务管理层包括事业部本部各职能部门，以及各利润点的管理者，其中本部职能部门关注所有企业与本部门相关的业务情况，如：财务部关注资金情况、生产成本、销售价格等，运营部关注生产负荷、生产质量、生产能耗、产成品库存等，风险控制部关注原材料采购价格及库存等；利润点管理者则关注本企业经营情况的各项指标；3．业务操作层是指利润点职能部门以及分厂、车间等，产生原始数据的业务单位，用户通过系统报送数据，并在指定的范围内进行统计、分析。各层次的区分如图1所示。因此本系统在整体上可以分成两个主要的功能单元：事业部管理层决策支持平台，以及事业部和利润点业务层分析平台。点击图片查看大图图1系统的三个应用层次事业部管理层决策支持平台，包析各利润点从各个角度、各个维度的排名，如按ROE、EBITDA、净利润、总资产、销售收入、经营利润等的排名，并可按实现设定的阈值的预警，界面美观大方。事业部及利润点业务层分析平台，则为事业部各部门专业分析人员、各利润点管理层面，搭建以6S理念为核心思想的综合分析平台。目前的一期工程主要包括财务分析、日报表和集中销售系统分析，二期还将涵盖更多的生产系统、人力系统分析等。而事业部与利润点的主要区别在于其涉及的数据范围、关注指标等不同，各利润点管理人员原则上只能查询到自己单位的数据，而事业部业务层人员的权限范围则基于其业务范围内的全体企业。值得提到的是，吉林销售公司虽作为独立法人单位进行经营，但由于其业务范围包括销售东北地区各企业淀粉、淀粉糖、玉米油及饲料等产品，因此参照事业部职能部门的业务权限进行管理，可以查询分析相关各工厂有关生产负荷、产品库存、物流等信息，但资金信息等仅限本企业。图2展示了根据以上分析所制定的系统平台应用架构。点击图片查看大图图2生化能源事业部决策支持系统平台应用架构2功能需求2.1ETL数据提取本系统的ETL(Extraction、Transformation、Loading)过程将各业务系统源数据进行组织归整，最终形成经营分析系统所需数据，基本要求包括：1．针对财务软件和业务系统进行ETL开发，数据传送能够通过互联网进行，能进行如断点续传、增量传送，做到不多传也不少传，具有任务机制，可以灵活设置触发时间；2．能够利用相关接口标准或自行制定相关接口标准；数据的抽取和转换在接口标准下进行，方便今后新加入或新改造系统的整合；3．抽取系统相对轻型，运行环境要求相对简单，避免造成过大的资金投入，以及增加维护的成本难度；4．对于不能直接系统对接进行数据抽取的单位以及无法从以上应用系统中取得的数据，应能提供按Excel模板填数据然后导入以及直接填饱的功能，或由软件厂商提供其它更为方便的解决方式。ETL过程需要保证业务逻辑的一致性，确保数据的完整性、及时性、正确性和规范性，保证ETL过程的安全性，保证ETL过程的效率，在ETL数据处理与各业务系统正常运转之间平衡资源、时间分配，同时需有必要的ETL流程元数据管理。本系统ETL过程从各企业已有业务系统源数据中获取数据，包括生产系统、销售系统、财务系统、人力资源系统、报表系统等，目前主要有：用友NC、U8等ERP系统，浪潮ERP系统，集团6S管理平台，慧通新意MES系统，潮粮收购系统等。此外，ETL还需支持从一些没有进入各个业务系统但需要整合到各个业务系统的其他外部数据，如Excel报表文件等非结构化数据源抽取数据。ETL对于上述业务系统中数据的抽取方式，需视数据来源及网络状况选择，计划采用以下抽取方式之一：1．直接对数据库进行数据抽取；2．通过前置机本地采集数据加工后形成文件，通过FTP传递至指定服务器，再由本系统的ETL对此文件进行数据抽取；3．针对非结构化的Excel报表，采用单位填报，上传到指定的FTP服务器。上报数据按业务频率进行归类，存放在“利润点+日期”文件夹中。譬如：肇东20090601、肇东200906、肇东2009Q2、肇东2009文件夹中分别存放日报、月报、季报和年报，财务报表独立存放在“财务”文件中进行上传。上传完成后，由服务器对数据进行提取。针对Excel报表中数据的抽取，为保证数据的及时性、准确性以及完整性，提高决策支持系统的使用效果和效率，对上报模板的文件类型、文件名称以及模板内的模板表头、表格表头、业务上报区、数据上报区、页签名进行规定(见图3)：点击图片查看大图图3数据填报规定1．BI系统数据上报模板必须使用Excel2003版本，文件名称包括公司名称、车间名称、报表类型等信息，如“肇东二期酒精生产产品产量日”，名称确定之后禁止修改；2．模板表头的数据日期和车间填报区可修改，其他任何地方禁止修改。数据日期填报格式示例：日报为20090601、月报200906、季报为2009Q2(代表二季度)、年报为2009；3．表格表头不准修改名称、顺序，禁止插入新列或插入新列后隐藏；4．业务上报区指非数据上报列，如产品名称、采购方式、仓库、单位等，涉及维度填报时必须按维度编码使用规定中的条款填报。在BI系统中还将设置编码实时查询的功能；5．数据上报区依据实际业务填报，单元格类型支持通用、文本和数值型。为保障数据系统数据及时、准确以及完整，另一项关键环节是数据检查。通过制定相关操作规范，保证数据检查分工明确、责任落实到人(见图4)：点击图片查看大图图4数据检查规定1．业务人员负责BI系统数据填报，对填报数据的真实性负责；2．数据审核人员负责填报数据的完整性、科学性；3．数据上传人员负责数据的及时、完整上传到指定的服务器；4．服务器数据处理完毕后，各环节人员必须通过BI系统前端报表进行数据检查与核对，若发现错误必须及时沟通、查找原因、快速处理。2.2统计分析除了数据提取之外，对于数据挖掘的需求分析是本项目的另一个关键环节。与其他行业BI的不同之处在于，流程制造企业从原料采购，生产，仓储到销售，所产生的数据种类非常庞大。仅以原料采购指标中玉米为例，这是生化能源事业部下属各工厂的主要原料，按收购季节分为潮粮和干粮，采购方式包括门前散收、粮库代收、贸易商采购、集团内采购、国储拍卖、期货交割，以及企业间调拨等。由于国情因素，目前我国玉米种植仍以小规模农户种植为主，每批次(包括批次内)原材料的水分、杂质、霉变、破损、烘伤粒等主要指标均有较大差异，门前散收尤为明显，收购价格也随市场行情随时变动。此外由于种植品种、种植环境、种植管理、采收时间的差异，玉米籽粒中淀粉、蛋白、脂肪等的含量均各不相同，而这些指标均对生产过程、产成品收率及质量，最终对企业效益产生影响，都在企业经营者的关注范围之内。流程制造业的特点是连续生产，因此对各项生产指标需要按特定时间段统计分析，同时还要考虑计划检修、故障停机等因素。此外，在生产过程中，不同产品所需原材料、设备、工艺等不尽相同。即使同一产品，在不同企业间，或者企业内在不同时期建造的生产线，其设备、工艺也可能存在较大差异，其能耗指标、产品收率亦不尽相同。企业也需要对中间环节的中间产品质量和产量等各项指标进行控制，这都增加了数据分析挖掘的工作难度。本系统主要需对生产、采购、销售、财务、产成品库存、物流、人力资源等主题(业务模块)进行分析。对于各主题的挖掘需求，详见3节。2.3前端展示方式本系统需要为用户提供灵活多样的展现方式。目前常用的展现方式有：固定(预定义)报表、图表、即席查询、多维动态分析等。各主题分析的展现方式除了可以通过以上方式进行展现，对于异常的分析结果还可以通过短消息、E-mail或其他告警方式进行预警。表格和图表可以转换为XLS、PDF、DOC等格式进行保存，分析人员也可以根据需要进行排序、分组数据并改变图表的类型(直方图、饼图、折线图、堆积图、地图等类型)，可在任何维度上通过“钻取”和“切片”生成报表及图形。复杂报表要求“所见即所得”。2.4系统管理功能如图5所示，本系统的系统管理功能包括：系统数据管理和任务调度、系统配置数据的管理、系统监控、权限管理、系统界面管理等功能。点击图片查看大图图5系统管理功能1．系统数据管理和任务调度功能数据管理功能提供对业务生产系统中基础源数据的抽取、转换和加载(ETL)流程的管理。数据的抽取必须能够充分满足系统需要，并保证不影响各业务系统的性能和稳定性。任务调度功能应该能够按照一定的时序进行任务分派和调度，以帮助系统高效、有序地实现各项系统任务的调度和运行，应实现数据抽取、转换和加载工作以及其他应用数据生成工作的自动调度功能。任务调度功能的设置可以通过企业内部网进行远程操作，或通过Web浏览器的Web界面进行操作。将数据的处理过程及处理阶段信息记录到日志文件(或表)中。对应用模块的使用进行日志记录，可供查询、统计。2．系统配置数据的管理系统配置数据应可保存、可备份，满足配置信息的需要。提供通过统一的配置界面进行系统配置数据操作的功能，系统配置的操作严格遵守权限设置规定。3．系统监控实现各项统计数据的审核监控功能，系统通过多个角度对相应指标进行监控，可以发现指标数据的异常波动情况，帮助系统使用人员及时进行相应分析工作。4．权限管理应用级权限管理内容包括：根据角色授权，实现权限角色的有效周期维护；报表查询权限(地域、时间、级别)；数据级权限控制；授权管理采用分级授权机制。操作员只能使用上级业务主管授权使用的应用模块；操作员日志的跟踪等。5．系统界面管理功能系统定制界面可以针对使用者的使用习惯及需求进行个性化定制，相同信息可以有多种展示方式，并以方便使用为原则。例如，有的定制界面可以依据用户使用经营分析系统功能的频度来调整展示层次。系统应实现诸如图表点击率的统计分析功能。通过对系统图表点击率的元数据收集及分析，掌握各个系统用户的关注点，从而能够获得用户对某项业务的关注程度，以帮助决策分析人员、系统建设者、管理者发现一段时期内特定业务的受关注程度，达到统计分析思维、分析模板共享，分析工作知识积累的目的。3挖掘主题本系统需要从时间、空间、横向(利润点之间)、纵向(本企业内)等多维度对数据进行分析。按主题细分，可划分为多个应用主题分析，如：生产主题分析、采购主题分析、销售主题分析、财务主题分析、产成品库存主题分析、物流主题分析、人力资源主题分析等，如图6所示。点击图片查看大图图6分析主题3.1生产主题本主题域中主要对生产过程中的主要产品产量、主要消耗指标、主要技术指标、主要质量指标、主要设备开工情况等进行统计和分析。1．主要产品产量分析该项分析的目的，是为了掌握每日各产品产量及完成情况，为采购、生产、销售等一系列生产经营活动提供决策参考。分析主体为事业部管理层、事业部专业部门、利润点管理层、利润点业务部门经理。用户可选择按日，按月，或按年进行分析。该项分析的数据来源来自利润点向事业部上报的生产日报表，该报表亦