国外数据仓库技术的应用大大提高了企业日常数据资料管理和商业情报信息的分析利用率, 为企业带来了高额的投资回报率。同时, 国内的数据仓库系统也首先在电信、金融等领域投入建设并进行了实际应用, 取得了可观的回报。随着物流经济市场的发展壮大, 物流企业同样面临着市场竞争的压力。如何高效地管理和利用不断增加的数据信息资料, 以提高现有的运营管理水平是大多数物流企业最为重视的问题。为此, 企业对数据的综合分析处理和数据间深层次的挖掘有着十分迫切的需求。而数据仓库技术的应用正是解决问题的关键。目前, 国内的物流企业在数据仓库技术的建设和应用正处于起步阶段。企业急需利用数据仓库技术从商业数据库的大量业务数据中提取辅助商业决策的关键性数据 (图1) , 使日常事务处理和客户关系管理的理念和决策目标得以实现, 达到提高利润和企业综合实力的目的, 以适应现代物流的竞争需求和挑战。

目前, 云南已经从物流经济的末端变为了我国面向东南亚、南亚的桥头堡, 特别是2005年GMS首脑会议在昆明的成功举行, 确定了昆明作为面向东盟开发的重要客运、货运中心和商品集散地的地位。随着西部大开发的深入, 澜沧江 (湄公河) 港口和中国—东盟自由贸易区的开放和建设, 在给云南物流企业带来长足发展机遇的同时, 也带来了激烈的行业竞争和挑战。这就迫使物流企业必须加快从传统物流向现代物流转化的步伐, 以适应物流行业发展和竞争的需要。

物流数据仓库的建设和应用是现代物流中最有科技含量和应用价值的项目之一。根据本文调查结果, 近几年来, 云南物流企业的客户数量每年平均以10%的速度在增长, 业务和货品数据的增长则更快, 每年平均增长120%左右。这就意味着在业务量增长的同时, 如何保证物流服务的水平和质量成为越来越突出的问题。而目前除少数企业外, 大多数物流企业技术装备和管理手段还比较落后, 更为关键的是网络服务和数据信息系统的建设和应用还达不到高质量的服务运营要求, 从而影响了物流服务的准确性和及时性, 以至影响了企业的利润, 甚至导致客户的流失。同时, 随着物流数据的增长和客户关系的复杂化, 数据信息管理问题已越来越影响到企业的运营服务水平和发展前景。由于缺少必要的数据分析支持, 很多物流企业的决策者和管理者对于怎样对企业发展和投资方向作出正确决策感到十分困惑。目前, 数据仓库技术正是解决上述问题的有效工具。

为了系统、全面地了解云南物流企业数据仓库建设和应用的现状, 在我院参与的2009年12月-2010年1月云南物流与采购联合会第四次云南物流企业状况调查《部门统计调查项目审批同意决定书》 (云统调查字[2009]13号) 的基础上, 课题小组又于2011年5-6月对云南省81家物流企业数据仓库建设和应用情况进行了回访调查。调查中, 除了重点了解物流企业的客户数据和业务数据的管理和运营情况外, 还结合我院的物流人才培养情况, 从软硬件基础设施、需求、管理人员建设等方面作了相关调查分析, 根据回收的有效问卷完成此次调查的分析报告, 基于主要的物流作业指标分析了云南大中小型各类企业的物流数据管理和运作水平及云南物流业数据管理中存在的问题, 揭示了云南物流业数据仓库技术的发展情况, 并结合专业知识对相关问题的解决提出了建议。

调查在基本了解物流企业数据信息处理业务流程和经营状况的基础上, 重点对企业的物流网络覆盖面、数据信息基础设施, 以及企业的数据仓库系统建设、应用、管理和人才培养等方面作了详细的综合调查分析。

调查表明, 我省物流企业对建设和开发物流数据信息系统是重视的, 在提供数据的81家企业中, 有网络数据的76家, 其中覆盖全国的企业有40家, 占53%, 覆盖云南市场的企业有33家, 占43%, 覆盖昆明市场的企业有3家, 仅占4%, 如图2所示。36%的企业拥有的计算机数量为5～10台;42%的企业拥有10～50台;20%的企业为50～100台;其余8%在100台以上, 而且这些企业拥有的计算机数量还在逐年递增, 可见企业对数据信息系统的硬件投入比重是很大的。

从数据信息系统的建设和应用情况来看, 调查对象中, 31%的企业拥有1台以上专用数据服务器和信息网站。如图3所示, 28家企业是自行开发的物流数据信息系统, 占统计的34.6%;25家企业向外购买了物流数据信息处理软件, 占30.8%;8家企业外包, 占10%;但也有20家企业在数据信息系统建设方面存在问题, 占24.7%。此外, 没有建设物流数据信息系统的大部分企业也都有开发、外包或购买物流数据信息系统的打算。根据已经建成数据仓库应用系统的物流企业的业务经济统计数据分析, 其利润增长平均32.8%左右, 同时对数据的综合利用率以及客户管理数据分析的效益也逐步提高。而且随着这一趋势发展, 物流公司的科技含量和综合实力, 特别是客户关系管理、业务发展及决策投资分析能力得到了显著提高, 这也进一步说明了数据仓库建设和应用对物流企业的重要性和必要性。

同时不可否认, 由于物流企业自身的条件、认识水平、资金、技术、员工素质和管理等原因, 在数据仓库的建设和应用过程中产生的问题也很多。

通过调查表明, 目前物流企业的数据处理信息系统中存在的主要问题如图4所示。由图4可以看到, 用户反映的最主要问题是多平台、多格式、多数据源数据之间的相互割裂, 这对于应用计算机技术时间较长的物流企业尤为突出。在计算机技术应用早期, 技术人员受到较多的硬件约束, 不得不采用多种数据格式进行数据管理, 而当企业发展到一定阶段后, 这种多格式的数据便带来了许多共享上的困难。而且企业合并频繁, 不同企业在合并之后所带来的数据不一致也使许多信息主管叫苦不迭。在用户反映的各种困难中, 数据量大或增长速度带来的问题最多。由于数据管理困难, 不得不放弃许多重要的管理数据, 以保持现有系统的效率。而解决此类问题最好的方法就是数据仓库技术。

物流企业对应用数据仓库方案的迫切性需求如图5所示。图5表明, 在物流企业员工中, 有21.5%的受访者表示本单位中目前迫切需要数据仓库系统管理方案, 另有68.5%认为需要但尚不迫切, 认为不需要数据仓库方案的仅占3%。从这一结果来看, 本次调查的受访者基本上认为数据仓库对于改善本企业的数据管理是非常有效的手段。

在已经使用了数据仓库管理系统的13家企业中, 我们对应用中的具体问题进行了以下调查分析。

在建设和应用数据仓库的物流公司中, 数据仓库所投入的资金额 (包括系统硬件、系统软件的购置和安装, 应用系统开发或购置所投入的资金) 情况如图6所示。图6表明, 投入金额5万～10万的1家;10万～50万2家;50万～200万9家;200万～500万1家, 可见企业对数据仓库的建设和现代物流信息技术的投入是很重视的。图7所示为实际应用数据仓库系统以后给企业带来的利润情况:认为大幅提高的几乎没有, 小幅提高的占55%, 其余为基本不变;运营成本方面, 认为小幅下降的为58%, 其余为基本不变。在使用数据仓库系统后客户数量变化的情况中, 28%的受调查企业认为有小幅提高, 72%的认为基本不变。由此可以看出数据仓库的建设和应用并不充分, 未能很好发挥数据仓库系统的功能, 并使之投入到公司的运营和管理中, 实现利润的大幅提高和使成本降低。

数据仓库应用最突出的辅助决策功能表现为如下方面:通过企业的数据仓库, 系统是否将现有数据很好地集成, 使数据更加有序清晰, 并能提供分析查询之需要;数据仓库对公司战略决策质量 (如市场开拓能力和服务质量等) 所具有的影响力;系统的功能是否能满足企业的分析、预测需要。调查中, 用户认为数据仓库很好地提供了优质信息, 大大提高了战略决策质量的不到1%, 认为提供了有用信息、对战略决策有一定帮助的也只有49%。这与建立数据仓库之初, 为企业决策提供有力数据支持的目标是有一定距离的。

通过调查企业的数据仓库系统的利用率, 即在企业中是否得到充分使用的情况, 用户认为极少使用的占22.4%, 一般的占55.8%, 经常使用的占26.3% (图8) 。通过实际工作发现, 数据仓库项目的最大用户群体是企业的业务人员, 他们尝试通过数据仓库实现在以前其它MIS系统中不能或需要手工实现的报表功能, 但很快就觉得系统功能很复杂, 不够简便易行。

信息共享方面的调查表明, 用户认为数据仓库系统的建设和应用提高了公司各部门的信息共享程度、促进了协调性和凝聚力的几乎为0;认为提供了初步的信息共享, 共享度不高的为72%;认为对信息共享没什么帮助的占22%。而在对目前使用的数据仓库与其他业务处理系统的交互程度和集成难度如何的调查中, 回答有一定难度的为32%, 容易集成的为45%, 其余为不清楚。这充分表明了数据仓库系统的信息共享和综合利用率不高的实际情况。

通过调查, 参与公司数据仓库系统的开发与固定维护人员情况为:有1个的占24.5%, 2个占62.4%;3个以上的占13.1%。数据仓库维护人员情况为:企业中负责系统运行、维护的主要为经过适当培训普通员工的占调查企业的86.2%, 专业人士占6.3%, 其它人员占7.5% (图9) 。数据仓库的运行维护费用 (包括消耗性材料费用、系统投资折旧费用及硬件日常维护费等) 月平均1 500 元以上的高达66.2%, 其中90%以上的维护是硬件问题, 而且很多问题是由于员工自身素质不高、操作不规范和管理不完善造成的。而在企业的数据仓库系统安全保密性如何的调查中 (即硬件、软件及其系统中的数据保护, 不受偶然或恶意原因而遭到破坏、更改、泄露, 系统连续、可靠、正常地运行的能力) , 认为不安全的占2.1%, 认为安全的占82.4%, 认为较安全的占15.5%。通过以上调查表明, 数据仓库系统在企业中的使用和维护并不到位, 且主要是管理和人员的综合素质问题。

总体上看, 物流企业建设和应用数据仓库的还不多, 这与云南物流企业目前的科技含量和技术水平的发展状况基本吻合。除少数企业外, 大多数企业物流数据信息技术装备和管理手段还比较落后, 数据服务网络和信息系统不够健全, 从而影响了物流服务的准确性和及时性, 也影响了企业的决策能力和市场开拓水平, 由此产生企业经济效益的增加不是很明显、物流现代化进程缓慢等问题。而在已经建设和应用了数据仓库的企业中, 由于自身条件等因素, 也出现了数据仓库系统管理和应用效率低下等问题, 加上缺乏高素质的专业人才, 使得经营效益的提高和数据信息管理现代化进程大打折扣。

数据仓库系统主要针对客户关系、市场营销、产品工程、投资分析等方面的历史数据进行提取与分析, 从中找到对企业进一步发展有价值的潜在信息, 最终使用户能够真正利用DSS工具直接从企业信息池中随机地提取、分析数据, 有效地服务于企业的全方位决策和提高日常运营效率。所以在建立数据仓库系统之前, 必须要充分了解企业自身的需求和数据仓库系统的功能目标, 紧紧抓住实际需求与发展规律, 结合企业实际情况, 特别是数据管理信息化的软硬件基础, 进行统筹安排合理规划。根据企业的发展目标和市场变化规律, 用战略发展的眼光, 创立一个数据信息架构方案, 使企业的商业目标与所需要的数据管理系统保持一致。

建设和维护一个企业数据仓库是一项费时费力、投资大的工程, 应预先设计好一个整体数据信息架构, 制定出分期实施计划, 然后再逐步实施, 重点放在高度重要的商业事件所需要的数据中心或数据传递机制上。做到统一规划, 建立技术环境和支撑平台, 合理选择实现数据仓库的软硬件资源, 包括开发平台、DBMS、网络通信、开发工具、终端访问工具及建立服务水平目标 (可用性、装载、维护及查询性能) 。

建好模型, 选好工具, 通过数据模型的构建, 企业可以从中得到完整而又清晰的描述信息;同时数据模型为企业应用的数据源提供统一的标准。模型的设计需要企业的信息工作人员与业务工作人员紧密配合, 规划出对企业有实际价值的应用模型, 这个模型要具有一定的智能性, 能够根据实际业务的发展不断调整自身的参数, 最终找到企业运作过程中的规律, 从而为企业带来效益。

数据仓库的数据质量是整个项目的基础, 又决定了整个项目的成功率, 因此应正确把握好数据质量与应用的关系。要充分考虑市场业务人员的参与程度、集成商对于业务的了解程度, 以及合适的技术框架的建立。同时建议数据质量应考虑数据的完整性、准确性、及时性3个维度, 数据的完整性主要是从整个企业的业务数据量和接收条件角度来考虑。相对于国外企业而言, 国内企业的信息化建设周期较短, 而计算机技术的发展和市场发展却很迅速, 因此很多企业从信息化建设伊始, 便忙于对生产管理系统不断整合或升级, 但却忽略了数据本身的整理。而数据质量的好坏直接影响着数据仓库系统建设的成败。在此过程中, 业务人员的参与显得尤为重要, 好的方法应该是当开发到一定程度后, 开放给前端业务人员使用, 随着业务人员的使用和反馈, 逐步完善系统的建设, 最终满足其业务需求, 形成业务、数据、系统和前台使用人员的良性互动。业务问题选取合适, 商务目标明确, 从而建立起规范合理的数据仓库平台。

建设和应用中还要重视数据仓库系统的可扩展性, 一是使数据仓库从一种局部的企业解决方案扩展到企业外部以及企业的用户中去, 使企业的数据仓库系统使用面更加广泛, 这些可以通过Internet/Intranet的帮助来实现, 实现数据仓库与电子商务相互融合, 提高其综合利用率, 为企业创造更为广泛的利润空间;二是使数据仓库从一种企业数据管理工具扩展到企业辅助决策工具, 能够充分利用数据仓库中的数据资源, 为企业的发展起到辅助决策功能, 使企业用户的数据仓库得到高效使用, 这些可以通过数据系统厂商提供的工具来实现, 也可以由其它软件公司提供的独立工具包来实现, 实现数据仓库与商务智能的相互融合, 为企业的发展提供强有力的数据支持。同时数据仓库的安全问题也不容忽视, 通过操作系统和数据库的安全机制, 加强数据仓库操作权限的管理, 对数据仓库中的相关数据要及时备份, 并利用RAID配置备份数据仓库, 以提高数据仓库的安全性和可用性。

数据仓库的应用是一个建立和不断完善的工程, 在此过程中, 需要不断充实专业技术支持人员。而从国内情况来看, 真正能够完整实施数据仓库方案的人才还很缺乏, 这大大制约了国内数据仓库市场的发展。系统的长期完善和维护单靠企业的力量是不够的, 最好能与有科研和开发实力的机构共同完成, 而高校是比较理想的对象。通过校企合作的方式, 对实际应用问题加以研究和解决, 既发挥了高校的科研优势, 同时也为企业培养了部分专业人才。这样循环反复, 能充分完善数据仓库系统的功能开发和利用, 同时也实现了企业效益的增长, 而且解决了部分高校毕业生的就业问题, 所带来的经济和社会效益对企业的影响是非常大的。

物流企业通过数据仓库的建设和应用, 获得了运行和决策的数据依据, 系统地掌握了企业的经营状况及财务状况;通过与CRM技术的结合, 提高了物流企业的服务质量, 特别是准确率和及时率;发现并吸引留住了那些对企业做出重大贡献的用户群体, 提高了企业的综合竞争力, 给企业带来了可观的效益。但在实际建设和应用数据仓库系统的过程中, 还应该结合企业的综合实力水平以及实际需要, 在合理建设的同时提高现有数据仓库系统的综合利用率, 并加强维护和管理。把技术人才的培养和系统功能的完善作为一项持续的工程来抓, 才能使物流数据仓库系统得到充分利用, 在现代物流市场竞争中获得更多的优势, 使企业的经济效益和物流现代化水平得到大幅提高。