运用大数据和区块链提升饲料产品流通组织效率的研究

2020-08-11 09:12施和平
中国饲料 2020年15期
关键词:海量流通分布式

施和平,叶 云

(景德镇学院,江西景德镇 333000)

传统饲料行业的流通组织由于技术的不先进,流通环节的繁杂与庞大,导致其饲料产品的流通效率并不高,不利于饲料产品进行现代化的高效企业管理。大数据技术的出现为传统饲料产品流通组织的海量数据管理提供了可行性方案,即原始饲料企业海量数据储存的高成本,海量数据处理的性能不足,缺失流式数据处理以及扩展能力有限的弊端可能得以解决(赵志宏,2017)。大数据的处理流程一般分为四步:首先进行数据的采集,包括数据抽取、转换和装载等过程;其次是进行数据的预处理,实现数据的相互转移;再次是利用分布式文件系统、海量结构化存储系统以及海量非结构化存储系统对数据进行存储;最后是利用专门技术对数据进行分析和挖掘,把相应的结果展现出来(袁敏夫等,2019)。区块链通过将数据进行加密再严格按照时间的顺序形成数据叠加链,从而生成一种永久的并且不可逆向操作亦不可以被修改或篡改的数据记录(龙婷婷,2019)。区块链技术的出现可以解决以前绝对依赖中心化管理进行的交易中可能会出现的信用沦丧和信用破产风险,同时不用担心中心化管理中出现的信息不透明和监管欠缺等问题。

1 传统饲料产品流通组织存在的弊端

饲料产品流通环节一般包括饲料产品的生产、收购、储存与调运、销售以及消费。每个流通环节均会涉及到一个或多个饲料产品流通组织 (郑丽芬,2018)。如饲料产品的生产环节可能涉及生产商、OEM商;饲料产品的收购可能涉及采购商;饲料产品的储存与调运则可能涉及仓储服务商和物流服务商;饲料产品的销售可能涉及到代理商、经销商、分销商、批发商及各种零售商等。

饲料产品从真正开始生产直至终端消费者进行使用要通过无数的流通组织(谢宝禄,2008)。虽然随着经济的发展,市场经济的成熟,流通环节及组织已经由多变少,但是仍然存在着某些环节过多的问题。流通环节及流通组织过多首先将会导致饲料产品从生产至最终销售期限拉长,降低饲料产品的流通效率;其次还会增加饲料产品成本,最后可能导致库存积压,影响仓储和物流运输。因此一旦流通环节及流通组织过多将不可避免地对整个社会经济的流畅运行产生副作用 (张骞等,2019)。

我们的饲料产品流通组织还存在主体规模相对较小、形式比较分散、经营效益不高等弊端。以物流组织为例,保管和管理环节成本过高(马静,2018)。由图1可知,我国仅物流总费用就占GDP的15%,而发达国家的平均水平只有8%~9%;其中15%的GDP比重中,保管费用占了接近1/3,管理费用占比13%。而发达国家的物流保管费用只有我国的一半,管理费用只有我国的1/3甚至1/4。物流费用占比大,相应占据的产品总成本的比例也高,据调查表明,我国的饲料产品的总成本中有大约1/3是物流成本,这一比例不仅高于发达国家的10%~15%,更是高于其他发展中国家快1/4的比例(马晓东,2018)。

2 运用大数据和区块链提升饲料产品流通组织效率分析

由于技术、政策背景或者一些其他特殊的原因导致我国饲料产品流通组织存在上文分析的一些弊端,前述弊端已经造成了我国饲料产品流通费用与成本远高于发达国家,这显然不利于我国饲料产业竞争力的提升和整个市场经济的可持续发展(任小芬,2019)。大数据和区块链技术的出现可能在一定程度上为我国饲料产品流通环节与流通组织优化提供可能性,主要分析如下。

2.1 运用大数据技术对饲料产品流通组织进行数据挖掘和分析 如图2所示,首先针对饲料产品流通环节和组织,借用海量数据采集工具如Hadoop的Chukwa或Cloudera的Flume,对不同饲料产品流通环节和组织进行数据采集,运用大数据技术完成数据提取和数据格式的转换,最终将数据存储至目标数据的存储区。如今的大数据处理技术与传统技术相比,已经可以采用分布式架构,满足每秒数百MB的日志数据的采集和传输需求(张天天,2019)。下一步即是运用大数据工具如SQL、HBASE、HIVE及Sqoop对数据进行转移及传递的预处理过程。接下来再对数据按照其不同的类型进行存储,利用HBase等技术建立海量数据表,实现数据分区,并根据数据量的增长自动实现横向扩展分区。

对于饲料产品流通组织而言,数据应当根据不同的组织类型进行归类存储,如生产类型的组织、物流类型的组织及销售类型的组织均具有不同的特征,可能展现出不同的特点 (郭鹏飞等,2019)。当对所有数据进行分布式储存后,再利用HDFS工具对数据进行用户行为分析,根据不同的用户行为,建立不同的HIVE数据仓库。最终利用大数据实现数据的挖掘和语义搜索等功能。当对所有的数据完成分析及挖掘后,需要通过一定的载体将其展示出来,以供大数据需求用户利用数据分析结果做出正确的决策和寻找恰当的对策(于文博等,2019)。根据大数据的数据挖掘和数据分析结果,寻找饲料产品流通组织效率低下的原因。具体而言是寻找出哪个环节出现了重复或者效率低下,哪个环节可以被省略。同时可以发掘和分析出饲料产品流通组织中成本费用比例问题,企业可以根据不同饲料产品流通组织的成本费用比例制定出降本策略和方针。此外,通过大数据分析,可以明确知道不同销售组织的销售效率和优劣势,以供企业选择最优的销售方式和销售渠道。

2.2 运用区块链减少不必要的饲料产品流通环节和流通组织 饲料产品流通组织越多,中间环节越多,分摊在单个饲料产品中的成本越高,而且无法确定哪些中间环节并不是必不可少的。有些环节并不透明,也可能缺少必要和有效的监管,造成管理混乱,给饲料产品的有效流通增加不可预测的风险。有些饲料产品流通环节纯粹依赖中心化组织的介入,可是中心化组织的信用体系可能存在着巨大的问题,一旦这个中心出现问题,这个信用体系就可能会彻底崩塌,无法挽救。中心化信用体系还有一个成本高的问题,所有人之间的交易都要基于对方的信用,只有当对方信用良好时才可以保证整个交易的顺利。如不动产交易,中间有众多的组织参与进来,包括房屋中介、房管所、评估机构等,对于交易者而言除了不动产本身的费用外,还会产生各种服务费或者佣金的支付。

如图3所示,区块链最明显的特征即是去中心化,建立起分布式记账簿。所谓去中心化即是减少不必要的交易中间环节,如我们通过淘宝购物都需要经过支付宝,如果出现极端情况,即支付宝信用出现坍塌,商家与卖家都将出现不可估量的损失。这种中心化的模式使得我们的交易必须依赖支付宝这个第三方。区块链打破中心化模式,建立起分布式的信用体系。完全分布式使得任一节点的损坏或者丢失都不会影响整个系统的运作,因此区块链是可靠的。同时区块链技术使得交易不必再依赖于中心化的信用体系,整个数据系统的交换无需建立在互相信任的基础上,因为每个交易节点的数据都可以在这个网络中找到。真实的交易数据最能直观地反映一个人的信用问题。

如上所述,区块链一个显著的优势即是去中心化,减少不必要的交易环节,如果将其运用至饲料产品流通组织中即可以适当减少不必要饲料产品流通组织的参与,使饲料产品流通的环节达到更理想的状态,这可以降低企业整个运营的繁索和复杂,改善饲料产品流通组织效率低的弊端。在提升效率的同时,必然将降低可摊销在单个饲料产品中的成本。进而提升企业的竞争力,实现企业的可持续发展。

2.3 大数据与区块链在提升饲料产品流通组织效率方面结合运用分析 大数据拥有强大数据收集、挖掘和分析的能力,可以帮助企业了解饲料产品流通组织中效率低下的原因,并且可以通过数据分析结果的展示来了解饲料产品流通各组织占据的成本费用比例。这为企业进行饲料产品流通组织效率提升提供了决策依据,但是大数据可能会存在数据丢失,或者收集到的数据失真等问题,进而导致分析的结果与事实存在偏差(王晓周等,2019)。区块链中分布式节点中的所有数据都通过加密上传,且不可以逆向操作,因此一旦数据存储在区块链分布式账簿中将被永久保存,其具有不可篡改性,这将弥补大数据中数据可能丢失或失真的弊端。

此外,大数据强大的数据分析和挖掘能力可为区块链如何去中心化提供指引。企业首先根据数据分析结果寻找出哪些饲料产品流通组织是必须的,哪些组织效率低下。据此区块链将建立去中心化的点到点交易模式,从而避开了过多不必要的流通组织,或者将众多类似的流通组织进行合并。从而达到提升饲料产品流通组织效率,降低企业成本的目的。因此大数据可以对区块链中的数据进行海量挖掘和分析,而区块链可以对大数据的数据安全和真实性提供保障,同时根据数据分析结果,建立合理的点对点交易模式。

3 结语

近些年来,我国不断涌现出优秀的互联企业和开创性的互联网技术。大数据和区块链技术的出现可能将推动企业方方面面的创新和变革,对于饲料产品流通组织而言,既是机遇也是挑战。如果运用得当,大数据和区块链很可能助力企业扭转以前饲料产品流通组织效率低下的弊端,寻找到提升企业竞争力的突破口,以实现企业的可持续发展。

猜你喜欢
海量流通分布式
一种傅里叶域海量数据高速谱聚类方法
基于RTDS的分布式光伏并网建模研究
富“鳜”逼人!标鳜最高38元/斤,订单去到39元/斤,流通商疯狂抢订!这条鱼成“抢手货”
圣物的流通——蕃尼古道上的尼泊尔鎏金铜佛流通考察
海量快递垃圾正在“围城”——“绿色快递”势在必行
美国的蔬菜流通
基于预处理MUSIC算法的分布式阵列DOA估计
一个图形所蕴含的“海量”巧题
基于DDS的分布式三维协同仿真研究
一种海量卫星导航轨迹点地图匹配方法