探索互联网时代下的电商大数据

2022-09-10

大数据 (big data) , 或者称为巨量资料 (通常以P、E甚至是Z作为其计算单位) , 它所涉及的数据量庞大到无法通过常见的软件来分析, 需要跨媒介、跨视角、跨行业的海量数据源。

一、互联网时代下电商大数据的内涵

电子商务是随着互联网的发展而衍生出来的一种新型的商业活动模式, 是建立在电子通信设备上而又不同于传统商业经营方式的改革产物。电子商务将传统的商业模式和现代互联网技术结合在一起, 将商品数据化, 大大的简化了人们的消费模式。科学技术的不断发展带来了大数据时代, 也使得电子商务迎来了全新的发展机遇。大数据是一个综合的概念, 包含了商业和技术两个层面:技术层面, 近年来, 我国的计算机技术突飞猛进, 以Hadoop为代表的计算与存储系统, 大大的提升了数据的计算效率和存储量, 使商业行业运用大数据的理想成为现实;商业层面:企业运用大数据获得更高的收益, 将各类数据衔接在一起, 通过互联网介质产生更大的商业价值, 这才是大数据存在的真正意义。

阿里巴巴、1号店、京东等网络销售商认为并且追求的大数据就是销售额;而腾讯、百度等综合服务商的大数据就是广告收益、客户资源。但是不管对于哪一类, 核心不在于数据多, 不在于数据大, 而是在于创造价值, 大数据的本质是创新, 失去了创新思维的大数据就是一堆毫无价值的“垃圾”。

二、电商大数据所面临的挑战与实际运用

电商大数据产业与一般的服务企业和制造业不同, 它的数据来源日益多样, 信息数量的增长速度也是成倍的海量增加。特别是进几年电子商务发展迅速, 使用电商进行交易的网名数量也是高达数亿, 那么我们应该如何应用电商大数据呢?

(一) 如何在海量的数据源中收集、甄别真实有用的信息

大数据从来就不是“免费的午餐”, 它纷杂繁多, 优劣并存, 直接影响着电商大数据的收集处理, 大数据热潮的到来也给人们带来了一些新的问题。比如虚假信息、缺乏有用的信息等等。目前大数据的来源十分广泛, 应用广泛的收集方式有:搜狗、百度、谷歌、360等搜索引擎的终端数据检索工具, 还有一些传感器、条形扫码及RFID等。信息技术的发展也使得手机手环等智能设备不断地普及, 大量的APP也被人们所使用, 数据采集的精度和数量也在不断的提升。因此, 我们要在收集到用户信息数据的同时, 征得用户的允许, 去精确的匹配用户的身份信息、手机号等基本信息;此外, 还可以通过用户在门店或者是扫码连接到店内wifi、在线收付款等方式进行数据的搜集, 在结合自己需要获得的信息去进行有效的甄别[1]。

(二) 如何分析与加工海量的数据源

据数据统计, 现在85%的电商都面临着处理海量信息源的挑战, 会花很多的事件去进行研究, 90%的电商会因为处理数据而错过销售机会。因此拥有大数据并不够, 电商的核心竞争是分析和挖掘大数据。目前政府信息的公开性不够、公共社会环境还未成型、第三方机构缺乏, 都影响着大数据的综合性和完整性。大数据的核心环节就是数据分析, 凌乱的数据源是不具备任何价值的, 只有对搜集的数据进行分析才能挖掘其中有效的信息。在数据分析阶段, 根据需求的不同。分析方法也会有所不同, 常见的方法有智能算法、数据挖掘、统计分析及机器学习等。在数据分析方面, 谷歌公司的技术是最先进的, 于2006年首次提出“云计算”概念, 各种数据的分析应用都是公司内部自己研发的云计算技术, 因此我们在分析的时候也可以借鉴相关的核心技术, 比如批量处理Ma Reduce、分布式文件系统DFS、开源实现平台Hadoop、分布式数据库Big Table等核心技术平台, 这些平台的产生, 为大数据的处理分析提供了很好的手段[2]。

(三) 如何活用电商大数据

多年来, 企业的数据运营都是建立在直觉分析判断上, 很多企业无法准确的分析数据, 都在盲目的投资大数据, 并没有进行有效的使用和分析, 没有把这写数据激活成企业的“宝贝”, 从而失去发展的良好机会。数据处理分析是保障数据质量的关键因素, 但是对于大部分的用户而言如何把最终数据转化成直观且有用的数据才是值得关注的, 因此, 解释和利用数据才是极其重要的。传统的文本输出方式已经不能满足现在人们的需要, 一种新型的“可视化数据技术”已经问世, 常见方式有集合可视化技术、图像可视化技术、图标可视化技术等, 在大数据可视化的支持下, 用户可以很直观的解释和理解结果, 并合理的使用数据分析的结果去解决问题[3]。

(四) 数据源的安全与隐私问题

大量的数据代表着数据泄露的风险就越大, 很多基本的大数据分析都没有考虑到个体的隐私, 包括运营数据、客户信息及个人行为等等。相关管理部门也没有明确大数据管理的隐私政策, 对于云计算服务的技术和管理政策都尚未明确。互联网数据时代, 网路攻击现象也是层出不穷, 通过各式各样的手段去获得其企业、私人或者政府的私密数据。因此, 这样的背景使数据源的保护和收集成为了竞争的焦点。从隐私保护的角度来说, 大数据的时代把人们的生活几乎带入了半透明的“裸奔”时代, 为了改善这种情况, 邬贺铨认为应该用法律法规进行约束。大数据时代, 数据的利用和保护都应该通过立法来进行保障, 从而判断哪些数据可以进行共享, 哪些数据不能被泄露, 谁可以用, 谁不能用, 出了问题又该从哪方面入手去解决, 目前我国还没有设立专门的信息安全法, 无明确的法律法规进行约束。