大数据时代的机遇和挑战
发布时间：2019-09-16 13:18:45
2019年6月，全球研究机构邓白氏公司(Dun & Bradstreet)发布了《数据的过去、现在和未来》（Report:The Past, Present And Future Of Data）报告。本报告对美国和英国500多家企业进行调研，以期了解其过去十年遭遇的数据挑战，以及到2030年的转型计划。基于调研结果，本报告将对数据的过去、现在和未来进行探讨，以期了解数据如何切实推动价值实现。
编者按：2019年6月，全球研究机构邓白氏公司(Dun & Bradstreet)发布了《数据的过去、现在和未来》（Report:The Past, Present And Future Of Data）报告。本报告对美国和英国500多家企业进行调研，以期了解其过去十年遭遇的数据挑战，以及到2030年的转型计划。基于调研结果，本报告将对数据的过去、现在和未来进行探讨，以期了解数据如何切实推动价值实现。
过去十年，数据的重要性日益凸显。据评估，全球数据体量已从2010年的2泽字节增长到了2019年的41泽字节，并且未来的增长量和增长率无法预测。当前，数据处于发展的关键时期，新技术正不断催生新数据，不断提高数据获取能力。为获得成功，必须做好数据管理工作，善于发现数据的意义，否则将被信息淹没。未来十年，必须完善数据战略，善于发现数字化世界的新机遇。
一、过去：数据的价值
十年前，数字化还处于初期阶段，“大数据”一词刚刚出现。数据通常被视为技术企业和专家关注的问题。随着时间的推移，企业逐渐意识到数据的广泛潜力并开始建立自身的数字化战略。一些企业因缺乏相关准备，在面对巨量数据时无法做出具有可操作性的决策，进而无法利用数据实现自我完善。同时，数据管理给大多数企业带来了监管处罚、预测问题和客户流失等问题。
1. 关注客户数据
受访企业对于过去十年数据为组织带来的价值的不同方式进行了评估。评估了数据为组织带来价值的不同方式。Dun的调查报告显示，29%的企业领导者认为寻找潜在客户是其面临的最大挑战。63%的受访者认为，数据有助于寻找新的潜在客户，能够帮助企业降低风险、管理供应商和合作伙伴，并且，61%的受访者表示数据能够更好地为客户提供服务。
2. 数据管理权模糊
企业中哪个部门应担负数据管理责任颇具争议。随着数据的重要性愈发显著，企业高管、特别是首席执行官应对数据负责成了优先选项。然而，传统上认为应由首席技术官或首席信息官负责。
调查显示，企业领导者对数据适用范围的看法较为分散、均衡，这表明，他们对这一问题的看法差异较大。另外，值得注意的是，约1/10的人不知道数据管理权归属，这显示出企业尚未制定连贯、有价值的数据战略，如下图。
3. 克服数据管理障碍
除寻找潜在客户外，企业在过去十年中面临的最大挑战都与使用数据“基础”相关。调查显示，28%的受访者表示如何进行数据管理是其企业面临的最大挑战；26%的受访者表示采用什么样的技术利用数据最恰当是最大的挑战。据福雷斯特公司调查显示，老企业的保留系统会使应用恰当技术处理数据变得更为艰难。
从整体情况来看，46%的企业没有恰当的技术来处理数据；42%的企业受困于不准确的数据；43%的企业领导者承认他们的一些数据主导项目已经失败。通常，数据管理未能融入整体商业计划，只有57%的受访者认为他们在整体组织战略中进行了有效的数据管理。
过去十年，企业在数据管理方面的缺陷导致了一系列严重的风险与挑战。调查显示，19%的企业因信息不完整或使用不当失去过客户，15%的企业承认由于同样的原因没能与客户续签合同。而这些对于企业而言是具有毁灭性的问题，对大企业来说将造成上百万美元的经济损失，更会给小企业将带来生存挑战。
数据管理问题同样给企业的财务带来了风险。调查显示，19%的企业表示其财务预测不准确；18%的企业不了解客户信息，向客户提供过多信贷，造成了财务损失。在此问题上，大企业受到的影响更大，23%的500人以上企业和29%的250~500人企业受此困扰。
同时，无法恰当地使用数据会导致企业声誉受损。调查显示，16%的受访者表示曾因缺乏对供应商或客户信息的了解遭遇监管问题，更有12%的受访者表示曾因数据问题受到过处罚。
对于企业领导者而言，如何理解其掌握的数据也是一项重要挑战。过去十年，56%的企业领导者无法发现数据全部的潜在价值。另有47%的受访者认为数据更像是流行语而非严肃思考。同时，不良数据管理给企业带来的负面影响，造成一些企业不会对所有数据都持有积极态度。因此，许多企业错过了为未来做好准备的机会，未能跟上同行进入新市场的步伐。
二、现在：完善数据的基础
现如今，在发达国家数据的体量几乎无法测量，随着数据产生的速度和数量的不断增加，大多数企业领导者都意识到数据管理对其业务取得成功至关重要。许多企业正在基础的数据管理方面努力。受访的诸多企业领导者表示，他们平均每天依靠数据为决策提供信息多达16次，而且有7%的受访者每天使用数据超过75次。
1 、客户仍然至关重要
数据能够在诸多方面帮助企业获得成功，客户仍是其中关键的一环。在调查中，68%的受访者表示数据能够帮助他们更多地了解客户；78%的受访者强调数据对客户体验的重要性；77%的受访者指出，企业可以利用数据确定潜在客户；75%的受访者表示，数据能够帮助企业发现潜在的收益机会。另外，不仅在单独业务上，在企业整体业务上，数据也能提供支持。73%的企业领导者认同数据对其整体商业发展战略至关重要。
2 、云平台技术的兴起
随着数据量的飞速增长，传统的企业级数据存储设备已难以满足日常的数据存储和查询效率的需求，恰恰云平台技术为数据存储与应用提供了可能性。调查显示，79%的企业高管使用云计算软件；71%的企业决策者使用客户关系管理（CRM）软件，其中25%的人会长期使用。在数据管理软件（DMS）的使用上，美国企业（72%）比英国企业（69%）的使用率更高。
3 、数据管理的重要性
企业仍在努力掌握数据管理，调查显示，60%的受访者表示数据窃取、数据泄露和欺诈是他们重点关注的问题。
除数据安全性问题外，企业决策者最常指出的问题有如下几点：25%的受访者认为数据的准确性是个难题；23%的受访者表示分析和梳理数据是极大的挑战；18%的受访者认为数据是否具有连续性是企业领导者担忧的问题。
此外，数据孤岛问题也是受访者关注的重点之一。调查显示，18%的受访者关注在不同团队和职能部门之间共享数据的问题，56%的受访者表示自己所在企业的销售和市场团队使用了相同的数据集。然而，仍有43%的受访者表示数据太过孤立，无法从中得到有效的结论。
对于数据的体量，企业间的态度具有分歧。41%的受访者表示其所在企业的数据过多，而有效数据却很少；34%的受访者却表示其所在企业未获得足量的数据以支撑其业务发展。
4 、引入第三方数据
目前，企业领导者已经意识到改进数据管理能够为企业带来潜在益处的问题。调查显示，75%的受访者认同更准确、高效的数据管理能够帮助企业获得竞争优势；69%的受访者认为做好数据管理能够帮助企业获得新的收入来源；68%的受访者认为改善其数据管理能够帮助销售团队转化更多的机会。
第三方数据是企业提高数据管理质量，更易获得访问权的有效途径之一。调查显示，56%的受访者认同企业能够从第三方数据中受益。具体而言，第三方数据能够帮助销售团队识别潜在客户；财务团队根据客户的信贷与其财务状况相匹配；合规团队进行必要的检查和风险识别；帮助管理层了解企业面临的财务和商业环境。调查显示，数据驱动型企业获得客户的可能性是竞争对手的23倍。
三、未来：挖掘数据的潜力
预计到2020年，数据量继续增长将达到每人每秒产生1.7MB的速度。随着人工智能、区块链等技术的发展，预计到2025年，将有30%的数据为实时数据，这一比例为2017年的两倍。
劳动力市场也将持续受到数据增长的影响，许多工作角色将被改变，数据科学家将被大量的需要。仅以美国为例，到2027年，劳动力市场将有25万名数据科学家需求缺口。对于企业而言，必须应对数据管理带来的挑战并克服未来的新障碍。
1 新可能
支持数据收集和分析的新技术不断涌现，并被越来越广泛地用于商业界，为企业已掌握的数据提供新的功能和使用范例。例如，边缘计算能够帮助企业近乎实时地方式收集数据，机器学习和高级算法可以实现更快、更全面的数据分析，区块链可以使企业通过数据创建新服务。
基于此，许多企业将对新技术进行投资，如数据管理软件（68%）、机器学习（53%）、区块链（44%）和边缘计算（42%）等已列入企业下一年的议程。
2 新机遇
无论是通过内部创新还是与技术合作伙伴合作，数据管理的进步为企业带来了新的机遇。企业应通过API将数据整合到工作流中，以获取实时信息，帮助其提高绩效、掌握动态，确保能够应对各种变化，为客户提供最佳的服务。
3 新挑战
企业领导者深知未来几年数据价值将不断增加。调查显示，67%的受访者对数据将为企业带来的增长潜力表示兴奋，51%的受访者认为数据在未来的商业关系中将变得更为重要。
针对企业利用数据情况的调查显示，59%的美国受访者和54%的英国受访者认为其所在企业在利用数据方面占据优势地位。与此同时，50%的企业高管强调，缺乏顶级质量的数据企业将无法生存。
调查显示，与过去受到的阻碍相似，对于未来数据管理，58%的受访者对数据的准确性和完整性较为担忧，53%的受访者担心其没有能够利用数据的技术。企业必须尽快克服这些障碍，从数据中获得最大价值，以提高业务绩效。
值得注意的是，企业领导者对日益增长的数据使用的外部威胁感到担心。调查显示，45%的受访者认为数据使得其业务变得更加脆弱且易被攻击，甚至51%的受访者担忧未来他们无法保护自己的数据。
随着技术的不断发展，数据使用的道德问题在未来也将日益凸显。调查显示，57%的受访者表示关注了数据使用的道德问题，47%的受访者担心人工智能可能导致数据分析偏见和歧视。
数据道德问题同样是各国政府和监管机构关心的问题之一。2019年4月，欧盟发布了一套人工智能道德准则，强调相关系统必须是负责的、不存在偏见的，并赋予人们开放监督与干预的权利。虽然一些地区正在进行数据的相关规范和立法工作，但其应用前景已引发企业的担忧。调查显示，54%的美国高管和60%的英国高管担心紧随新法规之后的是数据隐私问题。
4 人才的重要性
为了让企业从数据中获得更多收益，人们将在技术角色和其他方面发挥关键作用。调查显示，29%的企业高管表示这些人才是实现数据价值最大化的关键。同时，很多企业领导者也不得不承认目前存在技术人才短缺问题。仅有25%的企业有专职数据管理人员，23%的企业有合适的人进行有效数据管理。
然而，并非所有商业领袖都认识到数据管理与分析技能的重要性将在未来十年持续增长。调查显示，32%的受访者同意未来数据管理和分析技能需求将会增长，仅有19%的受访者表示正在积极招聘数据分析技能人才。20%的英国受访者和24%的美国受访者表示越来越难以找到合适的会数据分析的人才。未来，企业将更倾向于员工不仅能够有效地管理并分析数据，而且能够跟上新的技术发展，这至关重要。
四、总结
过去十年以及未来十年，数据将呈现快速和不断变化的趋势。随着新技术的不断涌现，数据量、可用信息以及利用数据处理新任务的能力正极速增长。调查显示，一些企业利用这些发展来优化其工作方式，开发新功能，甚至创造新的商业模式。随着市场突如其来的变化，企业将能够把这些数据转化为关于客户、供应链、运营环境和自身的非常有价值的见解。同时，正确的数据管理方式能够帮助企业领导者管理风险、降低成本、了解企业动态，从而增加企业收入并实现业务转型。为企业的未来发展做好准备，需要制定雄心勃勃的数据战略。企业需要投入时间和资源进行数据管理，以确保信息的准确性、可访问性和可用性。同时，企业应对数据收集和分析技术进行投资。另外，企业应考虑使用第三方数据资源支持，以获得最准确、实时的信息补充，帮助其适应新的数据管理技术，并从中获益。
来源:中国科协创新战略研究院《创新研究报告》
