大数据显然是一个颠覆性技术,但使用它的成功是艺术,因为它是科学。关键是将大数据与传统的BI数据创建一个生态系统,允许您生成新的见解而执行你已经知道的东西。
大型企业,特别是金融服务公司,采用大数据比预期更快的速度,根据大数据咨询公司最近发布的一项研究NewVantage伙伴。但使用大数据的组织如何做出更好的业务决策?成功,事实证明,是一种艺术形式,因为它是一个技术解决方案。
去年夏天,NewVantage伙伴举行了讨论的执行者(首席数据官、首席信息官、首席技术官、首席分析官,首席信息架构师)以及业务线领导和高级功能头50多个大型公司,其中大部分是拥有超过30000名员工。金融服务公司的高管约50%的受访者表示,但NewVantage伙伴也采访了高管从保险、政府和其他业务。
“大多数公司在技术每年花费超过10亿美元,”保罗•巴斯表示的创始人和合伙人NewVantage伙伴。“他们不是通常快速做出反应,但当他们他们有更多的资源将在他们的行动。”
使用大数据来做出更好的决策
这些大型企业看到大数据价值和带来他们的资源。巴斯说,85%的受访者称他们已经有了大数据计划。
“超过75%的投资已经超过100万美元,”巴斯说。“百分之二十五是投资超过1000万美元一年。有一个真正的承诺,使用这种技术的一个程序或一系列的项目。他们明确绝对不能没有大数据项目他们做。”
大数据的真正价值是加速时间回答
人给予他们的投资的原因,在大数据,从降低风险创造高质量的产品和服务。但两个原因明确的领导人:实现更好,基于事实的决策和改善客户体验。当然,这些都是主要投资在传统的商业智能(BI)的原因分析。巴斯说,当NewVantage越挖越深,真正的“量子跳跃”为企业大数据时加快速度,他们可以决定,或时间回答(TTA)。
”在一个案例中,如果你的时间回答30分钟30秒在另一个,它真正改变你的业务流程,”巴斯说。“它能让你更有效的业务分析师。”
通过使用新的大数据技术,组织可以在几秒钟内回答问题而不是几天几天而不是几个月,巴斯说。这种加速,反过来,允许企业抵制分析回答问题,开发测试和学习过程,快速适应市场和复杂的工作流自动化。
然而,收获的好处后加速TTA需要小心过程基于一个明确定义和管理大数据之间的关系和传统分析的解决方案。
大数据、分析和组织排列
“在历史上,有很多谈论传统分析和大数据之间的区别,并为每个企业内组织的责任,”该报告说。“然而,调查显示了两个越来越紧密地交织在一起,必须共同努力,兑现承诺大数据的结果。进一步分解组织边界和创建IT组织之间的紧密集成和业务单位是任何组织的关键步骤希望构建一个赢得大数据战略”。
“数据管理和分析往往居住在不同地区的组织,”报告补充说。“IT部门通常控制数据和分析进行了一个特别小组或业务单元。这是与整个大数据和调查证实,组织原则理解紧密结合是必要的。百分之六十五说,“大数据是数据管理的一个组成部分,“和68%进一步认为“大数据是高级分析工具箱的一部分”。
这个飞跃# 8212集成传统分析和大数据而拆除界限IT和业务单位是一个关键的创建组织早一步行动,利用大数据影响业务,NewVantage总结道。
“集实时、全面分析能力到业务和操作单位将使关键业务问题的快速反应的类型和挑战可以构建竞争优势和提高性能,”该报告说。
“想想你的数据和数据质量不同阶段,我们称之为青铜,白银和黄金,”巴斯说。“数据仓库中的数据是金。当你去黄金来源,你真的知道你要数据工作。但如果数据也可以在原始状态,你可以让它我在一周或一个月的时间,如果你可以在一个地方转储所有数据和组织一点点吗?之前的数据是有用的是完美的。”
与传统关系数据库,大数据平台允许分析师组织、清洁和集成数据有选择地忽略记录和字段,并不是当前的焦点的分析。这是一个很大的背离数据仓库,大量的精力花在数据工程,以确保它是适于生产的前向用户发布。NewVantage指出,通过延迟完整数据工程,大数据平台加速TTA在当事人意图分析和消除工程努力不交付价值的数据。
然后,巴斯说,是大数据平台成为piece-albeit便是一个数据的生态系统很重要的一个方面,旨在不断寻找新的洞察客户,市场,产品和风险,同时建立在已知的内容。换句话说,追求“新”而操作”,“健康,持续改进模型。
创建一个大数据的生态系统
这样想:它是否来自大数据或传统分析,重要的是提供有价值的答案。巴斯说,答案的价值是基于其准确性和可交付的速度。为了得到一个准确的,快速的回答,问正确的问题是很重要的。这就是大数据有:它是关于追求“新”。
“艺术的一部分,大数据与发现和解释有关,”巴斯说。“你找一些你无法表达。有一个阶段的分析探索和发现,你生成的假设。然后是建模和应用程序。在我看来,传统的BI往往是真正的道路在你理解底层分析和相关性,与你看到的问题。你不理解的阶段,发现阶段,大数据是有用的。”
有七个不同的步骤来回答复杂的业务问题,NewVantage说:
传统上,公司花了80%或更多的时间在第三和第四步骤,NewVantage说。但是大数据解决方案提供了新方法来满足这些步骤。
首先,由于相对较低的成本和高容量的大数据平台,组织可以加载所有数据从源系统而不是选择特定数据的问题。
“虽然这看起来可能浪费,它消除了两个重要的延迟:写程序来选择所需的数据,并多次回到源系统作为新见解产生的新问题,需要新的数据,“NewVantage说。传统“构建数据集市和数据仓库是非常复杂和昂贵的。广泛的开源产品加上灵活的、可伸缩的网格系统创造一个环境,不仅可以降低成本,但也提供了潜在的减少查询时间成倍增长。”
例如,巴斯指向一个大型金融服务公司想进行多通道路径控制分析的客户了解哪些元素导致了销售和导致摩擦。要做到这一点,公司需要6个月的会话数据整合与其他通道数据。第一次尝试,使用传统的关系数据库,成千上万的SQL代码和该公司很快意识到,它只能承受访问价值六天的数据而不是六个月。计算后该公司放弃了尝试,努力将花费数周时间。
“在大数据环境下,他们能够在100行代码编写和执行它,”巴斯说。“他们执行它在不到24小时内,处理上百tb的会话数据。数据的分析已经有了;它在银行。他们只是想知道自己的客户在做什么在自己的频道。这真的没有上锁,可见性银行运行。”
巴斯说,但关键是一个步骤。一旦你理解了你所看到的,您可以开发一个模型,解释和指标来衡量您的执行在改善你的商业模型。这就是传统的BI。
”“新”和“已知”不是岛屿;他们必须共生系统连接和互相喂食,”NewVantage说。”“新”分析需要快速访问所有的“已知”数据代表今天的商业的现实。相反,必须有一个严格的方法来促进新见解、数据和模型发展的“已知的”。Without this linkage, the systems diverge into incoherence that does not reconcile or scale."
“新兴技术和methodologies-including Hadoop、Cloudera、数据库电器、加速器和自学和遗传算法可以显著减少TTA,“NewVantage补充道。“简化的关键时间从一个改变游戏规则的业务洞察企业的问题是调整的方法分析:快速迭代过程中发现和严格的工程投入生产。强有力的治理和监督已知数据功能必须与敏捷共存的数据分析,为新数据的发现铺平了道路。企业的能力来创建一个动态发现之间的涨落和可伸缩执行定位为可持续成功和统治他们的竞争对手。”
托尔Olavsrud包括IT安全、大数据、开源,微软工具和服务器CIO.com。在Twitter上关注托尔@ThorOlavsrud。在推特上跟随从CIO.com@CIOonline和Facebook。电子邮件托尔在tolavsrud@cio.com
阅读更多关于商业智能(bi)CIO的商业智能(BI)深化。
这个故事,“如何使用大数据更快和更好的商业决策”最初发表的首席信息官 。