区块链技术博客
www.b2bchain.cn

区块链技术Coinbase 数据副总裁揭秘区块链行业的数据 3.0 之路

第17389篇区块链技术文章区块链技术Coinbase 数据副总裁揭秘区块链行业的数据 3.0 之路

加密货币数据的复杂性给数据带来了新的机遇,即企业进入数据3.0,通过系统的智能化和自动化,实现大规模的价值创造。

撰文:李玥(Michael Li) ,Coinbase 数据副总裁
原文发表于 TechCrunch,作者授权链闻发表中文版本

作者:coinbase data副总裁Michael Li
原文发表在techcrunch上,作者授权chain news发布中文版

data是一个企业的金矿。如果管理得当,不仅可以作为让每个人都负责任的重要工具,还可以提供清晰的信息和洞察,使企业在很大程度上提高决策水平。

然而,大多数企业都停留在数据1.0时代,即只把数据业务看作是人工的、被动的服务。一些企业已经开始转向data2.0模式,即使用简单的自动化来提高团队生产力。加密货币数据的复杂性给数据带来了新的机遇,即企业可以通过系统的智能化和自动化,进入数据3.0模式,大规模创造价值。这就是数字3.0的旅程。

coinbase既不是金融企业,也不是技术企业,而是加密货币企业。这种差异对我们处理数据的方式有重大影响。作为加密货币企业,我们处理三种重要的数据类型(与传统企业不同,传统企业只处理一种或两种数据),每种类型都非常复杂和不同:

<Coinbase 数据副总裁揭秘区块链行业的数据 3.0 之路>

<,消除数据孤岛,在问题出现之前消除问题,为coinbase创造以前不可能存在的机会,从而实现规模和创造价值。

我曾在LinkedIn和eBay等高科技企业以及包括capital one在内的金融机构工作过。我见证了从数据1.0到数据3.0的演变。在data1.0中,数据被视为一个反应函数,它可以在紧急情况下提供临时人员服务或救援。

数据 3.0 涅槃之路

在data 2.0中,我们使用简单的工具和第三方解决方案来自动化一些手动和重复性工作,从而提高团队生产力。然而,大多数时候,数据团队仍然依赖更多的人来创造更多的价值。最后,在数据3.0时代,开源和内部技术共同创造数据系统,从根本上实现价值创造的规模。

数据3.0的最大好处是所有数据流的效率和一致性。它使企业能够建立一个全面的数据库,为企业的长期成功服务,用有限的资源满足眼前的需要。在企业规模小、变化快的情况下,这种情况可能并不明显。然而,随着企业规模的扩大和快速增长,数据流之间缺乏一致性可能成为一个巨大的痛点。如果没有及早的准备,往往很难纠正。

即使是世界上最好的技术企业,也可能会有不同的工程团队来创建定制的数据产品和服务,以解决特定的痛点,造成不良习惯。这可能会在端到端数据系统的标准化工作流程中留下一个巨大的漏洞,从而难以大规模地构建和操作数据。更糟糕的是,这些一次性作业可能变得足够大,足以成为独立的系统,需要相当长的时间进行整合和迁移。这些通常是遗留系统,随着时间的推移,这些遗留系统将给公司带来沉重的技术负担。

鉴于区块链技术和数据用例的不断发展,我们的data 3.0工作还远未完成。我要说,我们对我们取得的进展感到非常自豪。下图总结了我们目前的工作和系统。无论具体技术的选择是什么,我们都需要为三个主要部分制定明确的策略:存储分离、计算分离和“单一事实源”的语义。解耦这些组件并制定明确的技术策略可以避免随着企业的发展而出现的性能瓶颈和扩展瓶颈。

数据存储和处理

尽管我们结合使用内部技术、开放源码工具和供应商解决方案来满足各种需求,但我们在确定每个类别的具体解决方案时已经做出了明确的权衡,因此今后不会出现重复或模棱两可的情况。我们在事件管理系统、数据编排工作流、商业智能层和实验平台上实现了这一原则。它还带来了高度解耦和可扩展的体系结构。

数据平台和应用

尽管机器学习是近年来围绕人工智能大肆宣传的“最吸引眼球的”,但它也是数据团队中最具交叉功能的部分。我们真正的端到端机器学习平台Nostradamus支持coinbase的所有机器学习模型,包括数据管道、训练、部署、服务和实验。因为机器学习平台是建立在考虑数据生态系统所有其他部分的基础上的,它的目的不仅是使机器学习能够解决眼前的问题,而且随着业务的发展壮大。

机器学习和平台

这两个领域可能是数据团队中对最终用户最友好的部分,因为它们基本上是精益求精的数据见解的表示层,旨在满足我们的客户并为他们创造价值。他们也是上述所有措施的最直接受益者。

数据科学和数据产品

数据团队最重要的职责是,数据科学家应该摆脱机器,专注于使机器能够以可伸缩的方式提供数据并为消费者创造价值(而不是成为机器和数据消费者之间的中介)。你知道吗

数据团队最重要的职责是,数据科学家应该使自己脱离机器,专注于使机器能够以可扩容的方式提供数据,并为消费者创造价值(而不是成为机器和数据消费者之间的中间人)。

区块链技术Coinbase 数据副总裁揭秘区块链行业的数据 3.0 之路 由www.b2bchain.cn 提供
文章整理自网络,只为个人学习与分享使用
链接地址https://www.b2bchain.cn/17389.html

赞(0) 打赏
部分文章转自网络,侵权联系删除b2bchain区块链学习技术社区 » 区块链技术Coinbase 数据副总裁揭秘区块链行业的数据 3.0 之路
分享到: 更多 (0)

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

b2b链

联系我们联系我们