BBVA,数字十年

[摘要]

有着160年历史的西班牙BBVA银行,2017年9月,宣布其「数字转型的成果已经具备商业可量化性」;同年12月,「数字渠道占有率」在西班牙本土首次突破50%的门槛。这在银行业可谓难得一见。本文带你回顾BBVA十年数字转型之旅,希望能给你带来启发。

[目录]

  • 2007~2011年:交互范式探索
    • 投资线上客户体验
    • 开放创新平台
    • 人性化的触点体验
  • 2012~2015年:商业模式再造
    • 将数字化能力引入到核心业务
    • 大规模资本运作
    • 进入大数据领域
    • 调整组织战略和品牌定义
  • 2016~2018年:全面推动开放银行
    • 资本持续运作
    • 基础设施投资推动平台化
  • 写在最后

2017年9月27日,超过160年历史、西班牙第二大银行BBVA的首席财务官Jaime Sáenz de Tejada宣布「数字转型的成果已经具备商业可量化性」。去年12月,其数字化转型的重要指标「数字渠道占有率」在西班牙本土首次突破50%的门槛,其11个主要国家市场中已有6个完成数字化转折点(Digital Tipping Point)的目标。今年1月,整个南美洲用户的数字占有率整体突破50%

(图1:超过160年历史的西班牙第二大银行——BBVA,Banco Bilbao Vizcaya Argentaria)

BBVA的数字转型在过去10年里,取得发达市场国家金融业中难得一见的成就。BBVA的数字转型值得金融领域创新者学习,让我们仔细梳理过去十年里BBVA数字转型的脉络。

2007~2011年:交互范式探索

在经历2007年全球金融危机之后,2008年的世界对于金融服务商而言是全新的:多个市场的经济衰退;更加严格的法规;负利率对银行利润的巨大侵蚀。更加意义深远的,一端是消费者对于银行的「信任危机」——认为金融机构应该为这场灾难负责;另一端是方兴未艾且野心勃勃的互联网经济正蓄势待发进入全新阶段。此情此境,BBVA所迫切需要的,是重新思考银行和客户的关系,并在数字时代重新定义全新的交互范式。

2007年,BBVA的创新战略始于其技术运营部,最初的目标是在银行业引入更多新兴技术,该部门主导了2011年前BBVA的多个数字创新项目。

投资线上客户体验

2008年,BBVA推出了第一个数字项目「Tú Cuentas(意为你的账单)」——一个支出管理的线上产品,线上银行客户可以通过该平台统一管理多种支付手段的个人消费记录。四个月后「Tú Cuentas」获得了初步的成功,近1/3的线上银行客户成为其用户。这一产品有着简单直接的产品逻辑:

  1. 通过数字的方式帮助客户完成一项与个人金融相关的工作(管理支出);
  2. 让客户在数字渠道上停留,产生数据;
  3. 通过数据累积推荐个性化的其他个人金融产品;
  4. 逐步开放给非客户,适应其支出管理的需求,成为获客数字渠道。

(图2:BBVA的Tú Cuentas可以让客户统一分析多个账户的收支情况)

开放创新平台

Tú Cuentas的成功让BBVA开始意识到,如果要寻找BBVA在数字时代的定位,必须先要回到消费者身边。2009年2月,首届「Open Talent」的创新大赛举办,总共375个项目被启动。有趣的是,首届大赛的冠军Pidecita并非金融领域创新,而是一家为线上预定提供解决方案的创业公司,这也显示了BBVA对消费者端到端体验的重视程度。

至今Open Talent已经成为超过80个国家参与,金融创新领域最大的赛事之一,源源不断向BBVA输出创意和新一代数字人才。

(图3:BBVA的Open Talent大赛已经持续了9年)

人性化的触点体验

2009年,与IDEO合作、历时三年的ABIL项目正式部署,这款完全抛弃了实体键盘操作而改用触摸屏的ATM机引入许多人性化的设计概念,包括一个名为Hero的虚拟助理,以及极致化的交互方式。

(图4:2009 BBVA的ABIL项目启用了触摸屏的ATM机)

2010年,受到ABIL项目中Hero这个虚拟助理的启发,BBVA开始研发新的交互方式,一个名为Lola的全新虚拟助手将在两年后出现在线上银行的右下角,Lola以对话的形式辅助客户完成操作,这比后来的Conversational UI的兴起整整提前7年。

(图5: BBVA的Lola是一个虚拟的助理,通过对话的方式完成超过65%的线上银行服务)

人性化是BBVA在2012年以前的重要主题。2011年11月,BBVA推出了具有里程碑意义的个人金融服务平台:BBVA Contigo Adviser。这个平台使得客户随时随地通过手机与金融顾问互动,这个平台背后是大量系统的集成,也意味着BBVA在2012年以前就已完成了多个核心系统的整合,最终实现了客户与银行交互方式的重大变革。

(图6: BBVA的 Contigo Adviser,使得客户可随时随地与金融顾问互动)

在2008到2011年,BBVA在客户交互方式上进行了重大投入,从Hero、到Lola、再到Contigo,一个个虚拟角色创造了全新的交互范式,这是BBVA数字十年的第一个里程碑,即交互范式的再造。

2012~2015年:商业模式再造

多个创新项目的成功,以及Open Talent创新大赛的持续举办,使得BBVA拥有了客户的口碑、数字化专业人才、以及广泛的合作网络。在此基础之上,BBVA很快意识到创新应该与最高优先级的业务目标紧密结合,遂采取了一系列措施来进行业务模式再造,以让创新投资真正能为企业带来业务红利。

将数字化能力引入到核心业务

2012年,一支隶属国际事业部(Global Banking)下的独立创新团队正式成立,重点不再是技术导入,而是和IT部门紧密合作,将数字化能力引入企业最重要的业务领域,例如支付和渠道经营。

作为在支付领域的重要投入,BBVA推出其第一个移动现金平台「Efectivo Móvil(Mobile Cash)」。付款人通过Efectivo Móvil生成一个短信代码发送给收款人,收款人再用这个短信代码在任意一个西班牙的ATM机完成取现。

(图7: BBVA的第一个移动现金平台Efectivo Móvil)

2013年,BBVA继续加码移动支付领域,推出旗下数字钱包「Wallet」,Wallet使得用户可以在手机应用中管理各种银行卡,并实现线上支付、手机线下近场支付(通过一个特别的贴纸)。

(图8: 2013年BBVA推出的数字钱包Wallet)

2013年BBVA对于技术的投入高达24亿欧元,是2006年的两倍,对核心领域的数字化投资获得显著成效,当年,其数字银行平台每天处理2.5亿笔交易,为2006年的近2.8倍

大规模资本运作

商业模式再造除了对于核心业务领域的投入,还包括一连串的资本运作,通过资本快速获得智力资源。2014年2月,BBVA通过117亿美元收购美国纯数字银行Simple

(图9: 2014年BBVA收购数字银行Simple)

次年,以4500万英镑购置英国纯移动银行 Atom Bank 29.5%股权。

(图10: 2015年BBVA购置Atom Bank 29.5%的股权)

2013年BBVA投资1亿美元成立旗下风险投资部门BBVA Ventures,将着重投资金融科技领域的创业公司。三年时间里,BBVA完成的主要投资有:

进入大数据领域

2014年,BBVA将开放平台作为商业模式再造的第三种战略投资,正式成立大数据公司BBVA Data & Analytics,从2014年起这间公司就开始从交易数据中深度挖掘金融行为和人类社会活动的关系,例如从支付行为看西班牙旅游分布和趋势

(图11: 2014年BBVA成立BBVA Data & Analytics,尝试从支付行为挖掘旅游分布和趋势)

2014年对于数据能力的投入在若干年后转化为BBVA进一步商业模式转型的助推器,真正推动BBVA从一间传统银行逐渐转型为金融信息科技公司。

调整组织战略和品牌定义

商业模式的革新,离不开组织架构的调整和公司战略的支持。2014年,数字银行部门已经发展成一个拥有3000名员工的庞大组织,这个组织拥有市场、技术、设计、人才、文化多种功能,并横跨多个业务部门,致力于推动全组织的数字转型。

2015年,Francisco Gonzalez在当年的股东大会上宣布BBVA的转型目标:「建设21世纪全球最佳数字银行……把BBVA打造成完全数字化的公司」。

至此,BBVA的转型战略逐渐清晰化,即:

  1. 通过多项投资组合(包含数字销售、客户体验、分销渠道、数字能力、基础设施、组织文化)在内部驱动业务转型;
  2. 通过风险投资(包括内部投资、外部投资和收购)在内部挖潜或外部快速获得智力资源。

(图12: 2015年BBVA的数字转型目标与投资组合)

2015年最后一个季度,BBVA在已有的数字化成果上继续调整其转型目标,正式提出了其数字化转型的核心价值定位——「把机会赋予所有人(Our purpose is to bring the age of opportunity to everyone)」,并详细解读了其意涵:

  1. To Bring:BBVA的策略,即将资本、工具、产品、和建议作为能力赋予;
  2. To Everyone:BBVA服务的对象是所有个人、家庭、创业者、企业主、公众服务或私营企业、还包括BBVA的员工;
  3. The Age of Opportunity:技术的核心价值为这个社会带来无限可能;

这个核心价值,在2017年正式上升为核心品牌价值——「创造机会」甚至被放入公司的标识,成为数字转型近几年的指南针,这也标志BBVA的数字转型真正进入公司品牌核心。

(图13: 2017年,“创造机会”成为BBVA的数字转型的指南针)

2016~2018年:全面推动开放银行

经过8年的数字转型,BBVA的业务已经发生了显著变化,在移动端的投入使得门店活动(Branch Activity)的比例下降到2016年3月的41%,比2013年下降20%;同期移动端用户达到940万,较上年增幅高达45%。稳步增长的数字渠道使用比例,使得BBVA有能力通过数字化真正实现品牌的新意涵——创造机会。其具体实施包含如下几个方面:

资本持续运作

2016年2月,BBVA关闭了原有的风投机构BBVA Ventures,重新投资2.5亿美元建立新的投资机构Propel Venture Partners,背后的原因有:一为BBVA希望风投机构脱离母体更加独立运作,二为在独立运作后获得更大的投资权。此点也体现出公司对于资本运作专业化、独立化、规模化的战略要求

目前,Propel管理着17家不同类型创业公司的股份,类型覆盖区块链、数字签名、保险、理财、员工福利等,为BBVA提供技术、客户体验、和解决方案的可能性,它们包括:

(图14: BBVA新的投资机构Propel管理者17家不同类型创业公司的股份)

其投资组合主要分布企业解决方案、个人金融产品、以及客户体验相关工具三个方向,较为均匀的分布体现着BBVA对企业特别是中小企业市场、创新互联网金融产品、以及客户数字体验的战略支持。

(图15: BBVA新的投资机构Propel的投资组合)

资本运作逼迫BBVA走到金融创新的最前沿,倒逼组织内部转型、调整优先级、构建开放的基础设施、寻找下一个业务增长点。

基础设施投资推动平台化

「开放」从数字转型的一开始就成为其核心关键字,从最早的「Open Talent」创新大赛开始,到2014年建立的大数据公司BBVA Data & Analytics,最终演化成独立商业模式。2016年2月,BBVA宣布上线其在后来有深远意义的Open API平台,为互联网金融创业公司提供API接口,最初开放的四个接口包括:

  1. PayStates:聚合BBVA卡支付信息方便第三方数据分析或商业情报;
  2. Connect:为第三方应用授权访问BBVA服务;
  3. Accounts:为第三方应用授权访问BBVA账户信息;
  4. Card:为电商网站绑定BBVA支付方式

开放API基础设施的建设不但帮助BBVA广泛吸纳第三方服务,提供无缝和无处不在的客户体验,也为业务扩张和整合节约大量成本。2016第四季度,BBVA正式宣布对BBVA Compass(美国业务)和2014年收购的美国纯数字银行Simple整合,其背后使用的正是其西班牙银行业务所提供的API。

对技术基础设施的投资从未停止,2016年5月,BBVA宣布与Red Hat合作,在IaaS(Infrastructure-as-a-Service )、PaaS(Platform-as-a-Service)、以及云管理平台等领域进行深入合作;10月,BBVA宣布与Amazon Web Services合作,以获得处理每天5亿4200万笔交易的云计算能力;次月,BBVA与CRM领域巨头Salesforce合作,在西班牙完美实现全手机开户。

在数据领域,BBVA已经开始探索将数据作为企业服务的新模式——2016年11月,「Commerce 360」上线,为中小型企业提供交易(来源于丰富的POS数据)分析能力。

(图16:2016年,BBVA的Commerce 360上线,为中小企业提供交易分析服务)

2017年3月,BBVA宣布设立全球级数据职位(Head of Data),进一步稳固数据能力在全组织的战略地位。

同月,BBVA继续向英国移动银行Atom追加投资,结合自有数据和开放能力,成为在2018年前具备交付开放银行能力的欧洲少数金融机构之一。

一系列在基础设施、平台化、数据方向的投资逐步实现,帮助BBVA在2018年「PSD2(欧盟支付服务指令修正案 Payment Services Directive)」做好准备(注:PSD2即Payment Service Directive 2,欧盟2016年通过该法令,规定在2018年1月13日起欧洲银行必须把支付服务和相关客户数据开放给第三方服务商)。在「开放银行 (Open Banking)」时代,与不断涌现的金融创新颠覆者与替代金融(Alternative Finance)、和互联网巨头竞争,并领导整个传统金融服务业的创新。

写在最后

从2007年BBVA正式启动数字转型,到2015宣布最终数字转型目标的8年时间里,BBVA经历两个显著的阶段:在前一个阶段的四年里,BBVA意识到传统银行出现了身份危机,如何重新定位银行对消费者意味着什么,是数字转型成功的基础。其核心,是「在数字时代,银行应该用怎样的方式与消费者互动」的问题。带着这样的问题,BBVA花了四年时间投入在消费者触点体验上,并在一开始就将创新和开放画上等号。

后四年,转型的目标逐渐转向业务领域,其核心,是「在数字时代,银行该如何演进业务模式以适合和消费者全新互动方式」的问题。在这个阶段,BBVA一方面大幅度投入核心业务(如支付和分销网络)的数字化能力,另一方面大规模对金融科技的创业公司进行资本输出以快速获得智力资源。此外,对数据进行提前投入,为下一阶段商业模式的终极演化提供燃料,并在公司结构和品牌上为转型释放空间。

近两年,BBVA终于有资格挑战数字转型的最高层——「如何让银行成为释放整个社会经济潜力的赋能者,而非利用信息壁垒盈利的中间商」。在这个阶段,BBVA一方面持续进行大规模资本运作,同时在基础设施如数据、开放平台、云计算等领域加大投入,逐步将基础设施平台化,构建全新的商业模式。

(图17:BBVA数字10年,三阶段的核心问题和投资方向)

2018年,BBVA十年转型的领航者,CEO Francisco González 在达沃斯世界经济论坛预言:全世界有2万家银行,但在不远的将来,我们可能不需要这么多。

Francisco González, Executive Chairman BBVA attends a session on ‘The Global Business Context’ during the WEF in Davos on January 23, 2018.

(图18:BBVA CEO Francisco González 在达沃斯世界经济论坛)

银行业百年来构建于信息孤岛上的商业模式,已经远远落后于其他数字化程度更深的行业,未来只有一种商业模式能够成功,这便是BBVA十年来数字转型所一直追求的——「开放」,也是所有数字转型企业的终极目标。

相关推荐:


更多精彩商业洞见,请关注ThoughtWorks商业洞见

Share

基于密码学的数据治理Crypto-based Data Governance

最近得益于区块链在金融领域的火爆效应,Crypto-based currency&transaction改变了金融圈原本“数字货币=数字游戏”的印象,密码学货币不再只是数字货币,它还被赋予了“防篡改、去中心”的特性,但是本质上这些事务都是数据治理问题,只不过从原本的“服务级别”的访问权限校验转入了“数据级别”的完整性校验。其实密码学不只可以在金融业务方面做出贡献,在其他一系列数据治理难题中,我们也可以借鉴其中的一些思路。

下面让我们来回顾一些常见的数据治理问题,以及我们如何使用密码学来解决这些问题。

数据私密性

私密性(Confidentiality),数据作为企业的重要财产已经得到足够的重视,同时作为业务必须的原料又不得不分发到终端。我们既要做好必要的安全防护工作,同时也希望尽可能地灵活管理访问权限,在需要的时候能及时地送达业务场景中消化。

这个防护工作的目的也就是保护数据的私密性。通常有两种方式保障,授权与加密,随着数据量级的增长,私密性变得越来越细粒度。如何划分授权与加密这两种有着明确区分的方案往往被大家混淆,甚至不少开发人员认为授权是加密的一种。

常见的授权(Authorization),包含了验证(Authentication)与访问控制(Access Control)两个部分,验证是指用户或者业务模块通过一个私密的凭证来确保身份,它可以是一个密码,可以是一类数字签名(包括证书),也可以使用相对复杂的双向动态授权协议。

验证后的访问控制则是将数据权限更细粒度地拆分,提供一次性或者短暂性的访问权限,Token作为一个权证只能用来访问其对应权限下的数据,可以防止私密数据过量泄露。而目前一些新的方法中,权证分发本身被改善成了一个数字签名的过程,通过完全的非对称密码系统,让数据提供方原本需要保存的Token,转变为只需要验证访问请求所携带的数字签名就可以获知权限的Certificate/Signature,例如Hyperledger区块链平台就采用这种方式,分别签发Enrollment Certificate和Transaction Certificate为不同的业务场景提供不同的数据访问权限。

授权方案的发展历经了几个阶段(如上图),虽然和出现时间并没有太大关系,TLS早就定义了第三种形式作为分发证书链的模式,我们可以看到在第二种方案中,通过采用token的授权,使得细粒度的授权分发可以和验证分离开来。而第三种方案则更进一步,让双方不需要再传输存储授权凭证,而且整个授权过程可以是一次性的,而不会影响到数据访问。

随着高阶密码学原语的引入,我们甚至可以在验证授权的过程中为用户的访问提供隐私保护,例如通过Dual Receiver Encryption配合Ring Signature可以实现匿名组策略等效果。

加密(Encryption),往往是较为耗时和受限制的数据治理手段,尤其是非对称加密算法,只能针对少量的数据集执行,而对称加密又存在交换秘钥、存储管理秘钥时的隐患。因此作为保护数据私密性的最后手段,我们应该尽量避免滥用误用,常见的误用场景包括试图通过在客户端加密Token来防止用户篡改数据访问权限、试图用加密应用代码的方式保护数据、试图仅依靠对称加密分发数据等等。

常见的加密确保私密性,常常是基于“数据被盗”或者“数据集必须存放在用户端”的假设,“数据被盗”决定了每个数据池都有必要对基础设施进行预防,例如对硬盘加密、选择安全的通信信道和协议、避免秘钥泄露、避免系统人为操作、避免内网服务对外开放、减少私有网络的威胁等等。而“数据集必须存放在用户端”则需要考虑到恶意软件、逆向工程、暴力破解可能造成的数据损失。

数据完整性

完整性(Integrity),说到区块链的一大卖点就是不可篡改,通过确定交易双方身份的Signature、交易顺序的Merkel Hash tree、Block前向完整性(Forward integrity)Hash,三者(如图)组成了一套完整的分布式账本链条,其中每一条、每一页的交易记录之间、页与页之间都由密码学原语保护。这样的一种数据结构设计,为区块链带来了更灵活的去中心结算方案。

将区块链解构之后,我们也可以灵活地将这些密码学原语用于保障常规数据的完整性,尤其可以应对B2B场景下,企业联盟之间的数据共享信任问题,通过完整性校验,可以实现竞争关系下的同业数据融合;通过数字签名,可以为如票据交易、款项去处之类的数据审计提供证据。

大数据分析提高了对数据真实性的要求,密码学提供的完整性校验方案,可以为外来数据治理提供额外的保障。同时由于密码学原语位于设施的底层,因而这一系列的验证审计操作都可以自动化执行,而不需要额外的人力来管理校对。

数据可用性

可用性(Availablity),在数据治理中是一个非常困难的话题,我们可以将数据副本分发到业务微服务中缓存,也可以采用分布式的存储方式,这些都是为了解决单点故障、减少大量数据同步的时间开销,其中Hash Table作为最常见的检索方式,可以同时保障数据的完整性和可用性,数据池可以使用分块的方式将数据分散存储,同时使用Hash来计算出摘要以供后续的检索,通过额外的加密手段,甚至可以实现对等节点的全量和增量数据同步,而不必担心数据的私密泄露。

DynamoDB采用了这种Hash一致性算法,“均匀”地管理数据分片(如图)。Bittorrent网络采用Hashtable来寻找目标文件。Spark-mllib也使用了Hash来进行词频统计,达到数据分治的效果,避免了维护全局term-to-index map的麻烦。

此外,加密后的数据由于可读性问题,很难再做重用,而常见的保护用户敏感信息,并且同时保护数据分析可读性的方法,在微软和苹果等公司都有所尝试,称为Differential privacy(如图),数据分析师在提取数据时,Privacy Guard评估Query Privacy impact,为反馈的数据加上噪音,例如可以使用Hash替换掉真实信息,只保留数据“特征”,减少用户隐私泄露的风险,同时又能保留数据的分析价值。

重返焦点

如果说数据湖是每个企业的金库,那么数据治理的安全措施就是用于搭起金库壁垒的一砖一瓦,每个安全措施之间的紧密粘合都依托于完善和牢固的密码学设计,随着“安全无小事,商场入战场”的警钟不断敲响,从基础设施建设上对数据治理的不断规范化和标准化呼声越来越高,密码学重回技术焦点的日子应该不会太远。


更多商业洞见,请关注微信公众号:思特沃克

Share

数据可视化产生生产力

数据可视化就是借助于图形化手段,清晰有效地进行信息传达与沟通。许多人会着眼于“可视化”,认为数据可视化就是将一系列看上去很炫、很复杂的图表展示在页面上。其实不然,虽然可视化脱离不了各种图表类型,但并不意味着要以增加用户理解难度为代价去实现复杂的功能;或者为了看上去绚丽多彩而失去其最根本的意义:传达与沟通

数据可视化产生生产力

数据可视化之所以会大受欢迎,其原因不仅在于能带给用户良好的的视觉效果,更因为它能够产生生产力,形成数据驱动闭环,主要包含以下几个阶段:

  • 技术人员运用技术手段将需求分析、基础数据整合、数据计算等操作结合到一起进行数据可视化,实时监控数据的变化情况。
  • 用户能够使用这些可视化图表,进行分析、对比等操作,定位业务问题。之后再结合业务变动提出新的需求。
  • 技术人员将用户访问数据与新的业务需求结合,重新进行数据整合、分析、计算,循环往复下去。

如下图所示:

图1. 数据驱动闭环

实现用数据可视化的方式不断驱动业务的提升,产生生产力、创造收益。

如何使数据可视化产生生产力?

满足这一目的的前提在于--“创造出都能读懂、易于操作、能够提前预警的图表”,关键因素有以下几点:

1、选择合适的图表类型

选择图表的时候,许多人认为基本图表太过简单,不够高端大气,因而更倾向选择复杂的图表类型。实际上越简单的图表越容易理解,对用户的友好程度越高。只要能够高效清楚地传达业务含义,就应该优先选择。

例如,饼图比较适合反映某个部分占整体的比重,而折线图能更好的反应数据变化的趋势;分组柱状图和堆叠柱状图都能够显示数据集的分组情况,但是彼此间的差异却让它们在特定情况下显得更加强大。在比较同一分类不同组的数据或者同组不同分类的数据时,分组柱状图更能体现优势;然而在比较每个分组之间的总量时,堆叠柱状图显然更加合适。下面分别使用这两种图表在展示不同地区、不同年龄段人口数量分布时显示的效果:

图2. 分组柱状图(Grouped Bar Chart)

图片来自:https://bl.ocks.org/mbostock/3887051

图3. 堆叠柱状图(Stacked Bar Chart)

图片来自:https://bl.ocks.org/mbostock/3886208

要想让受众读懂图表所表达的业务含义,就要选择合适的图表类型。在选择时,首先需要清楚的知道不同图表的优劣以及它们适合的应用场景;除此之外尽量选择一些简单的、易于理解的图表类型。但这不意味着不能选择复杂的图表类型,有的图表虽然看起来比较复杂,但是却能很好的反映一些业务场景,再辅助一些文字说明等其他手段,降低用户的使用难度,也未尝不可。

选择图表时,以业务为基础。只要能够清晰地表达业务数据背后含义,不让用户产生歧义,都值得考虑。

2、易用的、多维度的交互分析

随着数据类型的多样化,数据间的关联关系也越来越复杂。仅仅展示单维度的数据,是无法让用户轻易发现数据之间的联系、挖掘出更多业务价值的。同样,若是交互方式过于复杂,也只会增加用户的使用难度而已,不利于业务长期发展。因此易操作的、多维度的交互分析对于数据可视化来说必不可少。多维度的分析方式有很多种,以下是常见的几种:

  • 钻取: 将汇总数据拆分到更细节的数据;在维的不同层次间的变化,从上层降到下一层。
  • 上卷: 钻取的逆操作,即从细粒度数据向高层的聚合。
  • 切片: 选择维中特定的值进行分析。
  • 切块:选择维中特定区间的数据或者某批特定值进行分析。
  • 筛选: 通过不同的维度或者类别过滤出用户想要的数据。
  • 联动:若干个相关联的图表,一个图表发生变化,其他的也会跟着发生变化。

下面是一些图表的样例:

图4. 树图(不同数据层次,可以进行数据的钻取、上卷的等等操作)

(图片来自:https://bl.ocks.org/mbostock/1093025

图5. 同步联动图(图中显示的是在某一到达距离时的速度、高度以及心率)

(图片来自:http://t.cn/RoUdHCX

有选择的将不同交互方式进行结合,能够发挥出更强大的作用。再辅助高效灵活的追加合并、拖曳式操作进行数据的挖掘分析,就可以帮助用户快速定位问题,释放劳动力,提升效率,不再需要程序员花费大量精力在日志文件中寻找问题的原因。同时通过各类数据的横向、纵向对比,业务人员能够从中挖掘出更多的业务需求,创造更大的商业价值。

3、预警功能

数据可视化除了能够帮助定位已有的问题,另外一个更大的价值是能够及时预警。

一旦数据出现异常或者是提前预定义的一些条件被满足时,警报就会被触发,提前预警。通过设置报警方式、报警策略、报警等级等等,根据紧急程度用不同的方式通知特定的人群。这样在问题发生之前,就能预先做好防护措施;或者在问题发生的时候,能够及时通知负责人,尽快解决问题。这样不仅能缩短反馈周期(发现问题-找到责任人-定位问题-解决问题),也能降低对用户的影响,提升用户对产品的信任度,很好的降低业务损失。

总结

除了上述提到的一些关键因素,好的数据可视化平台、产品也有许多其他的共性: 友好的用户体验设计,页面的交互逻辑要符合真实的用户路径; 可以多终端使用 ,尤其要能契合移动端体验的可视化设计实现,使得人与数据零距离,随时随地可用;强大的数据整合、计算、渲染能力,就算图表表达的业务含义再精确,性能的缺失也是致命的。 支持多种数据源整合、多数据类型的扩展等等。 对产品用户使用情况进行监控、分析。了解真实用户人群、用户路径、用户的核心关注点,帮助产品进行改善

总之,好的数据可视化,就是要以用户为中心。根据目标用户的需求提炼业务需求,以用户的良好体验为目标,绘制出人人都能读懂的图表;以人人都会的交互方式,帮助用户挖掘业务价值,提升工作效率,促进业务持续发展,让数据可视化产生生产力。


更多精彩洞见,请关注微信公众号:思特沃克

Share

半个世纪前的大数据时代

马云在最近的一次公开演讲中谈到市场经济与计划经济的比较:“我们过去的一百多年来一直觉得市场经济非常之好,我个人看法未来三十年会发生很大的变化,计划经济将会越来越大。为什么?因为数据的获取,我们对一个国家市场这只无形的手有可能被我们发现。”

(图片来自:http://data.ucop.edu/)

这听起来是一个相当大胆、甚至有科幻感的设想:如果能用深入基层的信息终端采集生产和消费数据,用全国连通的网络汇总经济数据,用数据分析软件识别和预测经济异常波动,在国家经济尺度上实时统筹和调整计划,那么近百年来计划经济面临的最大挑战“经济计算问题”有可能得到彻底解决,从而使计划经济有可能成为一种可行的、甚至更优于市场经济的方案。然而更显科幻的是,早在近半个世纪前的1970年代初期,在南美的智利,这样一个意在掌控全国经济的“大数据”系统已经被设计并实现出来了。

故事从1970年开始。在这一年的智利大选中,萨尔瓦多·阿连德被选为总统,并立即开始推行被称为“智利社会主义之路”的规划。在一系列的改革政策中,最为重要的是对大型企业(包括智利经济支柱的铜矿业)的国有化。这一改革进程很快遭遇了困难,原因不是企业主抗拒国有化,而是国有化进行得太顺利,政府很快发现自己没有足够的人才来对新生的国有企业进行整体调控。面对挑战,阿连德产生了一个大胆的构想:如果仅靠人不足以有效管理国家尺度的经济,再加上技术的支持如何?

(图片来自:http://t.cn/RadFix9)

阿连德看中的技术是控制论。1948年,控制论这门学科的创始人诺伯特·维纳将其定义为“关于动物和机器中控制和通信的科学”。在二战中,控制论的理论与技术被用于研发防空火控系统——人手操作的高射炮很难准确命中敌方战机,而维纳设计的计算机系统则可以采集敌机飞行的数据、并实时预测敌机的飞行路线、进而自动操作高射炮击中敌机。维纳事后总结,这项研究的核心在于“预测未来”:“预测一个消息的未来,就是用某种算符去运算这个消息的过去……最优预测问题的解决仅仅取决于要加以预测的时间序列的统计性质”。这门新兴学科让阿连德看到了希望:如果控制论可以用于实现防空火控系统这样实时的、复杂的、涉及大量人为因素(驾驶战机的都是由经验丰富且绝对不想被击落的飞行员)的自动化系统,它是否能被用于其他实时的、复杂的、涉及大量人为因素的领域——比如说,经济计划?

在寻找合适的技术领导者的过程中,阿连德的政治乌托邦愿景也吸引了英国控制论学者斯塔福·比尔的兴趣。尽管美国政府对“社会主义”这个字眼极度紧张,不惜以各种政治、经济手段扼杀阿连德的改革政策,阿连德所构想的其实是介于美苏两个超级大国、两种意识形态之间的“第三条路线”,一种既能全面提升智利经济和人民生活水平、又不损害智利保持四十年的民主自由氛围的两全方案。1971年,比尔和阿连德政府开始了合作,在这个政治乌托邦愿景之上又加上了一个科技乌托邦的愿景:构建一个计算机系统来实施调控国家经济——在互联网普及之前二十年。

以维纳为代表的控制论学者经常用人体作为类比。例如维纳这样谈论一个基本的控制论系统:“为了能对外界产生有效的动作,重要的不仅是我们必须具有良好的效应器,而且必须把效应器的动作情况恰当地回报给中枢神经系统,而这些报告的内容必须适当地和其他来自感官的信息组合起来,以便对效应器产生一个适当的调节输出。”比尔则对这一结构进一步深化,提出了“可生存系统模型”的概念。在这一模型中,组成一个系统的各个部件被分为5级子系统:系统1到系统3分别负责感知、信息传导、以及监控和协作的功能,系统4和系统5则负责常规运作层面之上的、有目的的管理和治理职能。比尔用生理学的类比来解释这个模型(如下图),并认为同样的模型也适用于企业和国家经济。

比尔的另一个理论基础是他在1970年的一次主题演讲中提出的“自由机器”理论。所谓自由机器,是这样一种社会-科技系统:它以网络的形式运行,而非层级结构;其中作为行动基础的是信息,而非权力;各个领域的专家知识和实时的信息反馈驱动决策,从而消除官僚体制存在的必要性。比尔甚至构想了在政府机构中这样的自由机器如何实现:它应该是一系列的指挥室,每个指挥室中实时接收和呈现来自各个子系统的信息,指挥室中的各领域专家则基于这些信息提出猜想、并运行模拟程序来验证这些猜想,由猜想汇集而成的决策再从指挥室实时传递到国民经济第一线。

基于可生存系统模型和自由机器理论,比尔的团队向阿连德政府提出了一个系统设计的方案。在他们建议的系统中,国有企业和政府之间会新建起数字化通信的渠道,用于传输实时的生产数据;这些数据随后被送进统计软件程序,用于预测工厂的生产效能,从而使政府能够提前识别和应对异常情况;系统中还包含一个计算机实现的经济模拟器,让政策制订者能够在真正实施他们的经济措施前先在模型中测试;最后,他们还提议建设一个充满未来感的指挥室,让政策制订者们能够聚集在其中,快速掌握国民经济运行的状态,并在数据的支持下快速做出决策。

只有当我们从资料图片中看到这个指挥室,我们才能直观地感受到比尔所说的“未来感”是什么意思。这个建成于1972年的指挥室看上去就像《星际迷航》里“企业号”的舰桥,其中大量塑料与玻璃纤维材质的使用、环绕四周的显示屏、座椅扶手上简洁的操作按钮,都与这个项目的愿景一样,充满了不真实感,就像一部科幻电影。

只是,这不是科幻电影,而是历史上真实存在过的一个IT系统。新生的社会主义智利政府和来自英国的科学家冀望基于这个系统平衡个体自由与自上而下的控制:既保持个人的主观能动性,又使个体为组织(企业或国家)的整体利益共同奋斗、乃至作出必要的牺牲。在智利之外,很多进步人士相信智利能通过经济上的改革探索出一条政治上和意识形态上的“第三条路”,甚至成为冷战的一条出路。阿连德和比尔的IT系统会走向何方,历史在静静注视。

站在近半个世纪之后回望这段尘封的历史,我会感到一阵莫名的激动。今天IT技术飞速发展,然而我们看见的却是技术日益被掌握在极少数人手里、并被用于为这部分人牟利。技术发展越是日新月异,这道鸿沟就越是触目惊心。难道IT技术的发展就注定伴随着不平等的加剧?难道程序员统治的黑暗世界是无可避免的唯一未来?这一前景让作为技术工作者的我感到灰心。而阿连德与比尔、一个智利人与一个英国人、一个政治家与一个科学家、一个政治乌托邦梦想与一个科技乌托邦梦想的交汇处,这段几乎已被遗忘的历史让我们重新看到希望:为技术赋予政治和社会的正面意义、用技术创造更公正的世界,思考这个问题的不是只有我们。

如果今天的一位IT架构师来设计这个名为“Cybersyn”的系统,也许他会参考IBM的商业技术趋势研究提出一个方案,其中个人移动设备和物联网设备被用于在工厂采集实时的生产数据,数据通过互联网汇集到位于云端的数据库,用大数据和机器学习技术对数据进行加工、分析和预测,并借助社交网络创造政府、企业与工人和谐共处的社会与经济环境。

尽管互联网和手机的时代还有几十年才会到来,比尔提出的方案却与现代的架构方案如出一辙。于是我们不禁要好奇:他所领导的这支团队会如何构建连接厂矿与中央政府的网络,又会用什么技术来实现数据分析与预测功能?当比尔宣称Cybersyn会同时兼顾国家经济运行效率与个人的民主和自由,什么技术能让他掌握全国民众的情绪涨落?


更多精彩洞见,请关注微信公众号:思特沃克

Share

信息爆炸?云上的机器人连接一切

前段时间,一条科技新闻惊爆整个互联网:微软举债262亿美元现金收购LinkedIn,创下科技史上收购价第三高的纪录。

为何要收购?微软CEO Satya Nadella在公开信中指出,“This deal brings together the world’s leading professional cloud with the world’s leading professional network.”依托世界上最大的专业化服务云与最大的专业化关系网,微软与LinkedIn走到一起,应用、数据与人连接在一起,将有可能构筑一个前所未有的智能、专业化生态。

无独有偶,在同一天的苹果WWDC大会上,苹果一口气发布了MacOS、iOS、WatchOS、tvOS四大操作系统。其中,最受关注的却是Siri、iMessage等软件的开放API。

1-api

从iPhone 4S时代走来的Siri第一个扛起“AI个人智能助理”的大旗,却接连被Microsoft Cortana、Amazon Echo、Google Allo等甩在身后。于是,苹果正式发布了Siri API,不久之后便可用它叫车、外卖、搜图、支付等。这一次,苹果希望以Siri为中心,将应用、数据连接在一起,重新构建真正的智能生活。

人类的历史就是一部信息传递与处理的历史。长城上的烽火把帝国的边疆阡陌连在一起,丝绸之路上的商人旅客让欧亚大陆连在一起,电话让登月的人类第一次从太空与地面进行沟通,互联网更是让人足不出户了然天下事……信息的载体从光、人、物、电磁波进化成了现代0和1的bit数字。与此同时,信息的范畴外延无比放大,从军情公文、家书鱼雁、各种软件数据到量化物体(物联网)、量化人类自己(可穿戴设备)……信息外延到了宏观的宇宙世界,又触及了微观的纳米世界。两波浪潮碰撞在一起,人类面对的是一个海量、碎片、实时、数字化的信息爆炸时代。

“弱水三千,取一瓢饮”,信息爆炸时代,人类要如何完成信息的高效处理?曾经的人类通过层级化的组织结构来小心地控制信息的输入与输出,现在的人类通过资源池化的信息引擎来完成信息的屏蔽过滤。然而,当万物连接的信息洪潮遮天蔽日地过来,曾经的组织和个体仿佛风雨中飘摇的枯叶一般弱不禁风,人类需要如何应对?在电影《环太平洋》中,面对宇宙中的洪荒巨兽,人类的机甲猎人被摧枯拉朽。这是否是人类的最终命运?

%e5%b1%8f%e5%b9%95%e5%bf%ab%e7%85%a7-2016-09-13-%e4%b8%8a%e5%8d%8811-47-45

问题太宏大,人类仍然需要回顾过去的经验,从历史的幽光中挖掘可能的解决办法。刘慈欣在科幻作品《三体》中讲述了一个科幻的故事:秦始皇的千万大军,通过黑白小旗和士兵矩阵,组建了与、或、非门,设计了一款人体计算机对微积分方程进行求解。这让我们不由沉思——低效的人类组织和协作,只要通过一些简单的规则,就可以对复杂的问题进行计算;同样,基于这些简单的规则,简单的元组件组合在一起,就能代替低效的人类组织和协作。

我们再来看看传统信息传递和处理的典型案例“长城烽火”。当敌人侵犯,守卫发现敌情,点燃烽火;附近的烽火台守卫看到烽火,点燃第二级烽火……以此类推,直到军队支援,消灭入侵敌人,消灭险情,烽火熄灭。整个过程主要涉及了如下的要素:

对象 职责 角色
烽火 烽火即警报,点燃烽火即为告警 信息协议,包括接口和格式
守卫 向烽火台网络里面输入敌情的告警信息 信息输入者
军队 处理烽火台网络输出的敌情告警信息 信息处理者
烽火台网络 确保敌情告警信息的正确传递和处理 信息传递、升级和协作体系

因此,我们可以抽象出信息处理的四个基本要素:协议、监控器、处理器,以及基于协议、由监听器和处理器组成的网络。无论是烽火狼烟,抑或是模电数电,都是基于下面的范式进行信息的采集、传递和处理,区别只在于效率和规模。面对“海量、碎片、实时、数字化”的信息洪潮,人类的终极信仰跃然纸上:云、机器人、API。

1-cloud

KK在《失控》中指出,“人造物越来越接近生命体,生命体越来越程序化。”连接和智能成为时代的主旋律,微软、苹果、腾讯、谷歌、阿里、百度……这些科技界巨头们无不提前进行结构性布局。多边平台的参与者越多,边际成本越低,网络效益最高。这也是为什么我们看到,微软不惜举债收购LinkedIn和Skype、苹果将Siri作为下一代个人智能助理的核心、腾讯将微信定位为“连接一切”……

外面的Interface很简单,但背后不显山不露水的恰恰是里子——微软的Azure和Office365云、苹果的iCloud、腾讯的腾讯云……微软、苹果、腾讯背靠各自的云和服务,坐拥无数的用户,或许正如唐太宗看见新晋进士鱼贯而出,得意洋洋地说道,“天下英雄,入吾彀中矣”。

尾声

在行文结束之前,我们再回顾一下本文的主要观点:

  • 人类需要处理的信息源将来自于自然万物:机器、软件应用、人体自己等等;
  • 海量、碎片、实时、数字化信息处理的核心在于云、程序性机器人和API接口;
  • 领先的科技公司都在这一战略逻辑之下进行结构性布局:建设云平台、将各种服务固化为程序性机器人、扩展与人类的信息输入和输出接口。

如果说微软通过Azure、Office365与LinkedIn连接是帮助职场专业人士更高效地完成办公信息的传递和处理,苹果的Siri API连接是帮助普罗消费者更高效地完成个人生活信息的传递和处理,软件研发运维的信息传递和处理如何实现呢?我们能否让每一位ThoughtWorker,从TechOps、到PS、再到TOC人员,都生出三头六臂?

 

Share