En Ru Ar Cn
产品中心
对标Fivetran Tapdata 凭什么做到实时数据赛道No1?
发布时间: 2024-02-15 01:07:29 来源: 经济系列

  数据管理并不是一个新领域,从企业建立数据仓库开始,数据管理这个词就已经存在。只不过,在传统数据整合工具及技术架构下,“让用户使用数据像使用水和电一样简单”,还仅是一个美好愿景,很多企业距离这个目标相差十万八千里,这给技术创新带了新的契机。尤其是,随企业数字化转型步伐的加快,数据的互联互通成为刚需,慢慢的变多的企业希望打通企业的关键数据源,构建自己的护城河。

  为用户解决一切复杂的数据处理过程,从源头上打造更简单易用、方便快捷的 “炼油厂”,Fivetran与Tapdata都是在这样的背景下诞生!

  2012年,在Hadoop还处于大数据革命暴风眼时刻,一家专注于打造“数据管道”的公司“异军突起”,此公司就是来自大洋彼岸的Fivetran!凭借不同于Hadoop、AWS Athena的数据湖路线,使用SQL(被广泛支持的数仓语言)统一用户的Transform、Analytics卓越体验,Fivetran被称为是当时的ETL新派玩家。

  十年之后,Fivetran已是福布斯未来独角兽上榜企业,拥有56亿美元估值。凭借ELT+E独特的数据整合能力,Fivetran不仅与Snowflake、IBM、SAP、Oracle数据库或数据仓库实现了连接,还与ASICS、Autodesk、DocuSign等世界知名公司成立了合作伙伴关系。

  在中国,也有这样一个企业,试图在实时数据服务领域打造具有自主知识产权的“中国方案”。Tapdata,相信圈内人士并不会感到陌生!

  像自来水管一样连接数据,当业务有需要,拧开水龙头(Tap),就能得到新鲜的数据,Tapdata已成为实时数据服务的“代名词”。凭借独特的DaaS 架构理念,Tapdata可以让源和目标库之间的数据达到最高亚秒级延迟,并提供合并、清洗、转化,以及数据建模、治理等实时的数据处理能力,最终让用户以低代码作业的方式实现数据发布。

  Tapdata的核心成员主要由海归人士、国内知名技术专家组成。公司创始人唐建法曾是MongoDB 大中华区首席架构师、现任MongoDB 中文社区主席,也是开源项目 Angoose 的作者。除了创始人身份不凡,团队的别的核心成员,也都来自业内有名的公司,包括Oracle、百度、阿里、腾讯等。

  Tapdata成立于2019年9月,虽然还不到三年,但经历了三轮融资。首轮千万融资来自极客公园旗下变量资本等投资机构;2021年,公司获得五源资本独家领投及XVC、德联资本联合领投的数千万美元 PreA 及PreA+轮投资。2021 年,Tapdata已经实现超过千万的营收,为中国移动、中国一汽、周生生、中国联通、南方电网、中国建筑等大规模的公司提供了专业化服务。

  可以说,无论是从发展历史、产品服务、业务模式,还是从资本实力和增长方式来看,两家公司都有太多的相似之处。很多人可能会问,两家公司快速成长的背后推动力是什么?什么才是数据集成类企业的生命力?究其根本,“简化数据管理,让数据流动起来”,应该是新兴数据集成类企业的共同成长基因,也是在群雄逐鹿的市场之间的竞争中能够脱颖而出的秘密武器。

  至于,Tapdata为什么敢于对标Fivetran,自然有自己的独特之处!

  Tapdata 与 Fivetran,虽然两家企业成立时间不同,但都是新数据技术背景下孕育出来的优秀公司,都在打造灵活、易用以及极度高效的”“数据管道” 。只不过,Tapdata的核心理念是“数据即服务”,比“数据管道”的理念要更进一步,让客户从关注管道如何建设的层面,上升到只关心要哪一些数据、如何用好这一些数据,Tapdata可以实时地将数据送达到客户指定的任何应用场景上。简单理解,Tapdata不仅解决了企业的数据孤岛问题,还能让数据价值得以释放!

  另外,两家公司的产品策略不同,打法也不一样。Fivetran 主打的业务场景是云上数仓,也就是从云业务开始起步,主攻数据仓库这个赛道;而 Tapdata 是从打造本地化的 DaaS 实时数据服务平台开始,重点是实时数据的集成与开发。

  大体来看,DaaS 还是一个新兴领域,只有美国的 Dremio 和 Tibco 推出了类似业务,但这两家企业只是把实时 DaaS 当作众多产品线中的一个分支。所以,严格来说,主推面向OLTP(Online transaction processing)场景的实时 DaaS 架构并拥有完整团队的企业,Tapdata 其实是业内第一家。尤其在国内,致力于实时数据领域的企业更是凤毛麟角。目前,Tapdata 正在持续巩固实时数据赛道领跑者地位,实时集成能力已经涵盖了主流的数据库、消息中间件、云上数据库以及国产数据库等,并投入更多资源来打造开放平台以支持未来数以千计的数据源。

  ▲Tapdata 能将多源异构数据在亚秒级内为完成集成&处理,并实时为下游 AP 或 TP 业务供数

  当然,之后的发展过程说明,从哪里起步并不重要,重要的是最终目的地是哪里。为了具备关键业务流程整合能力,Fivetran 收购了 HVR,补齐其实时数据能力;而 Tapdata 在此之前就更聚焦实时数据,拥有包括基于日志的实时同步管道,低代码流式数据开发和数据 API 服务三大能力模块。相较于Fivetran 从 ETL/ELT 开始,专注为数仓以批量方式提供数据,Tapdata 更关注高价值数据的实时服务,而数据管道本身的搭建则是顺带提供的服务。

  值得一提的是,在 OLTP 核心业务解决能力上,Tapdata 的数据处理能达到亚秒级。比如:Oracle 数据库的数据在源头发生了变化,在零点几秒的时候,数据已同步到主数据平台,完成了整个数据的更新,并且对外提供服务。所以,技术架构的变化,不仅为业务带来高时效性,也带来了商业模式的重大革新。

  然而,如何成为实时数据赛道的No1?除了技术实力硬核、产品经受市场广泛验证以外,能否被上下游用户及伙伴普遍认知和应用,也是一项重要评判标准。Tapdata 的战略是,秉承“开源、开放”原则,从而加速 DaaS 的普及,只是,Tapdata没有直接开源,而是在国内率先推出 Tapdata Cloud ,将异构数据实时同步能力以免费开放的形式,为用户更好的提供开箱即用的 SaaS 服务。

  “如果说商业化是最终目标,那‘开源’和‘开放’就是两个重要抓手。”Tapdata产品合伙人徐亮 解释道,Tapdata Cloud 的核心理念是开放,让一些技术实力不足的公司或者用户,能快速、方便地打造数据管道,实现数据实时同步目标。

  对大多数用户而言,使用 SaaS 同步工具首先会考虑数据的安全问题。如何让数据不经过云平台网络,让源数据直接到目标数据?这归功于TCM (Tapdata Cloud Manager)+ Tapdata Agent 架构,Tapdata Agent 可以运行在用户更好的提供的服务器上,并且通过TCM的调度,在用户可控的网络环境下自动同步和处理数据。

  也就是说,Tapdata 的 Agent 能够部署到用户本地的环境里,进而全面确保用户的数据安全,不管是服务器,还是数据,都不会暴露在外部网络上,这也是云化模式下用户确保数据安全性的特有架构。在部署结构上,我们大家可以理解为是一个私有云环境,但是会和 TCM 之间有一个单向的通信,把一些程序、状态类的信息报上去,解决应用需求问题,但数据会留在本地。TCM主要的工作就是管理,用户都能够在平台上注册,定义自己的任务,等到真正执行同步任务的时候,所有数据都在用户本地流转。

  如此一来,Tapdata Cloud “TCM + Agent 架构”不仅最大化支持了异构数据的同步(包括全量同步、增量同步、断点续传等),还能在全面确保数据安全的前提下,以在线服务的方式提供给用户使用,0代码可视化的操作界面,哪怕是业务人员也能快速上手使用,不要专业的编程能力。

  至于,Tapdata Cloud为何需要免费?最终目标其实还是要实现商业经济价值转化。

  简单理解,Tapdata Cloud 的目标客户是中小企业CIO以及业务层人员;Tapdata 开源版本(即将发布),面向的用户是技术专家级别,研发人员可以基于源码进行应用构建。而免费,能够迅速影响潜在用户,让不同人群全方面接触Tapdata,构建符合自己业务需求的应用场景。

  目前,Tapdata Cloud已正式对外开放,用户在官网注册 Tapdata Cloud账号,即可通过 SaaS 管理后台在用户本地网络环境部署 Tapdata agent ,以此来实现异构数据免费实时同步。相对于同种类型的产品,Tapdata Cloud 的落地速度更快,用户不要维护,直接用即可。

  从2021年10月份公测以来,Tapdata Cloud已经有几千家企业用户在测试和使用,包括电商企业、社区团购、智能交通、营销传媒、SaaS软件企业等。主要解决跨系统之间的数据实时同步/备份/迁移、集成和实时分析等问题。比如常见的场景有:

  那么,具体而言,用户是怎么样去使用Tapdata Cloud?又是怎么来实现商业化转换的呢?

  以某国内龙头工程机械制造企业为例,企业对数据及应用有严格的安全要求,如何明智的选择适合企业的产品? 他们会基于 Tapdata Cloud 来测试,等到功能和场景基本满足后,最终产生了使用企业版的需求。而对于数据规模不大的企业来说,比如一天只有几十万或者上百万条,就会把业务直接跑在Tapdata Cloud 上。

  尽管,在实时数据服务领域,既有传统管理软件企业,又有后来的新兴公司,甚至一些提供云服务的企业也在跃跃欲试,但在新的技术架构和应用工具下,尤其在实时、DaaS架构下,Tapdata没有一家可以直接竞争的对手。

  相对于 Fivetran 的“数据管道”模式,Tapdata 正创造性地将实时数据融合和实时数据应用相结合,为用户更好的提供数据即服务(DaaS),并且把具有自主知识产权、业界领先的“中国方案”向用户开放,让数据同步不再是单一的复制,而可以基于实时数据实现更多业务创新的可能。尤其企业应用上云后,业务场景变得更复杂,怎么来实现各种异构数据的实时打通、高效应用,将成为新挑战。而 Tapdata 正凭借更广泛的连接和实时解决能力、实时数据发布能力,逐步改变用户的使用习惯,不再通过复杂的开源工具自己去开发,而是通过像 Tapdata 这样的平台,进行低代码、可视化地进行数据开发,极大地降低了数据准备阶段的难度和精力,从而最大化挖掘数据价值。

  至此,Tapdata已经给出了适应未来十年的下一代数据集成架构方案。返回搜狐,查看更加多

上一篇:tp钱包app官方下载

下一篇:新东方培训师牛津剑桥访学见闻录

Copyright 2020-2023 © 牛牛体育-足球直播 All Rights Reserved. 技术支持:网站地图 浙ICP备05005516号-1