Tapdata 技术博客
Tapdata 技术博客

如何使用 Tapdata Cloud 快速实现 SQL Server 到 BigQuery 的数据实时同步

2023-06-16 15:38

第一步:登录 Tapdata Cloud


Tapdata 可视化工作台


* 默认已完成 Tapdata Cloud 账号注册及 Agent 部署

* 确保 Tapdata Agent 所属机器可访问 Google 云服务,例如可将 Agent 安装至海外服务器。


第二步:创建数据源 SQL Server 的连接


点击创建连接

选择数据源 SQL Server


在 Tapdata Cloud 连接管理菜单栏,点击【创建连接】按钮, 在弹出的窗口中选择 SQL Server 数据库,并点击确定。


参考右侧【连接配置帮助】,完成连接创建:


参考连接配置帮助,完成连接创建


第三步:创建数据目标 BigQuery 的连接


1. 在 Tapdata Cloud 连接管理右侧菜单栏,点击【创建连接】按钮,在弹出的窗口中选择 BigQuery,并点击确定


2. 根据已获取的服务账号,在配置中输入 Google Cloud 相关信息,详细说明如下:


创建 BigQuery 的连接

  • 连接名称:填写具有业务意义的独有名称。

  • 连接类型:目前仅支持作为目标

  • 访问账号(JSON):用文本编辑器打开您在准备工作中下载的密钥文件,将其复制粘贴进该文本框中。

  • 数据集 ID:选择 BigQuery 中已有的数据集。(输入服务账号后, 即可列出全部数据集)

  • agent 设置:选择平台自动分配,如有多个 Agent,请手动指定可访问 Google 云服务的 Agent。

3. 单击连接测试,测试通过后单击保存。(*如提示连接测试失败,可根据页面提示进行修复)


第四步:新建并运行 SQL Server 到 BigQuery 的同步任务


开启数据同步任务



SEO尾巴.jpeg

Tapdata Live Data Platform 实时数据集成和数据服务平台

一个自带实时数据复制能力的数据即服务平台,以无代码方式快速连接企业的数据孤岛, 将数据实时集成到中央数据平台, 形成可复用的数据模型和API, 为多个下游交互式应用提供始终新鲜的数据。内置 100+ 数据连接器,包括新一代数仓目标 BigQuery、ClickHouse 等,无论是数据库,SaaS 还是文件,都可以实现无代码连接。Tapdata 的核心优势包括亚秒级实时采集及传输,基于 MongoDB 的中央化缓存及流式数据处理及建模能力,能够满足企业绝大部分数据准备的场景,为 CIO、市场运营、开发者、数据工程师等。免费试用 >


Tapdata 工作机制




推荐阅读