宝宝咳嗽吃什么药好| 尿酸高尿液是什么颜色| 黑舌头的狗是什么狗| 潮吹是什么意思| 经常手淫对身体有什么危害| 长期玩手机会得什么病| 儿童吃手指是什么原因| 鲤鱼爱吃什么| 谢娜什么星座| 爱长闭口用什么护肤品| 纤维瘤是什么| 头晕是什么原因引起的| 发泡实验阳性说明什么| 喉部有异物感是什么病| 宫颈转化区三型是什么意思| 什么叫脑白质病| 什么的朝霞| 牙龈为什么会肿痛| 贡菜是什么| 脸上爱出汗是什么原因| 赫是什么意思| 苏打水配什么好喝| 弱不禁风是什么生肖| 狮子的天敌是什么动物| 肝损伤是怎么回事什么是肝损伤| 血糖高的人早餐吃什么最好| 孩子打呼噜是什么原因| 血糖高会出现什么症状| 悬雍垂发炎吃什么药| 孟姜女姓什么| 小指麻木是什么原因| 什么是商业保险| aurora是什么牌子| edt是什么时间| 呵是什么意思| 明知故犯的故是什么意思| 七月十五日是什么节日| 曝光是什么意思| 痢疾是什么意思| 五行缺金有什么影响| 7月28日什么星座| 什么叫双向情感障碍| 慎独什么意思| 大麦和小麦有什么区别| 寿元是什么意思| 最好的止疼药是什么药| 什么鱼做酸菜鱼最好吃| 什么是单核细胞百分比| 晚上很难入睡是什么原因| mc是什么| 甘油三酯高吃什么食物| 1954属什么生肖| 整体认读音节有什么| 尼泊尔属于什么国家| 皮肤痒挂什么科| 月经量极少几乎没有是什么原因| 梦见游泳是什么预兆| 生蚝不能和什么一起吃| 羊内腰和外腰分别是什么| 腿上出汗是什么原因| 什么人不能吃蜂蜜| 什么是正装女士| 左肾结石的症状是什么| 吃什么治便秘| 拉肚子挂什么科室| 半身不遂是什么意思| ckd是什么病| 陈可以组什么词| 叔公是什么辈分| 男生喜欢什么| 白羊座是什么星象| 江西老表是什么意思| 梅菜是什么菜做的| 排尿困难吃什么药好| 学前班是什么意思| 7月17是什么星座| 一只什么| 吃苹果有什么好处| 牛皮癣用什么药膏最好| 阴道长什么样子| 至死不渝什么意思| 番茄什么时候种植| 净身出户什么意思| 肺部微结节是什么意思| 玄武是什么动物| 6月1日什么星座| 81是什么意思| 女生抽什么烟合适| 慢性阑尾炎吃什么消炎药| 什么可以变白皮肤| 肌肉纤维化是什么意思| 小赤佬是什么意思| 妾是什么意思| 尿隐血3十是什么病| 一月二十三号是什么星座| 发烧适合吃什么食物| 喝山楂水有什么好处和坏处| 口唇疱疹用什么药膏| dior是什么牌子| 忧郁是什么意思| 身上痣多是什么原因| 小登科是什么意思| 老是放臭屁是什么原因| 劳烦是什么意思| beast什么意思| 清江鱼又叫什么鱼| 结石是什么原因造成的| 异地办理护照需要什么材料| 肺结核复发有什么症状| 旗舰店什么意思| 乙肝表面抗原大于250是什么意思| 头发有什么用处| 疝气是什么病怎样治疗| 水车是什么意思| 铁扇公主是什么妖精| 什么也什么造句| 金刚菩提是什么植物的种子| 石榴花是什么颜色| 脑供血不足中医叫什么| 巧克力囊肿是什么意思| min代表什么| 两女一杯什么意思| 硬座是什么意思| 类风湿不能吃什么食物| 501是什么意思| 唐宝是什么意思| 保姆是什么意思| 花千骨什么时候上映的| 血脂高是什么原因引起| 灰指甲用什么药效果好| 6月份能种什么菜| 再三的意思是什么| 胶水用什么能洗掉| 切洋葱为什么会流泪| 拉伤筋用什么药好| 盆底脱垂有什么症状| 半月板是什么部位| 什么的鸟窝| 黄瓜不能和什么一起吃| 腹部疼痛挂什么科| 干燥综合症挂什么科| 泡脚时间长了有什么坏处| 山竹什么人不能吃| 哈利波特是什么意思| 抵抗力差吃什么| 血压低挂什么科| 鸡翅木是什么木头| 盂是什么意思| 扁桃体发炎吃什么药效果好| 黄色分泌物是什么原因| 鉴黄师是什么职业| 七情六欲指的是什么| 宫颈糜烂用什么药好| kpa是什么单位| 超细旦是什么面料| 口苦挂什么科最好| 桃子又什么又什么填空| 连奕名为什么娶杨若兮| 什么叫外阴白斑| 种植牙有什么危害| 什么时候打仗| 荨麻疹是什么引起| 百日咳是什么意思| 创伤性关节炎有什么症状| 化胡为佛是什么意思| 张宇的老婆叫什么名字| 小孩放屁很臭是什么原因| 空调抽湿是什么意思| 活珠子是什么| 体质是什么意思| 口苦是什么病| 广义是什么意思| 有鸟飞进屋是什么预兆| 脸部麻木是什么原因引起的| 政治庇护是什么意思| 病毒性感冒吃什么药效果好| 张紫妍为什么自杀| 为什么肚子总是胀胀的| 广东属于什么气候| 早上醒来嘴苦是什么原因| 1126是什么星座| 月亮为什么会有圆缺变化| 容易长痣是什么原因| 膝盖疼用什么药| 渐冻症是什么| 裂变是什么意思| 宀与什么有关| afi是胎儿的什么意思| 玉米须加什么治痛风| 冬虫夏草有什么好处| 未免是什么意思| 人体消化道中最长的器官是什么| 卵巢囊肿是什么原因引起的| st什么意思| suvmax是什么意思| 砭石是什么石头| 耳廓有痣代表什么| 血压低头晕是什么原因导致的| 记忆是什么意思| 乌鸡不能和什么一起吃| 专升本有什么专业| 养肝吃什么| 褥疮用什么药最好| 水厄痣是什么意思| 什么是免疫力| lot是什么| 吃钙片有什么副作用| castle什么意思| 头孢呋辛钠主治什么病| dollars是什么意思| 操逼是什么感觉| 大姨妈黑色是什么原因| 天狗是什么意思| 吃什么增强性功能| 盐酸左氧氟沙星片治什么病| 素颜霜是干什么用的| 什么火灾不能用水扑灭| 划船是什么意思| ft什么意思| 一件代发是什么意思| 共度良宵是什么意思| 什么是心脏早搏| 海参几头是什么意思| 胃炎不能吃什么| 榴莲为什么苦| 欢乐海岸有什么好玩的| 喝什么茶养肝护肝| 鸡内金是什么东西| 什么是体制内的工作| 亚甲蓝注射起什么作用| 邻家女孩什么意思| 儿童内分泌科检查什么| 合盘是什么意思| t波改变什么意思| 拒服兵役是什么意思| hpv39阳性是什么意思| 太子龙男装什么档次| ppl是什么意思| 伴手礼是什么| 是什么样的感觉我不懂是什么歌| 牛肉含有什么营养成分| 扪及是什么意思| 葛根的作用是什么| 虾肚子上的黑线是什么| 女人吃什么| 跟腱是什么| 儿童流鼻血挂什么科| 山楂什么时候成熟| naco是什么牌子| 刚怀孕要吃些什么好| 烫伤用什么消毒| 狂犬病是什么| 捉奸什么意思| 屏保是什么| 连襟什么意思| leg是什么意思| 中筋面粉是什么粉| 经常喝苏打水有什么好处和坏处| 脑血栓是什么意思| 68年猴五行属什么| 阴唇肥大是什么原因| 尽兴而归什么意思| 上嘴唇发白是因为什么原因| 什么牌子的床垫好| 百度

湿漉漉是什么意思

实时数据智能

百度 任何国家都不应低估中国经济日益强大的适应能力、抗打击能力和反制能力。

充分发挥实时数据的潜力。Dataflow 是一个易于使用且可扩缩的全托管式流式处理平台,可帮助您加快实时决策制定速度并改善客户体验。

新客户可获得 $300 赠金,用于抵扣 Dataflow 的相关费用。

功能

使用流式 AI 和机器学习技术实时为生成式 AI 模型提供支持

实时数据可为 AI/机器学习模型提供最新信息,从而提高预测准确性。Dataflow 机器学习简化了完整机器学习流水线的部署和管理。我们提供现成可用的模式,可提供个性化推荐、欺诈检测、威胁防范等。您可以使用 Vertex AI、Gemini 模型和 Gemma 模型构建流式 AI,运行远程推理,并通过 MLTransform 简化数据处理。利用 Dataflow GPU合适功能来增强 MLOps 和机器学习作业效率。

实现企业级的高级流式传输用例

Dataflow 是一项全托管式服务,使用开源 Apache Beam SDK 实现企业级高级流式处理用例。它为状态和时间转换以及 I/O 连接器提供了丰富的功能。Dataflow 可扩容至每项作业 4,000 个工作器,并定期处理 PB 级数据。它具有自动扩缩功能,可在批处理和流式流水线中实现最佳资源利用率。

为生成式 AI 部署多模态数据处理

Dataflow 支持对图片、文本和音频等多模态数据进行并行提取和转换。它会针对每种模态应用专门的特征提取,然后将这些特征融合成统一的表示法。这种融合将数据馈送到生成式 AI 模型中,使模型能够根据多样输入的内容创建新内容。Google 内部团队利用 Dataflow 和 FlumeJava 组织和计算没有延迟要求的大型可用输入数据池的模型预测。

利用模板和笔记本更快地实现价值

Dataflow 提供的工具可让您轻松上手。Dataflow 模板是预先设计的流处理和批处理蓝图,针对高效的 CDC 和 BigQuery 数据集成进行了优化。借助 Vertex AI 笔记本,使用最新的数据科学框架从零开始以迭代方式构建流水线,并使用 Dataflow 运行程序进行部署。 Dataflow 作业构建器是一个直观的界面,可用于在 Google Cloud 控制台中构建和运行 Dataflow 流水线,而无需编写代码。

使用智能诊断和监控工具节省时间

Dataflow 提供全面的诊断和监控工具。Straggler 检测会自动识别性能瓶颈,而数据采样则允许观察每个流水线步骤中的数据。Dataflow 数据分析提供作业改进建议。Dataflow 界面提供了丰富的监控工具,包括作业图执行详情指标自动扩缩信息中心日志记录。Dataflow 还具有作业费用监控界面,可让您轻松估算费用。

内置治理和安全机制

Dataflow 可通过多种方式帮助您保护数据:通过机密虚拟机支持加密使用中的数据;客户管理的加密密钥 (CMEK);VPC Service Controls 集成;关闭公共 IP。Dataflow 审核日志记录让您的组织能够了解 Dataflow 使用情况,并帮助回答“哪些用户何时在何处执行过哪些操作?”这一问题。以改善治理。

工作方式

Dataflow 是一个用于批量和流式数据处理的全托管式平台。它使用 Apache Beam 的统一模型,在无服务器 Google Cloud 基础架构上实现可扩缩的 ETL 流水线、实时流式分析、实时机器学习和复杂的数据转换。

缩略图,带有 Datflow 图标的大型建筑,右侧的男性在抛接杂耍 Pub/Sub、Cloud Storage 和 Cloud AutoML 图标
一分钟了解 Dataflow,包括其工作原理和常见使用场景。

常见用途

实时分析

为实时分析和运营流水线引入流式数据

将您的流式数据源(Pub/SubKafkaCDC 事件、用户点击流、日志和传感器数据)集成到 BigQueryGoogle Cloud Storage 数据湖、Spanner、Bigtable、SQL 存储、Splunk、Datadog 等中,从而开启您的数据流式传输之旅。探索经过优化的数据流模板,只需点击几下即可设置流水线,无需编写代码。使用集成 UDF 构建器向模板作业添加自定义逻辑,或者充分利用 Beam 转换I/O 连接器生态系统的全部功能,从头开始创建自定义 ETL 流水线。Dataflow 还常用于将 ETL 处理过的数据从 BigQuery 反向加载到 OLTP 存储区,以便快速查询和服务最终用户。Dataflow 将流式数据写入多个存储位置是 Dataflow 的一种常见模式



Google Cloud 架构上的流式分析
Google Cloud 架构上的流式分析

启动您的第一个 Dataflow 作业并学习 Dataflow 基础知识的自助式课程。

为实时分析和运营流水线引入流式数据

将您的流式数据源(Pub/SubKafkaCDC 事件、用户点击流、日志和传感器数据)集成到 BigQueryGoogle Cloud Storage 数据湖、Spanner、Bigtable、SQL 存储、Splunk、Datadog 等中,从而开启您的数据流式传输之旅。探索经过优化的数据流模板,只需点击几下即可设置流水线,无需编写代码。使用集成 UDF 构建器向模板作业添加自定义逻辑,或者充分利用 Beam 转换I/O 连接器生态系统的全部功能,从头开始创建自定义 ETL 流水线。Dataflow 还常用于将 ETL 处理过的数据从 BigQuery 反向加载到 OLTP 存储区,以便快速查询和服务最终用户。Dataflow 将流式数据写入多个存储位置是 Dataflow 的一种常见模式



Google Cloud 架构上的流式分析
Google Cloud 架构上的流式分析

启动您的第一个 Dataflow 作业并学习 Dataflow 基础知识的自助式课程。

实时 ETL 和数据集成

利用实时数据对数据平台进行现代化改造

实时 ETL 和集成处理并立即写入数据,实现快速分析和决策。Dataflow 的无服务器架构和流式传输功能使其非常适合构建实时 ETL 流水线。Dataflow 的自动扩缩功能可确保效率和规模,而其对各种数据源和目的地的支持简化了集成。

实时 ETL 架构
实时 ETL 架构

学习此 Google Cloud Skills Boost 课程,帮助您掌握有关 Dataflow 上的批处理的基础知识。

利用实时数据对数据平台进行现代化改造

实时 ETL 和集成处理并立即写入数据,实现快速分析和决策。Dataflow 的无服务器架构和流式传输功能使其非常适合构建实时 ETL 流水线。Dataflow 的自动扩缩功能可确保效率和规模,而其对各种数据源和目的地的支持简化了集成。

实时 ETL 架构
实时 ETL 架构

学习此 Google Cloud Skills Boost 课程,帮助您掌握有关 Dataflow 上的批处理的基础知识。

实时机器学习和生成式 AI

利用流式机器学习/AI 实时采取行动

分秒必争的决策带来了业务价值。借助 Dataflow 流式 AI 和机器学习,客户可以实现低延迟预测和推断、实时个性化、威胁检测、欺诈防范,以及实时智能至关重要的许多其他用例。使用 MLTransform 预处理数据,使您可以专注于转换数据,而无需编写复杂的代码或管理底层库。使用 RunInference 对生成式 AI 模型做出预测



利用流式机器学习/AI 实时采取行动

分秒必争的决策带来了业务价值。借助 Dataflow 流式 AI 和机器学习,客户可以实现低延迟预测和推断、实时个性化、威胁检测、欺诈防范,以及实时智能至关重要的许多其他用例。使用 MLTransform 预处理数据,使您可以专注于转换数据,而无需编写复杂的代码或管理底层库。使用 RunInference 对生成式 AI 模型做出预测



营销智能

利用实时数据分析,实现营销转型

实时营销智能可分析当前市场、客户和竞争对手的数据,以快速做出明智的决策。它支持敏捷地响应趋势、行为和竞争行为,从而转变营销方式。演示项目具有以下优势:

  • 使用个性化产品/服务实时开展全渠道营销
  • 通过个性化互动更好地管理客户关系
  • 敏捷营销组合优化
  • 动态用户细分
  • 竞争智能助您保持领先地位
  • 在社交媒体上主动进行危机管理
营销智能架构
营销智能架构

利用实时数据分析,实现营销转型

实时营销智能可分析当前市场、客户和竞争对手的数据,以快速做出明智的决策。它支持敏捷地响应趋势、行为和竞争行为,从而转变营销方式。演示项目具有以下优势:

  • 使用个性化产品/服务实时开展全渠道营销
  • 通过个性化互动更好地管理客户关系
  • 敏捷营销组合优化
  • 动态用户细分
  • 竞争智能助您保持领先地位
  • 在社交媒体上主动进行危机管理
营销智能架构
营销智能架构

点击流分析

优化网站和应用体验并实现个性化

借助实时点击流分析,企业能够即时分析用户在网站和应用中的互动情况。这样可以实现实时个性化、A/B 测试和漏斗优化,从而提高互动度、加快产品开发速度、减少用户流失并增强产品支持。最终,它可以提供卓越的用户体验,并通过动态定价和个性化建议推动业务增长。

点击流分析架构
点击流分析

优化网站和应用体验并实现个性化

借助实时点击流分析,企业能够即时分析用户在网站和应用中的互动情况。这样可以实现实时个性化、A/B 测试和漏斗优化,从而提高互动度、加快产品开发速度、减少用户流失并增强产品支持。最终,它可以提供卓越的用户体验,并通过动态定价和个性化建议推动业务增长。

点击流分析架构
点击流分析

实时日志复制和分析

集中式日志管理和分析

您可以使用 Dataflow 将 Google Cloud 日志复制到 Splunk 等第三方平台,以实现近乎实时的日志处理和分析。此解决方案提供集中式日志管理、合规性、审核和分析功能,同时降低成本并提高性能。

日志复制架构
日志分析架构

集中式日志管理和分析

您可以使用 Dataflow 将 Google Cloud 日志复制到 Splunk 等第三方平台,以实现近乎实时的日志处理和分析。此解决方案提供集中式日志管理、合规性、审核和分析功能,同时降低成本并提高性能。

日志复制架构
日志分析架构
生成解决方案
您想解决什么问题?
What you'll get:
分步指南
参考架构
可用的预构建解决方案
此服务是使用 Vertex AI 构建的。您必须年满 18 周岁才能使用。请勿输入敏感信息、机密信息或个人信息。

价格

Dataflow 定价方式探索 Dataflow 的结算和资源模型。
服务和用量说明价格

Dataflow 计算资源

如需了解详情,请访问我们详细的价格页面

其他 Dataflow 资源

为所有作业计费的其他 Dataflow 资源包括 Persistent Disk、GPU 和快照。



如需了解详情,请访问我们详细的价格页面

Dataflow 承诺使用折扣 (CUD)

Dataflow CUD 提供两种级别的折扣,具体取决于承诺期:

  • 一年期 CUD 提供按需费率 20% 的折扣
  • 三年期 CUD 提供按需费率 40% 的折扣

详细了解 Dataflow CUD

详细了解 Dataflow 价格。查看所有价格详情

Dataflow 定价方式

探索 Dataflow 的结算和资源模型。

Dataflow 计算资源

说明
价格

如需了解详情,请访问我们详细的价格页面

其他 Dataflow 资源

说明

为所有作业计费的其他 Dataflow 资源包括 Persistent Disk、GPU 和快照。



价格

如需了解详情,请访问我们详细的价格页面

Dataflow 承诺使用折扣 (CUD)

说明

Dataflow CUD 提供两种级别的折扣,具体取决于承诺期:

  • 一年期 CUD 提供按需费率 20% 的折扣
  • 三年期 CUD 提供按需费率 40% 的折扣
价格

详细了解 Dataflow CUD

详细了解 Dataflow 价格。查看所有价格详情

价格计算器

估算您的每月 Dataflow 费用,包括特定于区域的价格和费用。

定制报价

请与我们的销售团队联系,获取为贵组织量身定制的报价。

开始概念验证

新客户可获得 $300 来试用 Dataflow

有一个大型项目?

如何使用 Dataflow

预构建的 Dataflow 模板

浏览 Dataflow 代码示例

业务用例

了解领先客户选择 Dataflow 的原因


Namitha Vijaya Kumar,ANZ Bank 的 Google Cloud SRE 产品负责人

“Dataflow 同时帮助我们进行批处理和实时数据处理,从而确保在企业数据湖中保持数据的及时性。这反过来又有助于在下游使用数据,为零售客户进行分析/决策和发送实时通知。”

Dataflow 的好处

流式机器学习轻松进行

将流式处理引入 AI/机器学习的一站式功能:用于推理的 RunInference、用于模型训练预处理的 MLTransform、用于特征存储区查询的 Enrichment 以及动态 GPU 支持,这些都减少了重复劳动,同时在有限的 GPU 资源上不会浪费支出。

借助强大的工具实现最佳性价比

Dataflow 提供具有成本效益的流式传输,并可自动优化,从而最大限度地提高性能和资源利用率。它可以轻松扩容以处理任何工作负载,并具有 AI 赋能的自我修复功能。强大的工具有助于操作和理解。

开源、可移植和可扩展

Dataflow 专为开源 Apache Beam 而构建,具有统一的批处理和流式处理支持,使您的工作负载可在云端、本地或边缘设备之间移植。

合作伙伴与集成

  • Confluent 徽标
  • Snowplow 徽标
  • Talend 徽标
  • Trifacta 徽标
  • Confluent 徽标
  • Snowplow 徽标
  • Talend 徽标
  • Trifacta 徽标

Google Cloud 合作伙伴开发了很多与 Dataflow 集成的方案,提供强大的处理功能,让您可以轻松快捷地完成任何规模的数据处理任务。查看所有合作伙伴,立即开始您的流式传输之旅。

Google Cloud
清肺吃什么好 怀孕有什么感觉 胆囊结石不能吃什么 左后背疼什么原因 下午4点是什么时辰
81什么节 并发是什么意思 湿气重吃什么药 探花是什么意思 mrsa医学上是什么意思
什么叫全日制本科 一什么点心 细菌性肠炎是什么原因引起的 免冠照片是什么意思 耳石症有什么症状
孟字五行属什么 肾虚型脱发是什么样子 脚底肿是什么原因引起的 乙肝五项45阳性是什么意思 尿崩症是什么意思
什么是酸性土壤hcv7jop9ns9r.cn 成都有什么特产hcv9jop6ns6r.cn 大暑什么时候hcv8jop8ns2r.cn 起水泡痒是什么原因hcv9jop0ns2r.cn 什么是子宫腺肌症hkuteam.com
谷丙转氨酶偏高吃什么药hcv9jop3ns0r.cn 若是什么意思hcv9jop5ns0r.cn 眼角长脂肪粒是什么原因hcv8jop2ns8r.cn 手麻看什么科hcv8jop3ns5r.cn 蜈蚣属于什么类动物hcv8jop9ns2r.cn
一动就出汗是什么原因hcv8jop3ns8r.cn 被蚊子咬了涂什么hcv9jop2ns1r.cn 晚上睡觉牙齿出血是什么原因huizhijixie.com 慈禧和光绪是什么关系hcv8jop5ns0r.cn gel是什么意思hcv9jop3ns7r.cn
耳耵聍是什么东西hcv7jop5ns0r.cn 银屑病是什么症状hcv7jop6ns2r.cn 查微量元素挂什么科hcv8jop4ns6r.cn 一点小事就暴躁的人是什么病hcv8jop6ns3r.cn 莓茶属于什么茶hcv8jop6ns5r.cn
百度