[国内信息] 腾讯云2860元代金券领取及使用说明 [复制链接]
查看:455596 | 回复:964

gydtep · 发表于 2023-8-6 21:01:19

Flink 官方目前推荐的做法是将数据源和映射表等信息存储到 Hive Metastore，但是这样会有以下问题：

gydtep · 发表于 2023-8-7 15:20:56

第二种是Session 模式，它已被大部分公司采用。第三种是 Application 模式，它可以简单的理解为 PerJob 模式 on K8s。

gydtep · 发表于 2023-8-8 16:58:57

并提供仓库路径和包语义。Mipha 平台通过 Kosmos 服务获取每一个仓库的所有历史版本，用户可以选择其中一个版本进行发布和回滚。

gydtep · 发表于 2023-8-9 13:55:13

我们希望当 CDC 的实例变多时，对 DB 没有影响。因此我们尽可能让一个实例只对应一个 CDC 实例，不进行重复订阅。

gydtep · 发表于 2023-8-10 08:54:05

基于此原因，我们对 CPU 进行了超卖。也就是说用户在平台上申请一个核心时，并不会真实给到一个核心的资源，而是通过超卖系数控制，让它使用一个更小的 CPU 申请量。

gydtep · 发表于 2023-8-11 09:45:59

新的业务场景需要大量的计算资源，但平台没有预留已有的任务；重启时资源已被其他任务占用，导致作业出现启动不了的情况。所以业务希望我们设计一个资源隔离的方案。

gydtep · 发表于 2023-8-12 20:23:13

大量的数据生成降低了处理时的延迟和低效性；边缘计算将这种数据处理重新定位到数据源，而不是依赖数据中心来处理和分析数据。这有助于组织效率优化。

gydtep · 发表于 2023-8-13 20:10:03

其实应放在云-边-端的整体框架之下，将边缘云视作中心云在靠近终端用户的下沉。其实边缘云计算就类比章鱼，章鱼的大脑仅有40%的神经元，其余的60%神经元分布在章鱼个各个大腿之上，

gydtep · 发表于 2023-8-15 09:37:03

是类似于IOE这种随着时代潮流逐渐淘汰，还是类似Vmware在自己的私域里不受影响，还是像现在AI大模型成为未来主流呢。

gydtep · 发表于 2023-8-16 09:45:54

目前CNCF社区的边缘云计算开源项目主要针对就是上面三点挑战，利用Kubernetes多插件支持能力，