gydtep
发表于 2021-8-4 13:22:13
第三,upload session 24小时过期,因为writer数据是写在存储的临时目录的,临时数据有回收周期,超过24小时, writer写过的数据就有可能被回收掉,这个就限制了upload session的生命周期。
第四,如果open了一个writer但是不写数据,就相当于占了一个空闲链接,服务端会把这个链接直接断掉。
gydtep
发表于 2021-8-4 16:33:17
这种接口推荐把并发降下来,然后充分利用并发约10兆每秒的吞吐能力。流式因为架构上的原因,是不受并发限制的。QPS不建议批量上传,因为碎片文件的问题,不建议用特别高的QPS来用批量的接口写数据。 如果QPS和并发都不高,使用这三种方式都不会很受限制。
gydtep
发表于 2021-8-5 08:17:08
事件驱动架构是一种构建松耦合的微服务系统的架构方式,微服务之间通过异步事件通信来进行交互。
事件驱动架构实现了事件的生产者和消费者的彻底解耦。生产者无需关注事件如何被消费,同时消费者无需关注事件的生产方式;我们可以动态添加更多消费者而不影响生产者,可以增加消息中间件对事件进行动态路由和转换。
gydtep
发表于 2021-8-5 11:30:44
容器可以作为 Immutable Infrastructure (不可变基础设施)的基础,提升应用交付的稳定性。不可变基础设施是由 Chad Fowler 于 2013 年提出的构想:在这种模式中,任何基础设施的实例(包括服务器、容器等各种软硬件)一旦创建之后便成为一种只读状态,不可对其进行任何更改。
gydtep
发表于 2021-8-5 14:54:36
在分布式追踪领域,OpenTracing 是 CNCF 下属的开源项目。它是一个技术中立的分布式追踪的规范,提供统一接口,可方便开发者在自己的服务中集成一种或多种分布式追踪的实现。
gydtep
发表于 2021-8-6 09:01:44
在最新的架构中, istiod 作为控制平面中负责配置的管理、下发、证书管理等。Istio 提供了一系列通用服务治理能力,比如:服务发现和负载均衡,渐进式交付(灰度发布),混沌注入与分析,全链路追踪,零信任网络安全等。可以供上层业务系统将其编排到自己的IT架构和发布系统之中。
gydtep
发表于 2021-8-6 14:38:46
FaaS 的核心思维是:开发者不必关心基础设施运维、容量规划或者扩容缩容,只需为使用的云资源和服务付费既可。这个思考的背后是:让开发者避免投入基础设施的运维,尽可能复用现有的云服务能力,让开发时间重新分配到对用户有更有直接影响和价值的事情上,比如健壮的业务逻辑、能吸引用户的界面及快速响应、可靠的 API 上。
gydtep
发表于 2021-8-6 19:58:51
根据Business Insider的数据,制造业即将看到物联网(IoT)和AI(人工智能)应用再度大幅增长,到2027年,物联网市场的年估计额将达到2.4万亿美元。
gydtep
发表于 2021-8-7 12:04:38
知识蒸馏的概念具有极大地改善Edge AI解决方案的潜力。
知识蒸馏通过知识压缩的原理进行。使用诸如强化学习之类的技术,神经网络可以学习如何产生预期的结果。在这一点上,较小的网络将学习创建与较大的网络已经开创的结果相似。
gydtep
发表于 2021-8-8 08:51:31
另外,很多公司认为做数据驱动就应该有一个高大上的数据平台,这两年标签画像平台或者数据中台的概念比较火,它们真的能够实现数据驱动吗?不见得。目前,很多公司的数据质量非常差,数据驱动就更无从谈起,这是国内大中小企业普遍存在的情况。