gydtep 发表于 2020-10-5 17:54:07
虽然这种情况在本世纪发生的可能性只有50%,但应该有人在思考和研究这个问题。gydtep 发表于 2020-10-5 18:55:36
随着滴滴业务的高速发展,业务对于数据时效性的需求越来越高,而伴随着实时技术的不断发展和成熟,滴滴也对实时建设做了大量的尝试和实践。koozb 发表于 2020-10-6 09:30:33
楼主分享得不错,我做网站seo外包的http://akrte.com/诚换友链找我,唐人街资讯网http://borossa.com/ 日本资讯网http://alineefabio.com/ 农夫**网http://behinkala.com/ 美冠影视资讯http://wzlwyy.com/gydtep 发表于 2020-10-6 09:57:31
数据平台工具对整体实时开发的支持也日渐趋于成熟,开发成本降低gydtep 发表于 2020-10-6 14:36:08
实时数据接口服务:由于各业务线之间存在很多业务壁垒,导致数仓开发很难熟悉公司内全部业务线,需要与各业务线相关部门在数据加工和数据获取方面进行协作gydtep 发表于 2020-10-6 17:51:20
应用层少建设的好处:实时处理数据的时候,每建一个层次,数据必然会产生一定的延迟。gydtep 发表于 2020-10-7 10:26:37
查询 QPS 比较高的情况,可以使用 fusion 存储,降低机器内存资源占用,对于数据量比较大,对维表数据变化不是特别敏感的场景,可以使用HBase 存储。gydtep 发表于 2020-10-7 15:11:41
{统计时间周期范围缩写}:1d:天增量;td:天累计(全量);1h:小时增量;th:小时累计(全量);1min:分钟增量;tmin:分钟累计(全量)gydtep 发表于 2020-10-7 18:21:46
StreamSQL 是滴滴大数据引擎部在 Flink SQL 基础上完善后形成的一个产品。gydtep 发表于 2020-10-7 18:47:29
描述性语言:业务方不需要关心底层实现,只需要将业务逻辑描述出来即可。