gydtep 发表于 2022-10-22 13:28:40
双11是一个非常重要的技术攻坚场,我们把双11场景下锤炼出来的技术放到云上,服务更多的客户,同时阿里整个技术慢慢站在云的肩膀上,靠云支撑技术的发展。gydtep 发表于 2022-10-23 12:29:56
我们很幸运,因为双11,阿里可以站在整个行业、整个数字技术发展的肩膀上,同时也因为有了双11,阿里可以深度参与这场数字革命,贡献自己的力量。gydtep 发表于 2022-10-24 08:28:21
去支撑我们对算力要求最高的场景,即整个搜索推荐核心的AI算力场景。过去我们需要用非常昂贵的海量的CPU去支撑gydtep 发表于 2022-10-24 14:34:31
有些我前面讲到了,比如平头哥的含光800芯片、云原生的大规模使用,此外在基础层,阿里自研的磐久服务器里面是全栈式阿里技术,这些技术全新上阵,并且在线上经过了双11峰值的考验,非常稳定。gydtep 发表于 2022-10-24 15:06:56
我们也在做AI方面的深度创新,超大规模模型现在是AI行业的重点,阿里达摩院实现了全球首个10万亿参数的多模态大模型M6,它有几个特点:第一个特点是创造力gydtep 发表于 2022-10-25 07:57:24
主要差异在于采用模型结构与训练任务的差异组合,多模态预训练的下游任务可以是常规的分类识别、视觉问答、视觉理解推断任务等等。VideoBERT是多模态预训练的第一个作品,它基于BERT训练大量未标记的视频文本对。gydtep 发表于 2022-10-25 15:04:14
构建了多种模态(例如视觉模态)下的实体,以及多种模态实体间的多模态语义关系。如图1所示,在电商领域,多模态商品知识图谱通常有图像、标题和结构知识。gydtep 发表于 2022-10-25 20:24:34
其次,为了保持单个模态的独立性,我们提出通过初始交互特征融合模块来融合图像和文本模态的初始特征及其交互特征。第二个过程是知识模态和其他两个模态的交互:gydtep 发表于 2022-10-26 13:50:30
阿里妈妈年货节商品组合算法,在线算法,基于Emedding的实验桶(5.52%)CTR指标相较于另外2个实验桶(5.50%,5.48%)分别提高0.02%、0.04%的点击率,相对提高分别为0.363%、0.73%;gydtep 发表于 2022-10-26 15:47:21
在深度学习时代,主要有几种经典的结构,包括:对比损失(contractive loss)、三元组损失(triplet loss)、中心损失(center loss)等,均是通过正负样本定义以及损失函数设计上进行优化。