公开(公告)号：CN117670442A

公开(公告)日：2024-03-08

申请号：CN202311765306.1

申请日：2023-12-20

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 李耀宇 ,  胡军士 ,  魏望 ,  阮涛 ,  黄若然 ,  刘银星 ,  陈明明 ,  冯伟 ,  杨效淳 ,  吕晶晶 ,  范朝盛

IPC分类号： G06Q30/0251 ,  G06Q30/0601 ,  G06V20/40 ,  G06F18/213

摘要： 本公开的实施例提供用于广告推荐的方法、装置、设备和可读介质。该方法包括：从待推荐的多个候选视频广告的视频内容提取多个候选视频广告各自的多模态特征表示，多模态特征表示至少指示视频内容的文本特征和图像特征；从多个候选视频广告各自的广告相关信息提取第一组特征表示，以及从用户的用户相关信息提取第二组特征表示；以及基于多模态特征表示、第一组特征表示和第二组特征表示确定在针对用户的投放中多个候选视频广告的推荐排序结果。以此方式，可以结合视频广告的内容来对用户进行广告推荐，有助与对用户进行针对性投放，可以提高广告推荐的精确度，进而可以提高用户体验以及提高广告的推广效果。

公开(公告)号：CN116823984A

公开(公告)日：2023-09-29

申请号：CN202310714332.5

申请日：2023-06-15

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 刘安 ,  冯伟 ,  朱红贺 ,  李耀宇 ,  张政 ,  吕晶晶 ,  朱鑫 ,  张旭 ,  王小梅

IPC分类号： G06T11/00 ,  G06N3/0464 ,  G06N3/08 ,  G06V10/44

摘要： 本公开的实施例公开了元素布局信息生成方法、装置、设备、介质和程序产品。该方法的一具体实施方式包括：将元素布局噪声信息输入至扩散模型，以生成元素布局去噪信息；利用图像对象特征提取模型和文本特征提取模型，生成文本特征信息和图像对象特征信息；将元素布局去噪信息、图像对象特征信息和文本特征信息输入至视觉文本关系特征信息生成模型，以生成视觉文本关系特征信息；利用布局元素几何关系调整模型，生成布局元素几何关系调整信息；将视觉文本关系特征信息、图像对象特征信息和布局元素几何关系调整信息输入至特征解码模型，以生成元素布局信息。该实施方式与人工智能有关，可以利用元素布局信息，对各种元素进行精准的布局。

公开(公告)号：CN115795176A

公开(公告)日：2023-03-14

申请号：CN202211248320.X

申请日：2022-10-12

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 刘银星 ,  阮涛 ,  张政 ,  吕晶晶 ,  庞新强 ,  王维珍

IPC分类号： G06F16/9536 ,  G06F16/9538

摘要： 本公开的实施例公开了素材序列生成方法、装置、设备、介质和程序产品。该方法的一具体实施方式包括：响应于待推荐创意素材集中存在目标待推荐创意素材，确定目标待推荐创意素材集；对于每个目标待推荐创意素材，从历史推荐创意素材集中筛选预定数目个目标历史推荐创意素材；根据各个目标历史推荐创意素材的点击率，生成各个目标待推荐创意素材的预估点击率；确定各个多次推荐创意素材的点击率；对各个待推荐创意素材进行排序，得到待推荐创意素材序列。该实施方式与人工智能有关，通过确定目标待推荐创意素材对应的点击率，可以生成针对待推荐创意素材集的、更为精准的素材推荐顺序，提高了素材推荐效果。

公开(公告)号：CN118586984A

公开(公告)日：2024-09-03

申请号：CN202410781408.0

申请日：2024-06-17

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 郑向上 ,  李耀宇 ,  宋金波 ,  刘银星 ,  李鹏 ,  魏望 ,  何杰 ,  吕晶晶 ,  彭长平 ,  林战刚

IPC分类号： G06Q30/0601 ,  G06F18/213 ,  G06F18/214 ,  G06F18/22 ,  G06F18/25 ,  G06N3/045 ,  G06N3/08

摘要： 本申请提出一种商品推荐方法、装置、电子设备和存储介质，其中，该方法包括：在确定目标商品的商品详情页面中信息展示位上的推荐商品的过程中，基于目标商品的多模态语义特征信息和用户行为特征所确定出的该目标商品的第一目标特征向量，从多个待推荐商品各自对应的第二目标特征向量中，获取与第一目标特征向量相似度大于预设相似度阈值的第二目标特征向量，并将多个待推荐商品中与第二目标特征向量对应的待推荐商品作为目标推荐商品，并在信息展示位上展示目标推荐商品的推广资源。由此，结合目标商品以及待推荐商品的多模态语义特征信息进行商品召回，从而可提高所召回的推荐商品的准确性。

公开(公告)号：CN115801980A

公开(公告)日：2023-03-14

申请号：CN202211389074.X

申请日：2022-11-08

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 卢杨 ,  牟俊舟 ,  郭士伟 ,  吕晶晶

IPC分类号： H04N5/262 ,  H04N21/44

摘要： 本公开的实施例公开了视频生成方法和装置。该方法的一具体实施方式包括：获取对待剪辑视频进行切分得到的至少两个视频片段；利用预先训练的视频处理模型对至少两个视频片段进行处理，得到处理结果，其中，处理结果表示各视频片段分别属于视频剪辑结果的概率，视频处理模型的训练样本通过如下步骤得到：获取原始视频对应的视频剪辑结果集，分别确定视频剪辑结果集的各视频剪辑结果的效果指标值，根据效果指标值，生成视频处理模型的训练样本；根据处理结果，从至少两个视频片段中选取视频片段生成视频剪辑结果。该实施方式实现了一种基于效果指标反馈的视频剪辑方式。

公开(公告)号：CN115482415A

公开(公告)日：2022-12-16

申请号：CN202211151337.3

申请日：2022-09-21

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 冯伟 ,  张政 ,  吕晶晶 ,  庞新强 ,  王维珍 ,  李耀宇

IPC分类号： G06V10/764 ,  G06V10/774 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08 ,  G06N20/00 ,  G06T3/40 ,  G06V10/44

摘要： 本公开的实施例提供了一种模型训练方法、图像分类方法和装置。所述模型训练方法包括：首先获取训练样本集，该训练样本集包括样本物品对应的样本图像和样本图像的样本分类结果，样本图像由样本物品对应的样本首图和样本主图组成，然后构建包括残差神经网络和分类网络的初始模型，最后利用机器学习方法，将样本图像作为残差神经网络的输入，获取样本首图对应的第一特征向量和样本主图对应的第二特征向量，将残差神经网络输出的第一特征向量和第二特征向量作为分类网络的输入，样本图像的样本分类结果作为期望输出，对初始模型进行训练，得到图像分类模型，能够对所构成的样本图像提取特征、构成特征向量和预测分类结果，实现主图是否合格的判别。

公开(公告)号：CN115757933A

公开(公告)日：2023-03-07

申请号：CN202211194196.3

申请日：2022-09-28

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 刘银星 ,  阮涛 ,  张政 ,  吕晶晶

IPC分类号： G06F16/9535 ,  G06F16/535 ,  G06T9/00 ,  G06F18/25

摘要： 本公开的实施例公开了推荐信息生成方法、装置、设备、介质和程序产品。该方法的一具体实施方式包括：获取历史浏览创意图像序列、用户稀疏特征信息集、主图像和物品稀疏特征信息集；对主图像进行图编码处理，得到主图编码向量，对每个历史浏览创意图像进行图编码处理，以生成历史图像编码向量；对每个用户稀疏特征信息进行信息编码，以生成用户稀疏特征向量，以及对每个物品稀疏特征信息进行信息编码，以生成物品稀疏特征向量；对各个历史图像编码向量进行视觉偏好调整，得到调整后历史图像编码向量序列；生成待推送给目标用户的、目标推荐物品对应的推荐图像集。该实施方式与人工智能有关，生成了精准的推荐信息，得到了较好的推荐效果。

公开(公告)号：CN117058371A

公开(公告)日：2023-11-14

申请号：CN202310901691.1

申请日：2023-07-21

申请人： 北京沃东天骏信息技术有限公司 ,  北京京东世纪贸易有限公司

发明人： 冯伟 ,  张政 ,  任显聪 ,  李耀宇 ,  吕晶晶 ,  朱鑫

IPC分类号： G06V10/26 ,  G06V10/77 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/08

摘要： 本公开的实施例公开了图像分割信息生成方法、装置、设备、介质和程序产品。该方法的一具体实施方式包括：将目标物品对应的图像信息和文本信息输入至预先训练的图像分割模型中的特征提取模块；将图像特征提取信息作为目标特征提取信息，根据目标特征提取信息和文本特征提取信息，将目标特征提取信息和文本特征提取信息输入至图像分割模型中的多模态特征融合模块；将目标特征提取信息和所得到的多模态特征信息输入至目标模态特征过滤处理模块；根据多模态融合特征信息，生成对应图像信息的图像分割信息。该实施方式与人工智能有关，通过目标物品的文本信息及图像信息对图像进行分割，提高了对图像分割的准确性。

公开(公告)号：CN118570586A

公开(公告)日：2024-08-30

申请号：CN202410780816.4

申请日：2024-06-17

申请人： 北京沃东天骏信息技术有限公司

发明人： 桑留芳 ,  李耀宇 ,  魏望 ,  王璐 ,  刘银星 ,  孙一鸣 ,  王浩然 ,  吕晶晶 ,  陈文龙

IPC分类号： G06V10/774 ,  G06V10/74 ,  G06V10/54 ,  G06V10/56 ,  G06V10/46 ,  G06V10/762 ,  G06V10/764 ,  G06Q30/0251 ,  G06Q30/0601

摘要： 本公开提供了一种特征提取模型的训练方法、物品推荐方法及装置。其中，特征提取模型的训练方法包括：对每个历史图像数据进行编码处理，得到与每个历史图像数据分别对应的特征向量组；根据特征向量组中的特征向量与码表中的视觉向量之间的相似度，得到特征向量组对应的目标视觉向量集合；以目标视觉向量集合与训练样本集数据作为特征提取模型的输入数据，以最大化特征提取模型基于训练样本集数据输出的特征信息与目标视觉向量集合的相似度为目标函数，训练得到特征提取模型。利用特征提取模型提取与不同广告创意对应的图像信息的多模态创意特征信息以基于用户偏好的广告创意向目标用户推荐物品，能够提高物品推荐的准确性和效率。

公开(公告)号：CN114267084A

公开(公告)日：2022-04-01

申请号：CN202111562144.2

申请日：2021-12-17

申请人： 北京沃东天骏信息技术有限公司

发明人： 雷泽宇 ,  牟俊舟 ,  吕晶晶 ,  张政

IPC分类号： G06V40/20 ,  G06V20/40 ,  G06Q30/06 ,  G06N3/04

摘要： 本申请公开了一种视频识别方法、装置、电子设备及存储介质。方法包括：确定第一视频的m个第一图像帧中的每个第一图像帧对应的n个第一特征向量；第一特征向量表征对应的第一图像帧的空间特征向量；从m个第一图像帧对应的第一特征向量中提取得到第二特征向量，并通过全连接层处理第二特征向量，得到第三特征向量；第二特征向量表征m个第一图像帧对应的时序特征向量；基于第三特征向量确定第一视频对应的第一对象和第二对象之间的第一行为类型；第三特征向量中的每个元素对应表征一种行为类型的概率；在第一行为类型是设定的行为类型的情况下，基于第一行为类型和第二对象的类型，确定第一视频的视频识别结果；其中，m，n均为正整数。