公开(公告)号：US20090135177A1

公开(公告)日：2009-05-28

申请号：US12274292

申请日：2008-11-19

申请人： Jonathan Isaac Strietzel ,  Jon Hayes Snoddy ,  Douglas Alexander Fidaleo

发明人： Jonathan Isaac Strietzel ,  Jon Hayes Snoddy ,  Douglas Alexander Fidaleo

IPC分类号： G06T15/70 ,  G06F3/048 ,  G06F17/00 ,  G10L15/04 ,  G06K9/00

CPC分类号： G06T15/00 ,  G06Q30/02 ,  G06Q30/0247

摘要： Systems and methods are disclosed for performing voice personalization of video content. The personalized media content may include a composition of a background scene having a character, head model data representing an individualized three-dimensional (3D) head model of a user, audio data simulating the user's voice, and a viseme track containing instructions for causing the individualized 3D head model to lip sync the words contained in the audio data. The audio data simulating the user's voice can be generated using a voice transformation process. In certain examples, the audio data is based on a text input or selected by the user (e.g., via a telephone or computer) or a textual dialogue of a background character.

摘要翻译： 公开了用于执行视频内容的语音个性化的系统和方法。 个性化媒体内容可以包括具有字符的背景场景的组合，表示用户的个性化三维（3D）头部模型的头部模型数据，模拟用户语音的音频数据和包含用于使用户的语音的指令的视野轨迹 个性化的3D头模型将唇音同步到包含在音频数据中的词。 可以使用语音转换处理来生成模拟用户语音的音频数据。 在某些示例中，音频数据基于用户（例如，经由电话或计算机）或背景人物的文本对话输入或选择的文本。

公开(公告)号：US20090153552A1

公开(公告)日：2009-06-18

申请号：US12274226

申请日：2008-11-19

申请人： Douglas Alexander Fidaleo ,  John Peter Lewis ,  Gerard Guy Mediomi ,  Zhenyao Mo ,  Michael David Johnson

发明人： Douglas Alexander Fidaleo ,  John Peter Lewis ,  Gerard Guy Mediomi ,  Zhenyao Mo ,  Michael David Johnson

IPC分类号： G06T17/00

CPC分类号： G06T15/00 ,  G06Q30/02 ,  G06Q30/0247

摘要： Systems and methods are disclosed for generating a substantially life-like, individualized three-dimensional (3D) head model. In one example, the method includes reconstructing a 3D face mask from the input image data of an individual's head or face. Detected facial landmarks of the reconstructed face mask are aligned with corresponding facial landmarks of a generic head model, and the remainder of the head is reconstructed by generating a blend fit head model from a weighted combination of basis head models. The blend fit model is then deformed to more accurately reflect the facial and/or head geometry of the individual. The method may further include associating an animation rig with the individualized 3D head model that allows for simulated movement of the 3D head model in, for example, personalized media content.

摘要翻译： 公开了用于产生基本上类似生命的个体化三维（3D）头模型的系统和方法。 在一个示例中，该方法包括从个人的头部或脸部的输入图像数据重建3D面罩。 重建的面罩的检测到的面部地标与通用头部模型的对应的面部界标对准，并且通过从基础头部模型的加权组合生成混合拟合头部模型来重建头部的其余部分。 然后将混合拟合模型变形以更准确地反映个体的面部和/或头部几何形状。 该方法可以进一步包括将动画装置与允许在例如个性化媒体内容中的3D头部模型的模拟移动的个性化3D头部模型相关联。

公开(公告)号：US20090135176A1

公开(公告)日：2009-05-28

申请号：US12274268

申请日：2008-11-19

申请人： Jon Hayes Snoddy ,  Jonathan Isaac Strietzel ,  Douglas Alexander Fidaleo ,  Michael David Johnson

发明人： Jon Hayes Snoddy ,  Jonathan Isaac Strietzel ,  Douglas Alexander Fidaleo ,  Michael David Johnson

IPC分类号： G06T15/00

CPC分类号： G06T15/00 ,  G06Q30/02 ,  G06Q30/0247

摘要： Systems and methods are disclosed for creating personalized media content having multiple content layers in “one-click” fashion by selecting a background media template or by using an end-user media composition tool to create or modify a template. For example, the personalized media content can include at least two separate layers, the data of each being stored independently of one another. The two layers may include a background layer including at least one background character and an intermediate layer including an individualized three-dimensional (3D) head model, alignment information, and lighting information. The personalized media content can be displayed by overlaying the background layer using the alignment intermediate layer using the alignment information and the lighting information. In certain examples, template data associated with the background media is created and subsequently used on multiple occasions in generating personalized media content with various 3D head models.

摘要翻译： 公开了用于通过选择背景媒体模板或通过使用最终用户媒体合成工具来创建或修改模板来以“一键式”方式创建具有多个内容层的个性化媒体内容的系统和方法。 例如，个性化媒体内容可以包括至少两个单独的层，每个层的数据彼此独立地存储。 两层可以包括包括至少一个背景字符的背景层和包括个体化三维（3D）头模型，对齐信息和照明信息的中间层。 可以使用对准信息和照明信息使用对准中间层覆盖背景层来显示个性化媒体内容。 在某些示例中，创建与背景媒体相关联的模板数据，并随后在多种场合中使用各种3D头部模型来生成个性化媒体内容。

公开(公告)号：US08730231B2

公开(公告)日：2014-05-20

申请号：US12274268

申请日：2008-11-19

申请人： Jon Hayes Snoddy ,  Jonathan Isaac Strietzel ,  Douglas Alexander Fidaleo ,  Michael David Johnson

发明人： Jon Hayes Snoddy ,  Jonathan Isaac Strietzel ,  Douglas Alexander Fidaleo ,  Michael David Johnson

IPC分类号： G06T15/00 ,  G09G5/00

CPC分类号： G06T15/00 ,  G06Q30/02 ,  G06Q30/0247

摘要： Systems and methods are disclosed for creating personalized media content having multiple content layers in “one-click” fashion by selecting a background media template or by using an end-user media composition tool to create or modify a template. For example, the personalized media content can include at least two separate layers, the data of each being stored independently of one another. The two layers may include a background layer including at least one background character and an intermediate layer including an individualized three-dimensional (3D) head model, alignment information, and lighting information. The personalized media content can be displayed by overlaying the background layer using the alignment intermediate layer using the alignment information and the lighting information. In certain examples, template data associated with the background media is created and subsequently used on multiple occasions in generating personalized media content with various 3D head models.

摘要翻译： 公开了用于通过选择背景媒体模板或通过使用最终用户媒体合成工具来创建或修改模板来以“一键式”方式创建具有多个内容层的个性化媒体内容的系统和方法。 例如，个性化媒体内容可以包括至少两个单独的层，每个层的数据彼此独立地存储。 两层可以包括包括至少一个背景字符的背景层和包括个体化三维（3D）头模型，对齐信息和照明信息的中间层。 可以使用对准信息和照明信息使用对准中间层覆盖背景层来显示个性化媒体内容。 在某些示例中，创建与背景媒体相关联的模板数据，并随后在多种场合中使用各种3D头部模型来生成个性化媒体内容。

公开(公告)号：US20120323581A1

公开(公告)日：2012-12-20

申请号：US13599862

申请日：2012-08-30

申请人： Jonathan Isaac Strietzel ,  Jon Hayes Snoddy ,  Douglas Alexander Fidaleo

发明人： Jonathan Isaac Strietzel ,  Jon Hayes Snoddy ,  Douglas Alexander Fidaleo

IPC分类号： G06T13/40

CPC分类号： G06T15/00 ,  G06Q30/02 ,  G06Q30/0247

摘要： Systems and methods are disclosed for performing voice personalization of video content. The personalized media content may include a composition of a background scene having a character, head model data representing an individualized three-dimensional (3D) head model of a user, audio data simulating the user's voice, and a viseme track containing instructions for causing the individualized 3D head model to lip sync the words contained in the audio data. The audio data simulating the user's voice can be generated using a voice transformation process. In certain examples, the audio data is based on a text input or selected by the user (e.g., via a telephone or computer) or a textual dialogue of a background character.

摘要翻译： 公开了用于执行视频内容的语音个性化的系统和方法。 个性化媒体内容可以包括具有字符的背景场景的组合，表示用户的个性化三维（3D）头部模型的头部模型数据，模拟用户语音的音频数据和包含用于使用户的语音的指令的视野轨迹 个性化的3D头模型将唇音同步到包含在音频数据中的词。 可以使用语音转换处理来生成模拟用户语音的音频数据。 在某些示例中，音频数据基于用户（例如，经由电话或计算机）或背景人物的文本对话输入或选择的文本。