-
公开(公告)号:CN107644106A
公开(公告)日:2018-01-30
申请号:CN201710975528.4
申请日:2017-10-17
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F17/30
摘要: 本发明公开一种自动挖掘业务中间人的方法,包括如下步骤:S1:输入手机取证数据,从输入的手机取证数据中提取待挖掘对象的至少一个身份特征属性,进入S2步骤;S2:根据S1中提取的待挖掘对象的每个身份特征属性,调用对应的分析模型对待挖掘对象进行挖掘分析,获得对应每个身份特征属性的业务中间人的类型的可信度值,进入S3步骤;S3:根据S2中获得的对应待挖掘对象的每个身份特征属性的业务中间人的类型的可信度值及各自的权重,综合计算待挖掘对象属于某种业务中间人的类型的可信度值,得出待挖掘对象属于某种业务中间人的结果。
-
公开(公告)号:CN115794986A
公开(公告)日:2023-03-14
申请号:CN202211615674.3
申请日:2022-12-15
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/31 , G06F40/279 , G06F40/268 , G06F16/35 , G06N3/048 , G06N3/08
摘要: 本申请涉及一种基于特征继承的实体关系抽取方法,其包括:S1:对输入文本进行实体抽取,获得实体的有效特征,所述实体的有效特征包括实体、实体类型以及实体在原文本中的位置;S2:对输入文本进行词性分析,得到句子的词性结果;S3:根据获得的实体的有效特征和词性结果构建三元组特征;S4:将三元组特征输入关系分类网络中,并输出分类结果。本申请提出了一种基于特征继承的实体关系抽取方法,该方法将第一阶段的其他有效特征也传递到第二阶段,因为这些特征都准确率高,所以这样的特征会大大增强了第二阶段关系分类的效果。然后将这些特征通过带有注意力机制的网络层进行各类特征的权重学习,可以有效提升关系抽取效果。
-
公开(公告)号:CN115423237A
公开(公告)日:2022-12-02
申请号:CN202210758082.0
申请日:2022-06-29
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06Q10/06
摘要: 本申请涉及一种基于动态适配的服务质检方法及存储介质,该方法将各类服务的质检需求,形成统一的任务池,根据不同任务对应的资源类型,抽样形成质检区的资源池,执行服务对应的处理引擎,结合资源种类、数据量、并发数等维度的特性,自动分析出各类服务的运行指标,发布到生产环境;实时监测大数据平台运行环境的变化,动态调整各类服务的运行指标;实现对各类服务的科学、有序、安全的管理,确保大数据平台稳定安全运行,支撑各业务场景下的大数据应用需求。
-
公开(公告)号:CN115017176A
公开(公告)日:2022-09-06
申请号:CN202210573359.2
申请日:2022-05-25
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/242 , G06F16/248 , G06F16/27
摘要: 本发明涉及一种多节点数据检索方法、装置及存储介质。其中方法包括:对获取到的检索任务进行归一化处理后,通过预设调度缓存区对各个资源节点进行检索资源以及检索任务的调度,获取当前业务场景关联的资源节点相应的检索引擎,通过调整方案以及检索引擎,得到业务场景的检索结果,对检索结果进行去重以及排序处理,将经过去重及排序后的各个资源节点的检索结果进行融合,得到当前的业务场景的返回结果集。本发明满足了大数据业务分析需求,解决困扰已久的多节点海量数据检索的结果展示不准确、检索效率低下的问题,提高复杂业务场景下的多节点数据检索的效率和准确性。
-
公开(公告)号:CN113626385B
公开(公告)日:2022-07-15
申请号:CN202110767562.9
申请日:2021-07-07
申请人: 厦门市美亚柏科信息股份有限公司
摘要: 本发明给出了一种基于文本数据读取的方法和系统,包括分析过滤重复文件并将关联的文件合并归类至对应数据集合Fn中;比对待提取文本文件中属性集合与属性列表以根据其相似程度赋值处理引擎,并形成文件的属性分析结果集合;响应于属性分析结果集合与待提取文本文件中的内容分析集合的匹配度超过第一阈值,利用属性对应的特处理引擎提取文本数据。该方法和系统可以自动适配已知特征和未知特征的文本文件数据,调取相应的数据提取引擎,实现文本文件类型原始数据的自动识别和解析入库,提高文本文件的提取效率和准确性,提升大数据分析能力。
-
公开(公告)号:CN111563074B
公开(公告)日:2022-05-31
申请号:CN202010351007.3
申请日:2020-04-28
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/215 , G06F16/28
摘要: 本申请公开了一种基于多维标签的数据质量检测方法和系统。基于已知类型数据项和检测规则库、利用多维标签分析算法为已知类型数据项打上对应的维度标签,并利用维度标签动态调整已知类型数据项的质量检测流程;基于未知类型数据项并结合检测规则库,利用规则相似性评估算法为未知类型数据源推荐质量检测引擎,并对所述质量检测引擎的结果进行验证,获得有效质量检测规则集合;保存已知类型数据项的质量检测流程和有效质量检测规则集合并更新多维标签规则库。该方案通过多维标签算法和规则相似性评估两种算法,解决固定检测规则模板引起的准确性差和时效性弱等问题,实现数据质量的快速准确检测且及时反馈检测结果,提升数据源的质量。
-
公开(公告)号:CN111581431B
公开(公告)日:2022-05-20
申请号:CN202010351013.9
申请日:2020-04-28
申请人: 厦门市美亚柏科信息股份有限公司
摘要: 本发明公开了一种基于动态评估的数据探查方法和装置,通过根据数据源的类型和探查维度调用探查引擎对数据源进行数据探查,得到第一探查结果;对第一探查结果进行评估,得到评估结果,根据评估结果对探查流程进行动态调整,获得动态匹配的探查规则,并通过探查规则获得第二探查结果;计算第二探查结果的有效探查项比例,根据有效探查比例判断探查规则的有效性,对第二探查结果进行确认以获得最终探查结果。通过动态调整数据探查的操作路径,实现不同类型数据的自动探查工作,提高数据探查的工作效率,结合不同的数据源和探查结果,智能推荐探查结果,实现所有接入数据源的自动探查工作,高效支撑各种不同数据源的探查,提升大数据智能化接入效率。
-
公开(公告)号:CN111563103B
公开(公告)日:2022-05-20
申请号:CN202010351018.1
申请日:2020-04-28
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/2455
摘要: 本申请公开了一种用于数据血缘检测方法和系统。提取同一条存储记录在不同节点所对应的节点数据;利用路径规则库将节点数据映射存储于路径数据集合中,基于路径溯源算法将路径数据集合中的每个子集合进行归一化处理,获得节点数据的的上下级关系的路径标识集合;利用关系规则库将节点数据中的数据项映射存储于数据项集合中,基于关系溯源算法分析数据项之间的关联关系,获得数据项溯源结果集合;基于节点数据的路径标识集合和数据项溯源结果集合构建每条数据在不同节点的数据血缘信息库。该方案通过路径溯源和关系溯源分别从节点数据和数据项两个层面进行分析,实现业务数据或者业务要素的全面快速准确的溯源要求,提升大数据的业务支撑能力。
-
公开(公告)号:CN110851428B
公开(公告)日:2022-05-20
申请号:CN201911137144.0
申请日:2019-11-19
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/21 , G06F16/2455
摘要: 本发明提供了一种基于规则算子动态编排的数据库分析方法、装置及介质,该方法通过从数据库中获取用户输入的数据集合,并对所述数据集合进行识别和解析,判断数据库中是否存在与所述数据集合匹配的业务类型,如果是,则使用数据处理规则推荐算法推荐多个规则算子,如果否,所述用户在数据库中添加多个规则算子,然后对所述多个规则算子的权重进行调整,将调整权重后的规则算子编排为数据分析模型,再使用所述数据分析模型对所述数据集合进行分析得到分析结果。本发明可以通过基于待分析数据库中的数据类型自动编排规则算子生成数据分析模型,提高数据库中的数据分析模型的运行效率,提高了数据库的性能。
-
公开(公告)号:CN111563137B
公开(公告)日:2022-05-17
申请号:CN202010351015.8
申请日:2020-04-28
申请人: 厦门市美亚柏科信息股份有限公司
IPC分类号: G06F16/29 , G06F16/2455
摘要: 本发明给出了一种用于重合轨迹的分析方法和系统,包括基于轨迹信息库获取待分析基准轨迹集合,并根据发生时间将待分析基准轨迹集合划分为多个子集合;利用预设的分析间隔阈值将子集合中的轨迹等分,利用随机数作为等分点的半径获取等分点的轨迹相似圈;遍历待分析基准轨迹集合以及轨迹相似圈,利用比对属性和发生时间获取轨迹信息库中与等分点的轨迹相似结果集合,并利用轨迹相似结果集合的交集获得重合轨迹的结果集合Zn。该用于重合轨迹的分析方法和系统基于海量数据场景下,可以自动分析出与特定轨迹重合的未知轨迹,并及时预警,大大降低了人工分析研判的工作,分析效率高。
-
-
-
-
-
-
-
-
-