TaSPM: Targeted Sequential Pattern Mining
Jinan University(暨南大学);Pazhou Lab(琶洲实验室);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
序列模式挖掘(SPM)是模式挖掘的一种重要技术,在实际中有着广泛的应用。虽然已经提出了许多有效的序列模式挖掘算法,但针对目标序列的研究很少。有针对性地查询序列模式不仅可以减少SPM生成的序列数量,而且可以提高用户进行模式分析的效率。现有的靶向序列查询算法都是基于特定的场景,不能推广到其他应用。在本文中,我们制定了有针对性的序列模式挖掘的问题,并提出了一个通用的框架,即TaSPM,基于快速CM-SPAM算法。此外,为了提高TaSPM在大规模数据集和基于多项的序列数据集上的效率,我们提出了几种剪枝策略来减少挖掘过程中的无意义操作。TaSPM中设计了四种剪枝策略,能够快速终止不必要的模式扩展,获得更好的性能。最后,我们在不同的数据集上进行了广泛的实验,比较现有的SPM算法与TaSPM。实验结果表明,新的目标挖掘算法TaSPM可以实现更快的运行时间和更少的内存消耗。
2022-02-26 cs.AI cs.DB
A Constraint Programming Approach for Mining Sequential Patterns in a Sequence Database
University of Caen(卡昂大学);University PARIS 13(巴黎第十三大学)
基于约束的模式发现是众多数据采掘任务的核心。模式是相对于一组给定的约束(频率,封闭性,大小等)提取的。在序列模式挖掘的背景下,已经开发了大量专门的技术来解决特定类别的约束。本文的目的是研究使用约束编程(CP)的建模和挖掘序列数据库中的序列模式。我们的CP方法提供了一种自然的方式,在同一个框架中同时结合了来自不同来源的大量约束。实验结果表明,我们的方法的可行性和利益。
2013-11-27 cs.AI cs.DB
Towards Target Sequential Rules
Jinan University(暨南大学);Pazhou Lab(琶洲实验室);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
在许多实际应用中,顺序规则挖掘(SRM)可以为各种服务提供预测和推荐功能。发现属于高频、高置信度序列规则的所有有价值的规则是模式挖掘的一项重要技术。虽然已有多种SRM算法被提出来解决各种实际问题,但目前还没有针对目标序列规则的研究。有针对性的顺序规则挖掘旨在挖掘用户关注的有趣的顺序规则,从而避免产生其他无效和不必要的规则。该方法可以进一步提高用户分析规则的效率,减少数据资源的消耗。本文给出了目标序列规则的相关定义,阐述了目标序列规则的挖掘问题。此外,我们提出了一个有效的算法,称为有针对性的顺序规则挖掘(TaSRM)。为了提高TaSRM的效率,提出了几种剪枝策略和一种优化方法.最后,在不同的基准测试上进行了大量的实验,并从运行时间、内存消耗、可扩展性以及不同查询规则的查询案例等方面对实验结果进行了分析。结果表明,新算法TaSRM及其变体可以实现更好的实验性能相比,现有的基线算法。
2022-06-09 cs.AI cs.DB
Mining Weighted Sequential Patterns in Incremental Uncertain Databases
University of Dhaka(达卡大学);University of Manitoba(曼尼托巴大学)
本文针对增量不确定数据库中的加权序列模式挖掘问题,提出了一种挖掘频繁序列的算法及两种增量挖掘新技术,实验验证了框架的高效性。
2024-03-31 cs.AI cs.DB
Concept Relation Discovery and Innovation Enabling Technology (CORDIET)
K.U.Leuven(鲁汶大学);Vlerick Leuven Gent Management School(弗拉瑞克-鲁汶-根特管理学院);Amsterdam-Amstelland Police(阿姆斯特丹-阿姆斯特尔兰警察局);Universiteit van Amsterdam Business School(阿姆斯特丹大学商学院);National Research University Higher School of Economics(国家研究型高等经济大学)
概念关系发现和创新使能技术(CORDIET)是一个从非结构化文本数据中获取新知识的工具箱。CORDIET的核心是C-K理论,它抓住了创新的基本要素。该工具使用形式概念分析(FCA),涌现自组织映射(ESOM)和隐马尔可夫模型(HMM)作为分析过程中的主要工件。用户可以定义时态、文本挖掘和复合属性。文本挖掘属性用于分析文档中的非结构化文本,时态属性使用这些文档的时间戳进行分析。复合属性是基于文本挖掘和时态属性的XML规则。用户可以使用对象聚类规则对对象进行聚类,也可以使用分割规则将数据分割成碎片。这些工件针对高效的数据分析进行了优化; FCA网格和ESOM映射中的对象标签包含一个URL,用户可以单击该URL打开所选文档。
2012-02-13 cs.AI cs.IR stat.ML
US-Rule: Discovering Utility-driven Sequential Rules
Jinan University(暨南大学);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
效用驱动挖掘是数据科学中的一项重要任务,在现实生活中有着广泛的应用。高效用序列模式挖掘(HUSPM)是一种效用驱动的挖掘。HUSPM的目标是发现所有具有高实用性的序列模式。然而,现有的HUSPM算法不能提供一个准确的概率来处理一些场景的预测或推荐。高效用序列规则挖掘(HUSRM)旨在发现所有具有高效用和高置信度的序列规则。HUSRM算法目前只有一种,效率不高。在本文中,我们提出了一个更快的算法,称为US规则,有效地挖掘高效用的顺序规则。它利用规则估计效用共生剪枝策略(REUCP),以避免无意义的计算。为了提高密集长序列数据集上的效率,提出了四种更严格的上界(LEEU,REEU,LERSU,RERSU)和相应的剪枝策略(LEEUP,REEUP,LERSU,RERSU).此外,US-Rule提出了规则估计效用重计算剪枝策略(REURP)来处理稀疏数据集。最后,通过在不同数据集上的大量实验,与现有算法进行了比较,结果表明,US-Rule算法在执行时间、内存消耗和可扩展性等方面都有较好的性能。
2021-11-29 cs.AI cs.DB
Prefix-Projection Global Constraint for Sequential Pattern Mining
Preparatory school of Oran EPSECG(奥兰预备学校 EPSECG);University of Oran 1(奥兰第一大学);University of Caen(卡昂大学);University PARIS 13(巴黎第十三大学)
约束条件下的序列模式挖掘是一个具有挑战性的数据采掘任务。许多有效的ad hoc方法已经被开发用于挖掘序列模式,但它们都缺乏通用性。最近的工作已经调查了约束编程(CP)的方法,但他们仍然是有效的,因为他们的编码。在本文中,我们提出了一个全球性的约束的基础上投影数据库的原则,弥补了这一缺陷。实验表明,我们的方法明显优于CP方法,并在大型数据集上与ad hoc方法竞争。
2015-06-23 cs.AI
Incremental Mining of Frequent Serial Episodes Considering Multiple Occurrences
Inria(法国国家信息与自动化研究所);Carnegie Mellon University(卡内基梅隆大学);University of Waikato(怀卡托大学);Telecom Paris(巴黎电信学院);Institut Polytechnique de Paris(巴黎理工学院)
分析来自流的信息的需要出现在各种应用中。其基本研究方向之一是挖掘数据流上的序列模式。现有的研究多基于事务中模式的存在来挖掘项目序列,而没有考虑项目集序列及其多次出现的情况。然而,在一个窗口的项集流和它们的多次出现的模式,提供了额外的能力来识别模式的基本特征和它们之间的相互关系是无法识别的现有的基于存在的研究。在本文中,我们研究了这样一个新的序列模式挖掘问题,并提出了相应的顺序矿工与新的策略,有效地修剪搜索空间。在真实数据和合成数据上的实验表明了该方法的有效性。
2022-04-09 cs.AI cs.DB
Mining Non-Redundant Local Process Models From Sequence Databases
Eindhoven University of Technology(埃因霍温理工大学);University of Tartu(塔尔图大学)
序列模式挖掘技术从序列数据库中提取对应于频繁序列的模式。这些技术的一个实际局限性是,它们会让用户负担太多的模式。局部过程模型挖掘是过程挖掘领域的一种新的挖掘方法。在传统的序列模式挖掘中,一个模式描述一个子序列,而LPM捕获一组连续性。此外,虽然传统的顺序模式仅匹配在序列数据库中观察到的顺序,但LPM可以捕获未明确观察到的顺序,但与观察到的顺序相关。换句话说,LPM概括了在序列数据库中观察到的行为。这些属性使得一组LPM可以覆盖更大的一组顺序模式的行为。然而,现有的LPM挖掘技术仍然遭受模式爆炸问题,因为它们产生冗余LPM集。在本文中,我们提出了几种算法来挖掘一组非冗余的LPM,无论是从一组冗余的LPM或从一组序列模式。我们根据经验比较他们之间的建议,并对现有的(本地)流程挖掘技术的覆盖率,冗余度和复杂性的生产集的LPM。
2018-09-21 cs.AI cs.DB cs.DS
Using Answer Set Programming for pattern mining
AGROCAMPUS-OUEST/IRISA UMR6074(西部农学院/法国信息与随机系统研究所);Inria(法国国家信息与自动化研究所)
序列模式挖掘就是从一个唯一的项集序列中提取频繁序列模式。本文探讨了声明性语言,如回答集编程(ASP),有效地解决这个问题的能力。我们提出了几个ASP实现的频繁序列模式挖掘任务:一个非增量和增量的决议。结果表明,增量解析比非增量解析更有效,但两种ASP程序的效率都低于专用算法。尽管如此,这种方法可以被看作是第一步,一个通用的框架,顺序模式挖掘的约束。
2014-09-27 cs.AI cs.DB cs.LO
Efficiency Analysis of ASP Encodings for Sequential Pattern Mining Tasks
AGROCAMPUS-OUEST(西部农业学院);IRISA-UMR 6074(IRISA-UMR 6074 研究所);Inria(法国国家信息与自动化研究所);Inria – Centre de Rennes(法国国家信息与自动化研究所雷恩中心);Potsdam University(波茨坦大学)
本文介绍了使用回答集编程(ASP)挖掘序列模式。ASP是一种高级说明性逻辑编程范例,用于高级编码、组合和优化问题求解以及知识表示和推理。因此,ASP是实现具有背景知识的模式挖掘的一个很好的候选者,这一直是数据采掘的问题。我们提出了编码的经典序列模式挖掘任务中的两种表示嵌入(填充间隙与跳过间隙)和各种模式:频繁,约束和浓缩。我们比较了这些编码的计算性能,以更好地了解ASP编码的效率。实验结果表明,在实际问题中,填充间隙策略具有更低的内存消耗。最后,相比约束编程方法(CPSM),另一个声明式编程范式,我们的建议表现出相当的性能。
2017-11-14 cs.AI cs.DB stat.ML
Declarative Sequential Pattern Mining of Care Pathways
AGROCAMPUS-OUEST/IRISA-UMR6074(西部农业学院/IRISA-UMR6074);CHRU Brest/EA-7449 REPERES(布雷斯特大学医院/EA-7449 REPERES);Rennes University 1/IRISA-UMR6074(雷恩第一大学/IRISA-UMR6074)
序列模式挖掘算法被广泛应用于护理路径数据库的挖掘,但它们产生了大量的模式,大多是冗余或无用的。临床医生需要工具来表达复杂的挖掘查询,以生成更少但更重要的模式。这些算法的通用性不足以回答复杂的临床医生查询。本文提出了一种基于答案集编程范式的声明式模式挖掘方法。这是一个药物流行病学研究的例证,该研究调查了来自法国医学管理数据库的癫痫发作住院与抗癫痫药物转换之间的可能联系。
2017-07-26 cs.AI
Constraint-based Sequential Pattern Mining with Decision Diagrams
Carnegie Mellon University(卡内基梅隆大学);University of Toronto Scarborough(多伦多大学士嘉堡校区)
约束序列模式挖掘的目的是在观察定义在项目属性上的约束的同时,识别项目序列数据库上的频繁模式。我们引入新的技术,基于约束的序列模式挖掘,依赖于多值决策图表示的数据库。具体来说,我们的表示可以容纳多个项目属性和各种约束类型,包括一些非单调约束。为了评估我们的方法的适用性,我们开发了一个基于MDD的前缀投影算法,并比较其性能对一个典型的生成和检查的变体,以及一个国家的最先进的基于约束的序列模式挖掘算法。结果表明,我们的方法是有竞争力的,或优于这些其他方法的可扩展性和效率。
2018-11-14 cs.AI cs.LG
The Algorithms of Updating Sequential Patterns
由于时态数据库中挖掘的数据会随着时间的推移而不断变化,因此时态数据库中频繁序列的增量式挖掘一直是研究的重点。本文提出了一种算法IUS,利用原始数据库中的频繁序列和负边界序列进行增量式序列挖掘。为了处理某些数据需要从原始数据库中更新的情况,我们提出了一种称为DUS的算法来维护更新后的数据库中的序列模式。我们还定义了负边界序列阈值:Min_nbd_supp,以控制负边界中的序列数量。
2002-03-27 cs.AI cs.DB
OPP-Miner: Order-preserving sequential pattern mining
Hebei University of Technology(河北工业大学);Florida Atlantic University(佛罗里达大西洋大学);Mininglamp Academy of Sciences, Mininglamp Technology(明略科技明略科学院);Hefei University of Technology(合肥工业大学)
时间序列是按时间顺序排列的测量值的集合。从时间序列中发现模式在许多领域都很有用,例如股票分析,疾病检测和天气预报。为了发现模式,现有的方法通常将时间序列数据转换为另一种形式,如名义/符号格式,以降低维数,这不可避免地偏离数据值。此外,现有的方法主要忽略了时间序列值之间的顺序关系。为了解决这些问题,受保序匹配的启发,本文提出了一种保序序列模式(Order-Preserving Sequential Pattern,简称Sequential Pattern)挖掘方法,该方法基于时间序列数据的顺序关系来表示模式。这种表示的固有优点是,时间序列的趋势可以由时间序列数据下的值的相对顺序表示。为了获得时间序列中的频繁趋势,我们提出了OPP-Miner算法来挖掘具有相同趋势的模式(具有相同相对顺序的子序列)。OPP-Miner采用过滤和验证策略计算支持度,采用模式融合策略生成候选模式。为了压缩结果集,我们还研究了寻找最大的OPPs。实验证明,OPP-Miner不仅是高效和可扩展的,而且还可以发现时间序列中的相似子序列。此外,案例研究表明,我们的算法在分析COVID-19疫情中具有很高的实用性,通过识别关键趋势和提高聚类性能。
2022-02-09 cs.AI cs.DB
A global Constraint for mining Sequential Patterns with GAP constraint
University of Oran(奥兰大学);EPSECG of Oran(奥兰高等经济与商业管理学院);University of Caen(卡昂大学);University PARIS 13(巴黎第十三大学)
间隔约束下的序列模式挖掘是一个具有挑战性的课题。已经开发了许多有效的专门方法,但它们都缺乏通用性。约束编程(CP)方法由于其编码的大小而不是那么有效。在文献[7]中,我们提出了SPM的全局约束Prefix-Projection,它弥补了这一缺陷。然而,这种全局约束不能直接扩展到支持间隙约束。在本文中,我们提出了全局约束GAP-SEQ,使处理SPM或没有间隙约束。GAP-SEQ依赖于正确模式扩展的原则。实验表明,我们的方法在大型数据集上的性能明显优于CP方法和最先进的cSpade方法。
2015-11-26 cs.AI
Memory-Efficient Sequential Pattern Mining with Hybrid Tries
Warrington College of Business(沃顿商学院);University of Florida(佛罗里达大学);Tepper School of Business(泰珀商学院);Carnegie Mellon University(卡内基梅隆大学);Rotman School of Management(罗特曼管理学院);University of Toronto(多伦多大学)
本文提出一种基于混合trie数据结构和相应挖掘算法的内存高效序列模式挖掘方法,有效解决了大型数据集的内存瓶颈,在中小型实例上内存和时间均显著改善,且在256GB内存下唯一可处理大型数据集。
2024-07-27 cs.AI cs.DB cs.DS
A Subsequence Interleaving Model for Sequential Pattern Mining
University of Edinburgh(爱丁堡大学)
最近的序列模式挖掘方法使用最小描述长度(MDL)原则来定义一种编码方案,该编码方案描述了一种挖掘数据库中最压缩模式的算法。我们提出了一种新的子序列交织模型的基础上的概率模型的序列数据库,它允许我们搜索最压缩的模式集,而无需设计一个特定的编码方案。我们所提出的算法能够有效地挖掘最相关的序列模式,并使用相关的兴趣度度量对它们进行排名。在我们的模型中的有效推理是我们使用的结构性期望最大化框架,其中的期望步骤采取的形式的子模块优化问题的覆盖约束的直接结果。我们在合成和真实世界的数据集上表明,我们的模型挖掘了一组具有低虚假性和冗余性,高可解释性和实用性的序列模式。此外,我们证明了我们的方法的模式的质量是可比的,如果不是更好的话,现有的最先进的序列模式挖掘算法。
2016-11-11 cs.AI cs.LG stat.ML
HUSP-SP: Faster Utility Mining on Sequence Data
Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳));Jinan University(暨南大学);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
高效用序列模式挖掘(HUSPM)由于其广泛的应用和相当的普及,已经成为一个重要的研究课题。然而,由于当HUSPM问题遇到低效用阈值或大规模数据时,搜索空间的组合爆炸,解决HUSPM问题可能是耗时和内存开销的。已经提出了几种算法来解决这个问题,但它们在运行时间和内存使用方面仍然花费很多。在本文中,为了进一步有效地解决这个问题,我们设计了一个紧凑的结构称为序列投影(seqPro),并提出了一个有效的算法,即发现高效用的序列模式与seqPro结构(HUSP-SP)。HUSP-SP利用紧凑的序列数组在序列数据库中存储必要的信息。seqPro结构被设计为有效地计算候选模式的效用和上限值。此外,一个新的上限的效用,即更严格的减少序列效用(TRSU)和两个修剪策略,在搜索空间中,被用来提高挖掘性能的HUSP-SP。在合成和真实数据集上的实验结果表明,HUSP-SP可以显着优于国家的最先进的算法在运行时间,内存使用,搜索空间修剪效率和可扩展性。
2022-12-29 cs.AI cs.DB
Skopus: Mining top-k sequential patterns under leverage
Nanjing University of Information Science and Technology(南京信息工程大学);Aalto University(阿尔托大学);Monash University(莫纳什大学)
本文提出了一个在杠杆作用下精确发现top-k序列模式的框架。它结合了(1)序列模式的预期支持度的新定义-大多数兴趣度度量直接依赖的概念-与(2)SkOPUS:一种新的分支定界算法,用于在给定的兴趣度量下精确发现前k个序列模式。我们的兴趣度测量采用分区方法。一个模式之所以有趣,是因为它的出现频率要比通过假设任何一对模式之间的独立性所能解释的要高。与独立性下的期望相比,支持度越大,模式越有趣。我们建立在这两个元素上,以准确地提取具有最高杠杆的k个序列模式,这与我们对预期支持的定义一致。我们对具有已知模式的合成数据和真实世界的数据集进行实验;这两个实验都证实了我们的方法与最新技术水平的一致性和相关性。这篇文章发表在数据采掘和知识发现上,可以在http://dx.doi.org/10.1007/s10618-016-0467-9上访问。
2018-02-05 cs.AI cs.LG stat.ML
Autonomous Extraction of a Hierarchical Structure of Tasks in Reinforcement Learning, A Sequential Associate Rule Mining Approach
Northern Arizona University(北亚利桑那大学);Washington State University(华盛顿州立大学)
强化学习(RL)技术虽然通常很强大,但学习速度较慢,特别是在高维空间中。将任务分解为层次结构具有显著加速学习、泛化和迁移学习的潜力。然而,当前的任务分解技术通常依赖于由专家提供的高级知识(例如,使用动态贝叶斯网络)来提取分层任务结构;这在自治系统中不一定可用。在本文中,我们提出了一种新的方法,顺序关联规则挖掘的基础上,可以提取层次结构的任务在强化学习(SARM-HSTRL)在一个自治的方式为马尔可夫决策过程(MDP)和因子MDP。该方法利用关联规则挖掘发现状态之间的因果关系和时间关系,在不同的轨迹,并提取一个任务层次结构,捕捉这些子目标之间的关系,作为不同的子任务的终止条件。我们证明,提取的分层政策提供了一个层次上最优的政策,在MDPs和因子化MDPs。应该注意的是,SARM-HSTRL在具有单个任务轨迹以及具有多个任务轨迹的场景中提取这种分层最优策略,而无需动态贝叶斯网络。此外,它已被理论和经验表明,提取的分层任务结构是一致的轨迹,并提供了最有效的,可靠的,紧凑的结构在适当的假设。数值计算结果比较了所提出的SARM-HSTRL方法与传统的HRL算法在检测子目标的准确性,提取层次的有效性,以及在几个测试床的学习速度方面的性能。
2018-11-17 cs.AI
Mining Message Flows using Recurrent Neural Networks for System-on-Chip Designs
Synopsys(新思科技);Intel(英特尔)
全面的规范对于片上系统(SoC)设计的整个验证过程中的各种活动至关重要。然而,规范通常是模糊的,不完整的,甚至包含不一致或错误。本文通过开发一种规范挖掘方法来解决这个问题,该方法可以自动从SoC事务级跟踪中提取序列模式,以便挖掘出的模式共同表征SoC设计的系统级规范。这种方法利用利用收集的SoC执行轨迹训练的长短期记忆(LSTM)网络来捕获各种通信事件之间的顺序依赖关系。然后,开发了一种新的算法,从训练的LSTM模型中有效地提取系统级通信的序列模式。还提出了一些跟踪处理技术,以提高挖掘性能。我们评估所提出的方法上的非平凡的多核SoC原型的仿真痕迹。初步结果表明,所提出的方法是能够提取各种模式的系统级规格从高度并发的SoC执行的痕迹。
2020-04-29 cs.AI cs.DC
Mining frequency-based sequential trajectory co-clusters
Universidade Federal de Santa Cataina(圣卡塔琳娜联邦大学)
联合聚类是一种特定类型的聚类,它解决了在不考虑所有属性的情况下查找对象组的问题。该技术已被证明在高维稀疏数据中比传统聚类具有更一致的结果。在轨迹共聚类中,文献中发现的方法有两个主要的局限性:第一,空间和时间维度必须由用户定义的阈值约束;第二,元素(轨迹点)被聚类,忽略轨迹序列,假设点之间是独立的。针对上述局限性,提出了一种新的轨迹共聚类方法来挖掘语义轨迹共聚类。它同时将轨迹及其元素聚类,同时考虑它们出现的顺序。这种新方法使用元素频率来识别候选共簇。此外,它使用了一个目标成本函数,自动驱动共聚类过程,避免了约束维度的需要。我们使用真实世界的公开数据集评估所提出的方法。实验结果表明,我们的建议发现频繁和有意义的连续序列揭示流动性模式,从而最相关的元素。
2021-10-27 cs.AI cs.LG
Contrast Pattern Mining: A Survey
Jinan University(暨南大学);Pazhou Lab(琶洲实验室);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
对比模式挖掘是数据采掘的一个重要分支。传统的序列模式无法描述不同类别数据之间的对比信息,而涉及对比度概念的对比模式可以描述不同对比度条件下数据集之间的显著差异。基于该领域发表的论文数量,我们发现研究人员对CPM的兴趣仍然很活跃。由于CPM有很多研究问题和研究方法。新进入该领域的研究人员很难在短时间内了解该领域的概况。因此,本文的目的是提供一个最新的全面和结构化的概述对比模式挖掘的研究方向。首先,我们提出了一个深入的了解CPM,包括基本概念,类型,挖掘策略,并评估判别能力的指标。然后根据CPM方法的特点将其分为基于边界的算法、基于树的算法、基于进化模糊系统的算法、基于决策树的算法和其他算法。此外,我们还列举了这些方法的经典算法,并讨论了它们的优缺点。介绍了CPM中的高级主题。最后,我们结束了我们的调查与讨论的挑战和机遇,在这一领域。
2022-09-27 cs.AI cs.DB
Totally-ordered Sequential Rules for Utility Maximization
Harbin Institute of Technology (Shenzhen)(哈尔滨工业大学(深圳));Jinan University(暨南大学);University of Illinois at Chicago(伊利诺伊大学芝加哥分校)
高效用序列模式挖掘(HUSPM)是知识发现和数据分析领域的一项重要而有价值的活动,具有许多实际应用。在某些情况下,HUSPM不能提供一个很好的措施来预测会发生什么。高效用序列规则挖掘(HUSRM)发现高效用和高置信度的序列规则,使其能够解决HUSPM中的问题。现有的HUSRM算法都是为了寻找高效用的偏序序列规则,但这些规则与实际情况并不一致,可能产生虚假的偏序序列规则。因此,在本文中,我们制定的问题,高效用全有序的顺序规则挖掘,并提出了两个新的算法,称为TotalSR和TotalSR+,旨在确定所有高效用全有序的顺序规则(HTSR)。TotalSR创建了一个效用表,可以有效地计算前件支持和效用前缀总和列表,可以在O(1)时间内计算序列的剩余效用。我们还引入了一个左优先扩展策略,可以利用反单调属性使用置信度修剪策略。TotalSR还可以大大减少搜索空间的效用上限修剪策略的帮助下,避免更多的无意义的计算。此外,TotalSR+使用辅助先行记录表来更有效地发现HTSR。最后,在真实数据集和合成数据集上的大量实验结果表明,TotalSR比具有较少修剪策略的算法效率更高,并且TotalSR+在运行时间和可扩展性方面比TotalSR更有效。
2022-09-27 cs.AI
An Efficient Algorithm for Mining Frequent Sequence with Constraint Programming
UCLouvain(鲁汶天主教大学);KU Leuven(荷语鲁汶大学)
用于序列模式挖掘(SPM)的约束编程(CP)方法的主要优点是它们的模块化,其中包括添加新约束(正则表达式,长度限制等)的能力。目前SPM的最佳CP方法使用全局约束(模块)来计算投影数据库并强制执行最小频率;它使用类似于PrefixSpan方法的过滤算法来实现这一点。然而,最终的系统不像一些最先进的采矿系统,如Zaki的cSPADE那样可扩展。我们展示了如何使用技术从数据采掘和CP,可以使用一个通用的约束求解器,但优于现有的专业系统。这主要是由于计算投影频率的模块中的两个改进:首先,可以通过预先计算符号可能变得不被序列支持的位置来加速计算投影数据库,从而避免每次扫描整个序列;第二,从CP求解器中使用的跟踪中获得灵感,设计了一个回溯-感知数据结构,允许快速增量存储和恢复投影数据库。详细的实验显示了这种方法如何优于现有的CP以及SPM的专用系统,并且效率的提高直接转化为其他设置的效率提高,例如使用正则表达式进行挖掘。
2016-04-05 cs.AI cs.DB
Neighborhood-based Hard Negative Mining for Sequential Recommendation
The Hong Kong Polytechnic University(香港理工大学);NetEase Inc.(网易公司)
针对序列推荐中负采样忽视结构信息的问题,提出基于邻域重叠的图负采样方法GNNO,利用物品转移图挖掘难负样本并结合课程学习,在三个Amazon数据集上有效提升多种模型性能。
2023-06-12 cs.AI cs.IR
Towards Correlated Sequential Rules
Tongji University(同济大学);Jinan University(暨南大学);Pazhou Lab(琶洲实验室);Shandong University of Science and Technology(山东科技大学)
高效用序列模式挖掘(HUSPM)的目标是在大量序列中有效地发现有用或有益的序列模式。然而,仅仅意识到实用程序合格的模式是不足以进行预测的。为了弥补这一不足,高效用序列规则挖掘(HUSRM)的目的是探索的信心或概率预测发生的后果序列模式的基础上出现的前提序列模式。它有许多应用,如产品推荐和天气预测。然而,现有的算法,被称为HUSRM,是有限的,以提取所有合格的规则,而忽略了生成的顺序规则之间的相关性。为了解决这个问题,我们提出了一种新的算法,称为相关的高效用顺序规则矿工(CoUSR)的相关性的概念集成到HUSRM。该算法不仅要求每个规则是相关的,而且还要求高效用顺序规则的前件和后件中的模式是相关的。该算法采用实用程序列表结构,避免了多次数据库扫描。此外,还采用了多种剪枝策略来提高算法的效率和性能。基于几个真实世界的数据集,随后的实验表明,CoUSR是有效的和高效的操作时间和内存消耗。
2022-10-27 cs.AI
tSPM+; a high-performance algorithm for mining transitive sequential patterns from clinical data
Massachusetts General Hospital(麻省总医院);University Medical Center Göttingen(哥廷根大学医学中心);Georg-August-Universität Göttingen(哥廷根大学);Harvard Medical School(哈佛医学院);Mass General Brigham(麻省总医院布里格姆医疗系统)
本文提出高性能 tSPM+ 算法,通过在时间模式中增加持续时间维度优化 tSPM,实现最高 980 倍加速与 48 倍内存优化,并提供 Docker 容器与 R 包以集成至机器学习工作流,成功应用于识别 Post COVID-19 患者。
2023-09-08 cs.AI cs.IR cs.LG
Semantics of negative sequential patterns
CNRS / IRIT(法国国家科学研究中心 / 图卢兹计算机研究所);Institut Agro / IRISA UMR6074(法国农业研究院 / 雷恩计算机科学与随机系统研究所)
在模式挖掘领域中,负序列模式是指由将要发生的事件和将要不发生的其他事件(称为负事件)组成的序列。例如,模式$\langle a\ \neg b\ c\rangle$的包含随着a的出现和随后的c的出现而出现,但在其间没有b的出现。本文旨在揭示这种看似直观的符号的模糊性,并为模式和序列之间的包含关系确定了八种可能的语义。这些语义的说明和正式研究,特别是我们提出的优势和它们之间的等价关系。此外,我们证明了支持是反单调的这些语义。一些结果进行了讨论,其目的是开发算法,以有效地提取频繁的负模式。
2020-02-21 cs.AI cs.DB
Uncovering Students' Inquiry Patterns in GenAI-Supported Clinical Practice: An Integration of Epistemic Network Analysis and Sequential Pattern Mining
Monash University(墨尔本大学);University College London(伦敦大学学院);Peking University(北京大学)
本研究通过整合认知网络分析和序列模式挖掘,揭示学生在GenAI支持下的临床实践中探究模式,发现高绩效者更注重临床相关信息识别,而低绩效者则停留在常规问题验证循环中。
2025-12-04 cs.AI cs.CY
A Knowledge Discovery Framework for Learning Task Models from User Interactions in Intelligent Tutoring Systems
University of Quebec in Montreal(魁北克大学蒙特利尔分校);Université Lille-Nord de France, Artois(法国里尔-北部大学阿图瓦分校)
领域专家应提供相关的领域知识的智能教学系统(ITS),使它可以指导学习者在解决问题的学习活动。然而,对于许多定义不明确的领域,领域知识很难明确定义。在以前的作品中,我们展示了如何使用序列模式挖掘从记录的用户交互中提取部分问题空间,以及它如何在解决问题的练习中支持辅导服务。本文描述了这种方法的扩展,以提取更丰富,更适合支持辅导服务的问题空间。我们将序列模式挖掘与(1)维度模式挖掘(2)时间间隔,(3)有值动作的自动聚类和(4)闭合序列挖掘相结合。一些辅导服务已经实施,并在一个辅导系统中进行了实验。
2009-01-29 cs.AI
Analysing the behaviour of robot teams through relational sequential pattern mining
University of Bari “Aldo Moro”(巴里大学“阿尔多·莫罗”);Imperial College(帝国理工学院);IIIA - Artificial Intelligence Research Institute, CSIC - Spanish Council for Scientific Research(西班牙国家研究委员会人工智能研究所(IIIA))
此报告概述了在多代理域中使用关系表示来建模整个系统的行为。在这个系统中,一个理想的属性是团队成员能够以合作的方式一起工作,以实现共同的目标。其目的是定义一个系统的方法来验证一个团队的成员之间的有效合作,并比较不同的多智能体行为。利用多智能体系统的外部观察来分析、建模、识别智能体行为,对于指导团队行动是非常有用的。特别是,这份报告侧重于自主无监督的顺序学习团队的行为从观察的挑战。我们的方法允许学习一个符号序列(关系表示),将动态复杂环境的原始多代理,多变量观察转化为一组序列行为,这些行为是有问题的团队的特征,由一组序列表示,这些序列以一阶逻辑原子表示。我们建议使用关系学习算法挖掘有意义的频繁模式之间的关系序列,以预测团队行为。我们比较了两支球队在RoboCup四足联赛环境中的表现,这两支球队对比赛的态度非常不同。一个使用基于案例的推理方法,另一个使用纯反应行为。
2010-10-29 cs.AI cs.LG cs.MA
Seqret: Mining Rule Sets from Event Sequences
CISPA Helmholtz Center for Information Security(CISPA 欧洲信息安全中心);Institute for AI in medicine IKIM(人工智能在医学中的研究所)
Seqret 基于最小描述长度原则,从事件序列中同时挖掘条件与无条件依赖规则,实验证明其能恢复合成数据真实规则并发现真实数据中的有用规则。
2025-05-09 cs.AI
MDL-based Compressing Sequential Rules
Jinan University(暨南大学);Pazhou Lab(琶洲实验室);Guangdong University of Technology(广东工业大学)
如今,随着互联网的快速发展,大数据时代已经到来。互联网每天产生大量的数据。然而,从海量数据中提取有意义的信息就像大海捞针。数据采掘技术可以为解决这一问题提供各种可行的方法。目前,针对具有序列特征的数据库,提出了许多序列规则挖掘算法。这些规则帮助人们从海量数据中提取大量有意义的信息。如何实现挖掘结果的压缩,减少数据大小,以节省存储空间和传输时间?到目前为止,对SRM压缩的研究还很少。本文结合最小描述长度(MDL)原则,在支持度和置信度两个度量下,介绍了SRM的压缩问题,并在设计的顺序规则编码方案的基础上,提出了一种基于MDL的顺序规则压缩方案ComSR。据我们所知,我们是第一个使用顺序规则来编码整个数据库的人。提出了一种探试法,尽可能多地发现一组紧凑而有意义的顺序规则。ComSR有两种权衡算法,ComSR_non和ComSR_ful,基于数据库是否可以完全压缩。在不同阈值的真实数据集上进行的实验表明,该方法可以找到一组紧凑且有意义的序列规则,这表明该方法是有效的。
2022-12-20 cs.AI
The Long and the Short of It: Summarising Event Sequences with Serial Episodes
Universiteit Antwerpen(安特卫普大学)
模式挖掘的一个理想结果是一个信息模式的小集合,不包含冗余或噪声,它识别手头数据的关键结构。标准的频繁模式挖掘器无法实现这一目标,因为由于模式爆炸,通常会返回非常大量的高度冗余模式。我们追求理想的顺序数据,采用模式集挖掘方法的方法,而不是排名模式单独,我们认为结果作为一个整体。模式集挖掘已经成功地应用于事务数据,但令人惊讶的是,对序列数据的研究却很少。在本文中,我们采用的MDL原则,以确定一组序列模式,总结数据最好的。特别是,我们形式化如何编码序列数据使用一组连续的情节,并使用编码的长度作为质量分数。作为搜索策略,我们提出了两种方法:第一种算法从一个大的候选集中选择一个好的模式集,而第二种是一个无参数的任何时间算法,挖掘模式集直接从数据。对合成数据和真实数据的实验表明,我们可以有效地发现小的信息模式集。
2019-02-07 cs.AI cs.DS
Efficiently Summarising Event Sequences with Rich Interleaving Patterns
Max-Planck Institute for Informatics(马克斯·普朗克信息学研究所);Saarland University(萨尔大学)
发现数据库的关键结构是数据采掘的主要目标之一。在模式集挖掘中,我们通过发现一小组模式来很好地描述数据。我们考虑的模式种类越丰富,我们的描述语言越强大,我们就能更好地总结数据。在本文中,我们提出了\ourmethod,一种新的贪婪的基于MDL的方法,用于总结顺序数据使用丰富的模式,允许交错。实验表明,\ourmethod比现有技术快几个数量级,产生更好的模型,以及发现有意义的语义的形式模式,识别多个选择的值。
2017-01-27 cs.AI cs.DB
Towards Explainable Sequential Learning
School of Computing, Newcastle University(新卡素大学计算学院);Translational and Clinical Research Institute, Faculty of Medical Sciences, Newcastle University(医学科学学院转化与临床研究学院,新卡素大学);National Institute for Health and Care Research (NIHR), Newcastle Biomedical Research Centre (BRC), Newcastle University and The Newcastle upon Tyne Hospitals NHS Foundation Trust(国家健康与护理研究所(NIHR)、新卡素生物医学研究中心(BRC)、新卡素大学及泰恩塞德医院 NHS 基础信托)
本文提出混合可解释时序数据处理管道EMeriTAte+DF,通过后验可解释阶段和扩展的规约挖掘算法,将数值驱动与基于事件的时序数据分类相结合,在多变量时间序列分类上优于现有方法。
2025-05-29 cs.AI cs.DB
Defining Cases and Variants for Object-Centric Event Data
RWTH Aachen University(亚琛工业大学)
进程的执行会在信息系统中留下事件数据的痕迹。这些事件数据可以通过流程挖掘技术进行分析。对于传统的过程挖掘技术,必须将每个事件与恰好一个对象相关联,例如,公司的客户。与一个对象相关的事件形成一个称为事例的事件序列。案例描述了一个过程中的端到端运行。事件数据中包含的案例可用于发现流程模型、检测常见瓶颈或学习预测模型。然而,在现实生活中的信息系统中遇到的事件,例如,ERP系统通常可以与多个对象相关联。传统的顺序案例概念不符合这些以对象为中心的事件数据,因为这些数据表现出图形结构。人们可以通过扁平化的方法将以对象为中心的事件数据强制纳入传统的事例概念中,但是扁平化操作了数据并删除了信息。因此,一个类似于传统事件日志的案例概念的概念是必要的,以使不同的过程挖掘任务的应用程序对以对象为中心的事件数据。在本文中,我们介绍了以对象为中心的过程挖掘的情况下的概念:过程执行。这些都是基于图形的情况下,在传统的流程挖掘中考虑的一般化。此外,我们还提供了提取流程执行的技术。基于这些执行,我们确定等价的进程行为相对于一个属性使用图同构。相对于事件活动的等效过程执行是以对象为中心的变体,即,对传统流程挖掘中的变量进行了概括。我们提供了一个以对象为中心的变量的可视化技术。的贡献的可扩展性和效率进行了广泛的评估。此外,我们还提供了一个案例研究,展示了现实生活中事件日志的最常见的以对象为中心的变体。
2022-08-05 cs.AI cs.DB
Dichotomic Pattern Mining with Applications to Intent Prediction from Semi-Structured Clickstream Datasets
AI Center of Excellence, Fidelity Investments(富达投资人工智能卓越中心)
我们引入了一个模式挖掘框架,该框架在半结构化数据集上运行,并利用结果之间的二分法。我们的方法利用约束推理,找到频繁发生的序列模式,并表现出所需的属性。这允许创建新颖的模式嵌入,这对知识提取和预测建模非常有用。最后,我们提出了一个应用程序的客户意图预测从数字点击流数据。总体而言,我们表明,模式嵌入在半结构化数据和机器学习模型之间起着集成者的作用,提高了下游任务的性能,并保持了可解释性。
2022-01-23 cs.AI cs.IR cs.LG
Enhanced Urban Traffic Management Using CCTV Surveillance Videos and Multi-Source Data Current State Prediction and Frequent Episode Mining
Bennett University(贝内特大学);Aligarh Muslim University(阿里格尔穆斯林大学)
本研究提出一种融合CCTV视频与多源数据的统一框架,结合时空特征融合、FEM和混合LSTM-Transformer模型进行实时交通预测,在CityFlowV2数据集上准确率达98.46%,有效支持主动拥堵管理。
2025-10-04 cs.AI cs.LG
Frequent Pattern Mining approach to Image Compression
Department of Computer Engineering, IIITDM Kancheepuram, Tamil Nadu, India(计算机工程系,IIITDM坎切普拉姆,泰米尔纳德邦,印度)
本文提出基于频繁模式挖掘的图像压缩方法,通过聚类和序列挖掘技术提高压缩效率,实现压缩比提升45%并保持图像质量。
2026-01-24 cs.AI cs.CV eess.IV
Extracting Seasonal Gradual Patterns from Temporal Sequence Data Using Periodic Patterns Mining
IMT Lille Douai(里尔杜埃国立高等矿业电信学校);Institut Mines-Télécom(法国国立高等矿业电信学院);Univ. Lille(里尔大学)
挖掘频繁事件的目的是从时间数据序列中恢复序列模式,然后可以用来预测相关事件的发生。另一方面,以“当X增加/减少时,Y增加/减少”的形式捕获复杂属性的协变的渐进模式在必须处理大量复杂数值数据的许多现实世界应用中发挥重要作用。最近,这些模式已经受到关注的数据采掘社区探索时态数据谁提出的方法来自动提取渐进模式的时态数据。然而,据我们所知,还没有提出任何方法来提取定期出现在相同的时间间隔在许多序列的时间数据的渐进模式,尽管这样的模式可能会增加知识的某些应用程序,如电子商务。在本文中,我们提出从时间数据序列中提取周期性重复属性的协变,我们称之为季节性渐进模式。为此,我们制定的任务,挖掘季节性渐进模式的问题,挖掘周期性模式在多个序列,然后我们利用周期性模式挖掘算法提取季节性渐进模式。我们讨论了这些模式的具体特点,并提出了一种方法,他们的提取基于挖掘周期频繁模式共同的多个序列。我们还提出了一个新的反单调的支持定义与这些季节性的渐进模式。从一些现实世界的数据集得到的说明性的结果表明,该方法是有效的,它可以通过过滤大量的非季节性模式,以确定季节性的提取小的模式集。
2020-10-20 cs.AI cs.LG
NegPSpan: efficient extraction of negative sequential patterns with embedding constraints
Agrocampus-Ouest(西部农业高等教育学院);IRISA(信息与随机系统研究所);Univ Rennes(雷恩大学);Inria(法国国家信息与自动化研究所);CNRS(法国国家科学研究中心)
频繁序列模式挖掘是指在一个大的序列数据集中提取被建模为模式的重复行为。这些模式告诉我们哪些事件在序列中经常被观察到,即真正发生了什么。有时,知道某个特定事件没有发生比提取大量观察到的事件更能提供信息。负序贯模式(NSP)通过包含观察事件和缺席事件的模式来描述重复行为。已经提出了几种方法来开采这样的NSP。此外,不同方法的NSP在句法和语义上存在差异,这使得它们难以进行比较。本文提供了一个统一的框架,制定的句法和语义的NSP。然后,我们介绍了一种新的算法,NegPSpan,提取NSP使用前缀跨度深度优先方案,并启用maxgap约束,其他方法不考虑。正式框架允许突出所提出的方法与文献中的方法之间的差异,特别是与最先进的方法eNSP之间的差异。在合成数据集和真实数据集上进行的大量实验表明,NegPSpan可以提取有意义的NSP,并且由于内存需求显著降低和计算时间缩短,它可以处理比eNSP更大的数据集。
2018-07-25 cs.AI cs.DB cs.DS
Data-Driven Goal Recognition in Transhumeral Prostheses Using Process Mining Techniques
The University of Melbourne(墨尔本大学);RMIT University(皇家墨尔本理工大学)
本研究提出基于过程挖掘的目标识别方法,利用时序肌电与运动传感器数据,在虚拟现实中实现高精度假肢目标识别,优于现有机器学习技术。
2023-09-15 cs.AI cs.CV cs.RO
An Integer Linear Programming Framework for Mining Constraints from Data
University of California, Los Angeles(加州大学洛杉矶分校)
结构化输出预测问题(例如,顺序标记、分层多类分类)通常涉及对输出标签空间的约束。这些约束与学习模型相互作用,以过滤不可行的解决方案,并促进建立一个负责任的系统。然而,尽管约束很有用,但它们通常基于手工制定的规则。这就提出了一个问题-- \emph{can we mine constraints and rules from data based on a learning algorithm?}在本文中,我们提出了一个从数据中挖掘约束的一般框架。特别是,我们认为在结构化的输出预测推理作为一个整数线性规划(ILP)问题。然后,给定目标函数的系数和相应的解决方案,我们挖掘潜在的约束条件,估计的外部和内部多面体的可行集。我们验证了所提出的约束挖掘算法在各种合成和现实世界中的应用,并证明了所提出的方法成功地识别规模的可行集。特别是,我们表明,我们的方法可以学习解决9 x9数独难题和最小生成树问题的例子,而无需提供的基本规则。我们的算法也可以与一个神经网络模型集成,以学习多标签分类任务的层次标签结构。此外,我们提供了一个理论分析的紧密性的多面体和可靠性的挖掘约束。
2021-06-11 cs.AI cs.LG stat.ML
RPS: A Generic Reservoir Patterns Sampler
EPITA Research Laboratory (LRE)(EPITA研究实验室(LRE));University of Tours(图尔大学)
针对复杂数据流模式采样研究不足的问题,提出通用加权水库模式采样算法RPS,可处理多种模式并解决时间偏差,在真实数据集上实现了序列数据在线分类器准确率媲美离线基线的效果。
2024-10-31 cs.AI cs.LG math.CO