arXivDaily arXiv每日学术速递 周一至周五更新
arXiv 2107.08484cs.NEcs.LG
收藏

一种面向层次化神经架构搜索的新型进化算法

A Novel Evolutionary Algorithm for Hierarchical Neural Architecture Search

University of Macedonia(马其顿大学)

Aristeidis Christoforidis, George Kyriakides, Konstantinos Margaritis

AI总结:

本研究提出一种带层次化模块架构表示与子结构筛选机制的新型进化算法,用于全局空间的神经架构搜索,在Fashion-MNIST和NAS-Bench101上以较少世代数取得了93.2%和94.8%的准确率。

摘要:

本研究提出一种适用于全局搜索空间的新型神经架构搜索进化算法。该算法的架构表示将拓扑结构组织在多个层次化模块中,设计过程利用该表示来探索搜索空间。我们还采用了一种筛选系统,推动性能优异的子结构在后续世代中被复用。我们在Fashion-MNIST和NAS-Bench101上应用该方法,在相对较少的世代数下分别取得了93.2%和94.8%的准确率。

英文摘要:

In this work, we propose a novel evolutionary algorithm for neural architecture search, applicable to global search spaces. The algorithm's architectural representation organizes the topology in multiple hierarchical modules, while the design process exploits this representation, in order to explore the search space. We also employ a curation system, which promotes the utilization of well performing sub-structures to subsequent generations. We apply our method to Fashion-MNIST and NAS-Bench101, achieving accuracies of $93.2\%$ and $94.8\%$ respectively in a relatively small number of generations.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑