深層ニューラルネットワークのハイパーパラメータ最適化手法

Particle swarm optimization for hyper-parameter selection in deep neural networks

粒子群最適化を用いたハイパーパラメータ選択

2017-06-30 被引用 256 中級
CNN
  • 深層ニューラルネットワークは多くのタスクで成功を収めている。
  • 本研究では、粒子群最適化を用いてハイパーパラメータを選択する手法を提案。
  • PSOがDNNの性能向上に寄与することを実証した。
深層学習ハイパーパラメータ粒子群最適化

深層ニューラルネットワーク(DNN)は多くの分野での成功を収めていますが、その性能はハイパーパラメータに大きく依存しています。本研究では、粒子群最適化(PSO)を用いてハイパーパラメータを自動的に選択する新しいアプローチを提案します。実験により、PSOがDNNの性能を向上させることが示され、特に小型のDNNでも競争力のある分類精度を達成しました。この論文は、DNNの設計や最適化に関心のある研究者や実務者にとって興味深い内容です。

深層学習や最適化手法に興味がある研究者や実務者に向いています。

Particle swarm optimization for hyper-parameter selection in deep neural networks
Pablo Ribalta Lorenzo, Jakub Nalepa, Michał Kawulok, Luciano Sanchez Ramos, José Ranilla