Afin de rationaliser et d’harmoniser l’écriture et l’accord des noms composés (existants ou à venir), l’Académie recommande de laisser au singulier le nom utilisé dans un nom composé au singulier et de l’accorder uniquement pour le pluriel de ce même nom composé. C’est une mesure de bon sens, ces formes étant devenues des mots à part entière pour lesquels ne se pose plus la question du sens des composants individuels (comme dans une locution).
Cela règle 99 % des cas, certaines graphies anciennes pouvant être conservées pour des cas particuliers (ex : des trompe-l’œil ).
Voir Recommandation de l’Académie française (article B1.1.)
Donc : un amuse-bouche, des amuse-bouches.