La solution se trouve p.10 de la documentation de `fancyhdr`: comme las première page d'un chapitre utilise le style `plain`, il faut le redéfinir dans le préambule, comme ceci:
couci :
\fancypagestyle{plain} {%
\fancyhf{}
\fancyfoot[R]{\textbf{\thepage}}
\renewcommand{\headrulewidth}{0pt}
}%
