Hola Guillermo,
En la zona de menú de wordpress, en apariencia menús, arriba del todo tienes una pestaña y puedes activar las clases CSS.
Una vez activadas, cada elemento del menú tiene una casilla para añadir una clase de css, ahí pones una palabra que será tu clase, y luego con esta clase, en apariencia > personalizar > css adicional, añades el css que le da el color a ese botón.
Por ejemplo si la clase fuera «boton-color» pondrías:
.boton-color {
background-color: red;
}
El color lo puedes cambiar por el que quieras, busca color html
Te recomiendo los cursos relacionados con CSS del ChorriClub:
CSS iniciación: https://chorri.club/curso/css-programacion-web-parte-ii/
HTML + CSS: https://chorri.club/curso/html-y-css/
Un saludo!