Con el nuevo editor visual que WordPress actualizó ahora funciona de otra forma, puedes verlo en la página del plugin bajando a las capturas de pantalla:
Si no, otra opción que tienes es instalando y activando este plugin de editor clásico que había antes, solo con instalar y activar, te aparecerá el botón como aparece en el curso.