Para que no te aparezca la barra lateral en las páginas:
Apariencia > Personalizar > Opciones Generales > Configuración General. Páginas ponerlo como Ancho Completo.
Si también lo quieres quitar en la zona de la tienda:
Apariencia > Personalizar > Woocommerce > Archivos > Ancho Completo
Si es de los productos:
Apariencia > Personalizar > Woocommerce > Productos Individuales > Ancho Completo
Si es del blog:
Apariencia > Personalizar > Blog > Entradas Invididuales y Entradas del Blog > Ancho Completo
Y si lo quieres quitar en Cursos aquí tienes un enlace