Для начала скачаем по фтп папку вашей темы и залезем CSS файл. Потом находим интересующие вас разделы меню и меняем иконку вместо стандартной, лежащей тут:
http://Ваш сайт/ow_static/themes/Ваша тема/images/значек.png
на нужную Вам (можно закачать иконку через раздел темы - графика) и подставить ссылку на нее. Потом копируете измененный кусок кода в раздел правки темы в админке. Не правьте тему через фтп, т.к. после обновления всё пропадет, а в Edit CSS разделе останется.

Ищите ИД страницы, которую создали или ИД плагина, который и создал страницу. Побалуйтесь в режиме разработчика браузера. Уже точно не помню, как делал. Если не получится, могу порыться в старых записях.

Хромом в исходном коде посмотрите какую иконку значек тянет и там меняйте