Добрый вечер!
Да это возможно:
Перейдите в панель управления вашего сайта выберите вверху вкладку дизайн, после нажмите на пункт управление дизайном (шаблоны), далее прокрутите страницу в самый низ, модуль видео выбирите таблица стилей (css) и в ней в самый вверх вставте этот код сохранить.
.category_row_img {background-image: url(тут ссылка на вашу иконку)!important;}
Если не получится предоставте ссылку на сайт поможем: