Spécifier les colonnes de votre requête devrait faire l'affaire :
select a.col1, b.col2, a.col3, b.col4, a.category_id
from items_a a, items_b b
where a.category_id = b.category_id
devrait faire l'affaire en ce qui concerne la sélection des colonnes souhaitées.
Pour contourner le fait que certaines données ne se trouvent que dans items_a et que d'autres ne se trouvent que dans items_b, vous pourriez faire :
select
coalesce(a.col1, b.col1) as col1,
coalesce(a.col2, b.col2) as col2,
coalesce(a.col3, b.col3) as col3,
a.category_id
from items_a a, items_b b
where a.category_id = b.category_id
La fonction coalesce renverra la première valeur non nulle, donc pour chaque ligne si col1 est non nul, elle l'utilisera, sinon elle obtiendra la valeur de col2, etc.