Une façon de procéder serait de définir l'alias de colonne à un niveau différent afin de pouvoir le référencer deux fois sans répéter l'expression.
SELECT *,
Row_number() OVER (ORDER BY
CASE WHEN @SortBy LIKE '% ASC' THEN sort_col END ASC,
CASE WHEN @SortBy LIKE '% DESC' THEN sort_col END DESC) AS RowNumber
FROM YourTable
CROSS APPLY (SELECT CASE
WHEN @SortBy LIKE 'column1 %' THEN Cast(column1 AS SQL_VARIANT)
WHEN @SortBy LIKE 'column2 %' THEN Cast(column2 AS SQL_VARIANT)
WHEN @SortBy LIKE 'column3 %' THEN Cast(column3 AS SQL_VARIANT)
WHEN @SortBy LIKE 'column4 %' THEN Cast(column4 AS SQL_VARIANT)
END) C(sort_col)
J'envisagerais d'utiliser SQL dynamique pour cela à la place. Ce genre de requête fourre-tout tuera l'idée d'obtenir un bon plan qui peut utiliser des index pour éviter un tri.