Подходът с jsonb_array_elements и jsonb_set беше правилната идея, но някак си ги поставихте по грешен начин:
UPDATE myTable SET myColumn = jsonb_set(myColumn, '{A}', (
SELECT jsonb_agg( element || '{"myArray":[]}' )
FROM jsonb_array_elements(myColumn -> 'A') element
));
Между другото, ако вашата колона вече има jsonb тип данни, не трябва да се нуждаете от прехвърляния.