.map значения группировкой по ключу

Мои данные выглядят так:

replaceName =
0: {Number: 1, newNumber:"1", name: "tom" }
1: {Number: 2, newNumber: "2", name: "john" }
2: {Number: 2, newNumber: "2", name: "Greg" }
3: {Number: 3, newNumber: "3", name: "Phil" }
4: {Number: 4, newNumber: "4", name: "tim" }
5: {Number: 4, newNumber: "4", name: "paul" }

Я хочу сгруппировать значения, одинаковые для newNumber.

Результат будет примерно таким:

result = [
1: {Number: 1, newNumber:"1", name: "tom" }
2: [{Number: 2, newNumber: "2", name: "john" }, {Number: 2, newNumber: "2", name: "Greg" }]
3: {Number: 3, newNumber: "3", name: "Phil" }
4: [{Number: 4, newNumber: "4", name: "tim" }, {Number: 4, newNumber: "4", name: "paul" }]

Я пробовал несколько способов, и самый близкий, к которому я пришел, это:

    const result = _.mapValues(replaceName, function(group, key) {
        return key === 'newNumber' ? _.groupBy(group, 'newNumber') : group;
  });

Я знаю, что в моем сценарии это не работает. Ключ нового объекта также соответствует newNumber, как и в моем ожидаемом результате.

Любая помощь здесь будет оценена по достоинству. Используем lodash и реагируем.