Разница между методами arr.map() и arr.filter()

• Arr.filter - создает новый массив, исключая из старого неподходящие под условия элементы.

• Arr.map - создает новый массив, преобразовывая/заменяя элементы старого.

В вашем примере в map, вы возвращаете не элемент, а результат булевого выражения - true или false;

Arr.filter(callback) {
    let newArr = [];
    Arr.forEach(item => {
        //если коллбек возвращает true, записать элемент в новый массив.
        callback(item) && newArr.push(item);
    })
    return tempArr;
}
Arr.map(callback) {
    let newArr = [];
    //в любом случае записать элемент в новый массив. 
    // Ваш callback = (num) => (a <= num && num <= b) // он возвращает либо true либо false.
    Arr.forEach((item)=>{
        newArr.push(callback(item));        
    })
    return newArr;
}