'A few' используется с исчисляемыми существительными (например, cookies, books), а 'a little' - с неисчисляемыми (например, water, sugar).
Ответ: 6. Would you like some more ice cream? B: Yes, please. Just a little.