Нужно преобразовать прямой вопрос в косвенный. Используем союз if.
Ответ: They asked me if they swam in the river.