Правильный вариант: had been.
Полное предложение: “He decided not to go because he had been there three times already.” Past Perfect используется, потому что посещения произошли до другого действия в прошлом — decided.
Перевод: «Он решил не идти, потому что уже трижды там был».