Consegui uma solução, pelo menos está carregando. Resolvi da seguinte maneira:
No evento DataError do grid coloquei a seguinte instrução:
e.ThrowException = False
e carreguei normalmente os dados da coluna
datagridview.item(coluna,linha).value=valor do banco
Não sei se é a maneira mais correta, mas por enquanto está funcionando.