Reconhecimento de dígitos/caracteres/números Pillow Python

Olá, estou fazendo um projeto em python que faz reconhecimento de dígitos em imagens. Já vi muitos tutorias mas quero entender o código para fazer alterações.
Já fiz uns testes de código e agora iniciarei o projeto. Postarei aqui o projeto para compartilhar ideias.

- Utilizando o OpenCv já consegui localizar a imagem instanciar em um array.
- Com o pytesseract eu faço a exibição do reconhecimento dos dígitos da imagem lida porém, de 8 imagens ele reconhece apenas 2 números. Acredito que eu precise melhorar a imagem para melhor identificação ou utilizar alguma forma de treinar o script para identificar os dígitos nas imagens.

Estou estudando o tensorflow para ver de qual que é.

Se alguém tiver alguma dica, por favor da o salve.