Di seguito il link di una libreria gratuita per ricevere mail con connessione SSL,provata testata e funzionante,vi è anche esempio in vb.net.
Ci sarà da fare alcune variazioni in quanto tutte le volte che ci si connette riscarica tutte le mail inviate e ricevute,comunque,come base può andare.
OstroSoft POP3 Component