Problemas com Envio de E-mail C#

Bom dia Pessoal.

Estou com um problema, ao enviar email, C#.

Só consigo enviar usando um email do GMAIL.

Alguem ja teve esse tipo de problema?

Segue o codigo...

 MailMessage mail = new MailMessage();
 SmtpClient SmtpServer = new SmtpClient("smtp.meuservidor.com.br");
 mail.From = new MailAddress("email@meuemail.com.br");
 mail.To.Add("destinatario@seuemail.com.br");
 mail.Subject = "Teste";
 mail.Body = "Assunto";

 SmtpServer.Port = 587;
 SmtpServer.Credentials = new System.Net.NetworkCredential("email@meuemail.com.br", "senha");
 SmtpServer.EnableSsl = true;
 SmtpServer.Send(mail);
 Console.WriteLine("Send out");