Почта доставляется в папку спама при доставке через внешний SMTP-сервер

В настоящее время я использую PHPMailer для отправки писем в PHP, например:

$mail = new PHPMailer();
$mail->IsSMTP();
$mail->SMTPAuth = true;
$mail->isHTML(true);
$mail->SMTPSecure = "ssl";
$mail->Host = "MY_EXTERNAL_SMTP_SERVER";
$mail->Port = 465;
$mail->Username = "[email protected]";
$mail->Password = "MY_PASSWORD";
$mail->From = "[email protected]";
$mail->FromName = "xxxxxx.com";
$mail->AddAddress("[email protected]");
$mail->Subject = "=?UTF-8?B?".base64_encode("test")."?=";
$mail->Body = "123";
$mail->Send()

Когда я отправляю письма в Gmail, я обнаружил, что отправка письма от Yahoo! SMTP-сервер отправляет в папку «Входящие», но отправка электронной почты с любого другого внешнего SMTP-сервера приводит к тому, что сообщение автоматически помечается как спам.

Почему это происходит? Как я могу предотвратить это?