E-mailing massif

Version imprimable

03/08/2010, 09h32
Aloneghost

E-mailing massif

Bonjour, je suis supposé créer un outil php pour une campagne de pub de mon entreprise, je pensais m'y prendre tout simplement comme je le fais habituellement, mais il s'agit d'envoyer à peu pret 8 000 000 de mails...

je voudrais donc savoir avant de me lancer, si php pose des limites concernant le mailing, ou si je pouvais faire cette campagne avec des outils php classique.

Cordialement
03/08/2010, 11h35
guigo

tu peux le faire sans pb avec php.
Les souchi peuvent venir de ton serveur smtp (attention a ta file d'attente) + attention a la construction de tes mails pour éviter de passer dans les spam sur les routeurs.

Guigo

La structure que j'utilise actuellement est la suivante :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
$boundary = '-----='.md5(uniqid(rand()));
 
 
 
								$headers  = "From: \"Lonsite.com\"<contact@monsite.com>\n";
								$headers .= "MIME-Version: 1.0\n";
								$headers .= "Content-Type: multipart/related; boundary=\"$boundary\"";
 
								$message = "Ceci est un message au format MIME 1.0 multipart/mixed.\n\n";
								$message .= "--" . $boundary . "\n";
								$message .= "Content-Type: text/html; charset=\"utf-8\"\n";
								$message .= "Content-Transfer-Encoding: 8bit\n\n";
								$message .= "<html><body>";
								$message .= "Mon message au format HTML";
								$message .= "</body></html>";
								$message .= $content_encode . "\n";
								$message .= "\n\n";
								$message .= "--" . $boundary . "--\n";
 
 
 
 
$sujet = utf8_decode("Titre de mon message");
 
mail($email,$sujet,$message,$headers);

J'ignore si les messages envoyés avec ceci partent en spam :calim2:

Pour la "file d'attente", il me faut faire une vérification sur l'envoie du mail, et passer à l'envoie suivant quand le résultat est "true" non?

Merci ;)

03/08/2010, 15h22
guigo

Il faut que tu fasse un reglage de ton serveur mail. Edite une regle qui supprime les messages quand l'adresse n'est pas bonne, sinon tu risque d'encombrer ta queue mail. La conséquence (toujours celon la config du serveur mail) peut etre un bouclage sur tes mails qui n'arrive pas a partir et donc tous tes autres mails qui sont eux valide reste dans ta file d'attente. Alors image si ca t'arrive au debut !!! Avec une Bdd de 8 000 000 de contacts !
04/08/2010, 08h41
grunk

Je ne peut que te conseiller de procéder en plusieurs passe à l'aide d'un cron. Envoyer 8M de mail d'un bloc c'est juste suicidaire.

Ce que je ferais :

- Un script PHP qui une fois lancé écrit un flag dans la base (ou un fichier) pour indiqué qu'il est en cours d'éxecution.
- Traitement d'un lot d'email (lot de 1000 me semble être honnete)
- On retire le flag dans la base et on note l'endroit auquel les envoi ce sont arretés (même chose si jamais il y'a eu erreur avec par exemple une alerte pour que tu en sois informé).

Tu relances ensuite ce script par exemple toutes les 2 min via un cron. Si pas de flag dans la base => je traite un lot de mail , sinon je quitte le script.

Pense également à modifier le temps d'exécution minimal de php , sinon tu risquerai d'avoir des surprises.

Note : il n'est pas rare de voir des mailling de grande entreprise s'étale rsur plusieurs jours.

Note2 : renseigne toi avec ton hébergeur au niveau de l'envoi de mail, chez certains hébergeur grd public type ovh/1&1 ... si tu envoi 8M de mail rapidement tu as de forte chance de voir ton serveur blacklisté et voir tes mail partir en spam automatiquement
04/08/2010, 15h40
Aloneghost

Merci pour vos réponses, je me suis donc renseigné auprès de mon hébergeur, chaque pack d'hébergement me permet de lancer 1 mail/ seconde sans être blacklisté.
Donc en concevant un script qui boucle toutes les 1.5 secondes, je suis large.

J'ai cherché comment vérifier la validité d'une adresse mais je n'ai pas trouvé grand chose de concluant, je ne parle pas d'expression régulière, mais bien de vérification de l'existence d'une adresse, pour ne pas me faire blacklister à cause de mauvaises adresses :S

Auriez vous une piste à ce niveau?

Ensuite, je voudrais faire un tracing des ouverture de mail, j'ai cru comprendre que je pouvais le faire avec "Disposition-Notification-To" dans le header, ok mais je ne vois pas comment traiter automatiquement les résultats :s

Je n'ai pas tellement envie d'aller vérifier 300 000 ouvertures de mails sur une boite manuellement...

Merci pour votre aide !
04/08/2010, 16h47
grunk

Pour la validité des emails regarde du coté de checkdnsrr notamment dans les commentaire de la doc , tu devrais trouver ton bonheur.

Attention à Disposition-Notification-To , la plus part des webmails ne le gèrent pas.
Une des solutions pour faire du tracking de mail est d'utiliser une image transparente dans tes mail qui serait un fichier php (<img src="monscript.php" /> ).
Ca te permet au minimum de compter le nombre de fois ou un mail est entièrement ouvert (sous entendu images affichées) mais tu n'auras pas les adresses qui l'auront ouvert.
Faut également garder à l'esprit que tu as potentiellement 8M de personnes qui pourront ouvrir ton mail et donc lancer ton script, même si ca s'étale sur quelques jours , faudra pouvoir encaisser la montée en charge
04/08/2010, 17h53
Aloneghost

Pas mal pas mal tout ça :) Je regarderais mieux à tête reposé demain matin pour la vérification.

Pour le tracking, je pensais insérer quelque chose du genre une balise object.
Les balises object ne posent pas plus de problemes que les balises images si?
04/08/2010, 18h20
guigo
tu peux passer un param dans l'url de ton image
Code:

1 2 3 <img src=\"".$url."suivi.php?dest=".$dest."\"
05/08/2010, 15h29
Aloneghost

Parfait :)

Par contre, une question bête, le fait de mettre un script dans une balise image, ca ne pose pas de soucis d'interprétation auprés des navigateurs?
Pas de comportement étrange?

Merci pour toutes vos infos !
05/08/2010, 16h45
grunk

A priori non pas de problème , mais 99% des client mail (web ou lourd) n'affiche pas les images par défaut et ne lancera donc pas le script.

N'hésite cependant pas à faire un mailing de test sur les 3/4 grand webmail , idem pour les clients lourd (genre outlook qui ne gère pas l'encodage tout à fait de la même façon que thunderbird)

Bon je viens de faire quelques essais pour le traking, mais ca n'est pas bien concluant :S

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
$boundary = '-----='.md5(uniqid(rand()));
								$headers  = "From: \"Reseau-Coiffure.com\"<contact@reseau-coiffure.com>\n";
								$headers .= "MIME-Version: 1.0\n";
								$headers .= "Content-Type: multipart/related; boundary=\"$boundary\"";
 
								$message = "Ceci est un message au format MIME 1.0 multipart/mixed.\n\n";
								$message .= "--" . $boundary . "\n";
								$message .= "Content-Type: text/html; charset=\"utf-8\"\n";
								$message .= "Content-Transfer-Encoding: 8bit\n\n";
								$message .= "<html><body>";
								$message .= '<img width="10px" height="10px" src="http://www.monsite.com/mapagetraking.php?mail=test@hotmail.fr"/>';
								$message .= "</body></html>";
 
								$message .= $content_encode . "\n";
								$message .= "\n\n";
								$message .= "--" . $boundary . "--\n";

La balise image appelle un script du genre

Code:

1
2
3
4
5
6
7
8
9
10
<?php
include('Includes/Connect_BDD.Inc');
Connect_BDD();
$mail =$_GET['mail'];
$serveur=$_SERVER['HTTP_USER_AGENT'];
$stamp =time();
$requete = "INSERT INTO  trakingmail (mail ,navigateur ,stamp ) VALUES ('$mail','$serveur','$stamp')";
$req = mysql_query($requete) or die('Erreur SQL !<br>'.$sql.'<br>'.mysql_error());
mysql_close;
?>

Et ma base de donnée ne se met à jour que trés rarement lorsque j'ouvre le même mail, je ne comprend pas, ca ne marche pas à tous les coup?

Edit : Aprés quelques tests, il semblerait, pour hotmail tout du moins, que le traking fonctionne seulement quand on rafraichie la page... Pas lorsqu'on ouvre le message normalement... Vous avez une idée de l'origine du soucis? :S

09/08/2010, 11h44
grunk

Peut être cela vient t'il du fait que ton script ne retourne pas d'image ?
Essai au moins de renvoyer un header avec le type mime approprié et pourquoi pas une image blanche.
09/08/2010, 13h41
Aloneghost
Code:

1 2 header("Content-type: image/png"); print file_get_contents("images/bad.png");
J'ai essayé ça, quand je vais directement sur la page, pas de soucis, ca m'affiche l'image, par contre inclu dans le mail, toujours sous hotmail, ca ne m'affiche pas l'image, et ca ne lis pas la bdd...

Comprend pas vraiment :S
09/08/2010, 15h15
JeitEmgie

Citation:

Envoyé par Aloneghost

Merci pour vos réponses, je me suis donc renseigné auprès de mon hébergeur, chaque pack d'hébergement me permet de lancer 1 mail/ seconde sans être blacklisté.
Donc en concevant un script qui boucle toutes les 1.5 secondes, je suis large.

8M de mails… à 1.5 seconde par mail…

-> 12M de secondes
3333 heures et quelque…
139 jours…
09/08/2010, 15h44
Aloneghost

Mon entreprise à plus de 10 hébergements rien que sur cet hébergeur, si je fais un lien avec chaque plan, je divise ce temps par 10 :)
24/09/2010, 05h59
pserru

Hallo,
Bon, je suis programmeur du dimanche, mais je suis aussi utilisateur. De grâce, même si les percipients ont donné leur adresse volontairement et même dans un contexte professionnel, ces campagnes sont des horreurs. L'image de marque de l'entreprise risque d'en prendre un bon coup (que je ne trouve pas volé)...
Un lien pour accéder au contenu HTML du "mail" est à mon sens ce qu'il y a de mieux. Le visiteur le suit s'il veut et s'il le suit, c'est bien volontairement et la considération de cet évènement a alors de la "valeur". Du coup l'identification est facile, le trafic réduit, etc, etc...
Mon client courrier (kmail) est configuré pour me permettre de ne même pas télécharger les mails dont je ne veux pas, à la simple vue des titre, destinataire, date...
JeitEmgie a eu le même réflexe que moi, même avec 10 hébergements, ça fait un demi mois...
8 millions de destinataires et 10 hébergement mutualisés... je trouve ça étonnant, pour ne pas dire louche. Un grosse entreprise? Elle veillera à son image de marque et reconsidérera sa campagne et aura une ou plusieurs machines dédiées en ligne. Les autres risquent de mériter l'étiquette "spameur". Tout ceci ne fait pas sérieux, mais le "thread" est intéressantes: merci aux intervenants!
Avant de réagir en me montrant les dents, notez, s'il vous plaît, qu'il y a une solution dans ce post.
Salutations.