Python et LDAP "Size limit exceeded"

Hello,
Je remonte ce post qui corespond tout à fait à mon problème !

Actuellement je développe un appli en python, et pour cela il faut que je récupère le mail de mes utilisateurs dans l'AD. J'utilise pour cela le module ldap de python, car le module activedirectory n'est pas assez complet.

La fonction que j'ai écrit fonctionne bien mais quand il y à trop d'enregistrement j'ai le droit un une erreur

Code:

---

1 2 3

result = func(*args,**kwargs) SIZELIMIT_EXCEEDED: {'desc': 'Size limit exceeded'}

---

Après quelque recherche, j'ai peu comprendre qu'il était possible de changer cette valeur dans une variable global ou dans une la fonction

Code:

---

ldapobject.SIZELIMIT_EXCEEDED = 0

---

Code:

---

print l.search_ext_s( base_dn, ldap.SCOPE_SUBTREE, filter, attrs,sizelimit=0)

---

Voici la doc offciel:
http://www.python-ldap.org/doc/html/ldap.html

Mais j'ai toujours des erreur :calim2:
Si quelqu'un à des piste car si je me dépêche pas de trouver ça, ça va être tendu pour moi :lol:

Pour faire des requêtes dans l'AD, je passe par ADSI, en utilisant ADO avec pywin32 (comme le fait le module active_directory de Tim Golden). Pour éviter le problème que tu as, je fais une requête asynchrone. Je ne sais pas si on peut contourner le problème de la même façon en LDAP.

Je ne sais pas si préciser "sizelimit" suffit, mais je ne pense pas qu'il faut le mettre à 0. Si j'ai bien compris cela correspond au PageSize et il faut donc mettre une valeur entre 1 et le nombre maximum d'enregistrements retournés par le serveur. Essaie par exemple avec 500.

Sinon peut-être en changeant le "MaxPageSize" sur le serveur (comme indiqué ici: http://support.microsoft.com/default...315071&sd=tech) mais il faut sans doute des droits de Domain Admin.

Hello dividee,
Je t'avoue être un peut ralenti devant ce problème car après avoir essayé les requêtes asynchrone, ça ne me donne rien.
Peut être les ai je mal exploité, je vais continuer à creuser de ce coté
J'ai testé plusieurs "sizelimit" mais toujours l'erreur, et je ne peut absolument rien touché à l'AD :aie:

Citation:

---

ADSI, en utilisant ADO avec pywin32

---

Tu te baserais donc sur l'API pywin32 comme le module activedirectory, pour effectuer des requêtes vers l'AD?...

Je vais rester sur le module LDAP car quand il y à moins d'enregistrements cela fonctionne à merveille, et c'est plus portable ;)

Curieux qu'après l'augmentation du "pagesize" rien ne change, je voit pas trop ou chercher là...

Je dois dire que le module python-ldap est très mal documenté, dès qu'on sort des sentiers battus, il faut se débrouiller seul...

J'en ai bavé mais je suis finalement arrivé à quelque chose. Le code qui suit n'est qu'une ébauche; l'important c'est l'utilisation de SimplePagedResultsControl:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22

import ldap from ldap.controls import SimplePagedResultsControl   PAGE_SIZE = 500   l = ldap.initialize('ldap://my-server:3268') l.bind_s("user@domain.com","password")   pg_ctrl = SimplePagedResultsControl(None, False, (PAGE_SIZE, ""))   cnt = 0 while True: msgid = l.search_ext('dc=domain,dc=com',ldap.SCOPE_SUBTREE,'(objectClass=*)',['distinguishedName'], serverctrls=[pg_ctrl]) _, res_data, _, srv_ctrls = l.result3(msgid) for r in res_data: cnt +=1 print cnt cookie = srv_ctrls[0].controlValue[1] if cookie: pg_ctrl.controlValue = (PAGE_SIZE, cookie) else: break

---

Si tu retires l'argument serverctrls=[pg_ctrl] de search_ext, tu verras que tu obtiens aussi un SIZELIMIT_EXCEEDED.

Hello,

Citation:

---

dès qu'on sort des sentiers battus, il faut se débrouiller seul...

---

Je suis tout à fait d'accord avec toi, j'ai passé de long moment pour ne pas trouver grand chose comme piste apart ce post ;) ...

En tout cas ton ébauche de code me permet de savoir le nombre d'entrée, mais pas le nom de mes objets.
C'est une liste d'utilisateur que je doit récupérer.

Effectivement quand on enlève serverctrls=[pg_ctrl] on à le droit au
SIZELIMIT_EXCEEDED. Avec mon petit niveau en python il ne m'est pas facile de déboguer

Citation:

---

Envoyé par BbT0n

En tout cas ton ébauche de code me permet de savoir le nombre d'entrée, mais pas le nom de mes objets.
C'est une liste d'utilisateur que je doit récupérer.

---

Ben oui j'ai juste fait un compteur en supposant que tu saurais quoi faire à partir de là...

Le reste ça ne sort pas des sentiers battus :aie:, mais si tu ne connais pas du tout LDAP, trouve un tuto dessus, ce n'est pas la doc du module ldap de python qui va beaucoup t'aider.

Un exemple sans doute un peu plus proche de ce que tu veux faire:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24

import ldap from ldap.controls import SimplePagedResultsControl   PAGE_SIZE = 500   l = ldap.initialize('ldap://my-server:3268') l.bind_s("user@domain.com","password")   pg_ctrl = SimplePagedResultsControl(None, False, (PAGE_SIZE, ""))   while True: msgid = l.search_ext('dc=domain,dc=com',ldap.SCOPE_SUBTREE,'(&(objectClass=User)(objectCategory=Person))',['sAMAccountName', 'mail'], serverctrls=[pg_ctrl]) _, res_data, _, srv_ctrls = l.result3(msgid) for dn, attrs in res_data: if 'mail' in attrs: mail = attrs['mail'][0] else: mail = 'NO MAIL' print '%s (%s)' % (attrs['sAMAccountName'],mail) cookie = srv_ctrls[0].controlValue[1] if cookie: pg_ctrl.controlValue = (PAGE_SIZE, cookie) else: break

---

Ce qu'il faut savoir (ça, c'est dans la doc!), c'est que res_data est une liste de tuples (dn, attrs) ou dn est un string et attrs un dictionnaire contenant les attributs demandés.

A toi de te renseigner aussi sur Active Directory pour construire les filtres et déterminer les attributs qui t'intéressent...

(Attention, l'attribut mail n'est peut-être pas ce qu'il te faut, en particulier si Exchange est utilisé).