Hibernate search pour un probleme particulier

Version imprimable

19/11/2008, 12h20
flamant

Hibernate search pour un probleme particulier

Bonjour,

je dois savoir le plus rapidemment possible en quoi HIBERNATE SEARCH peut m'aider à répondre à mon probleme et comme je n'ai pas le temps de lire le livre HIBERNATE SEARCH IN ACTION en entier, j'ai quelques questions preliminaires.

Voici mon probleme : je travaille sur une application WEB utilisant hibernate (avec JSP, HTML, SPRING, JAVA) et je recherche une technologie qui peut resoudre le probleme suivant : j'ai une base de donnees avec beaucoup d'objets mappes à la base. La structure de la base de donnees est tres complexe. L'interface pour acceder à l'application est accessible pour differents utilisateurs qui ont leur propre role dans l'application. Par exemple l'ARCHITECTE a une vue sur quelques (pas tous) les Studies (etudes) (object Study), une partie des groupes d'items (groupe de champs) de ces etudes (objet ItemGroup), et une partie des Items (champs) (objet Item) des ces groupes d'Items. Cet ARCHITECT a aussi une vue sur quelques (pas tous) Sites (des localisations), et une vue sur quelques (pas tous) utilisateurs (objet User).

Je veux implementer la fonctionnalite suivante : par exemple l'ARCHITECT peut rentrer quelques mots dans un champ et faire une recherche textuelle sur les objets auxquels il a acces qui comporte des proprietes contenant ces mots. Ceci sera fait par une requete AJAX. La grande question est : est-ce que HIBERNATE SEARCH (technologie qui est decrite dans le livre HIBERNATE SEARCH IN ACTION) est adaptee à mon probleme.

Les premieres questions qui me viennent à l'esprit sont les suivantes :

1) j'ai d'abord des doutes sur la rapidite de la reponse, sachant que la recherche se fera sur des dizaines d'objets qui correspondent à plusieurs milliers de lignes de donnes en base pour chaque objet. Est-ce que HIBERNATE SEARCH m'aidera à obtenir une reponse instantanee ?

2) Je peux d'autre part rentrer dans mon champ le mot "ant". Si je suppose qu'il y a 3 objets qui ontleurs proprietes contenant les mots "avantage", "antenna" et "accountant", j'ai un doute sur la capacite de HIBERNATE SEARCH à trouver ces 3 mots à partir du mot "ant". En effet HIBERNATE SEARCH indexe les proprietes de tables par mot. C'est à dire que cette technologie m'aidera à trouver les 3 mots separemment, mais il ne peut pas faire de recherche sur des chaines de caracteres inclues dans ces mots. Est-ce qu'il y a une facon de resoudre ce probleme avec HIBERNATE SEARCH sans degrader les performances ?

3) Je vais faire des recherches textuelles dans des objets de l'application et seulement sur les objets qui sont accessibles pour le role de l'utilisateur qui fait la recherche. Du coup, avant de faire ma recherche textuelle, je vais devoir faire une preselection sur les objets pour selectionner uniquement ceux qui sont accessibles. C'est seulement apres que HIBERNATE SEARCH entre en action : Or d'apres ce que j'ai lu, a recherche textuelle se fait sur une classe et sur certaine proprietes de cette classe. Ma questions est : est-il possible de faire une recherche sur une liste d'objets et non sur tous ?

4) D'apres ce que j'ai compris l'indexation de HIBERNATE SEARCH se fait par objet (avec ses proprietes). Ma question est : est t-il possible d'indexer avec un seul indexe toutes les tables de ma base de donnees de maniere à ce que ma recherche soit plus rapide. En effet, si je defini en entree un ensemble de tables avec certaines de leur proprietes pour chacune, est-il possible d'indexer tout en meme temps ?

Voilà mes premieres questions. Je n'ai vraiment pas eu le temps de lire le livre HIBERNATE SEARCH IN ACTION et je dois repondre à ces questions rapidemment. Donc merci beaucoup si quelqu'un peut me venir en aide.
19/11/2008, 13h33
spidetra

La réponse est oui à toute tes questions.
De plus, hibernate search te permet d'attaquer directement l'API native de Lucene.
Donc, si un de tes besoins n'est pas encore implémenter par hibernate search tu pourras t'en sortir.
19/11/2008, 14h30
flamant

Merci spidetra de ta reponse,
me voila rassuré. Si tu pouvais me donner quelques details techniques suplementaires sur la maniere d'implementer tout cela (quelques pistes) ça serait super, sinon tant pis...
20/11/2008, 05h16
spidetra

Tu n'as pas trop le choix et tu vas bien être obligé de faire ton Proof Of Concept, toi-même.
Commence par le Getting started de la doc en ligne.
Documentation en ligne
Le forum d'Hibernate Search est aussi une bonne source de réponse (en anglais)

Implémente la solution avec quelques classes de sont domaine,
Essaye de voir comment résoudre certains de tes uses cases : ex : retourner les bons objets en fonctions des droits.
etc, etc...

Tu ne peux choisir cette solution, uniquement parceque quelqu'un sur un forum t'auras dit que c'est approprié à ton problème.
Je pense que c'est un bon choix, mais rien ne dit que ce choix soit adapté à ta problématique.

Si des contraintes liées à ton projet ( délai, coût), ne te permettent pas d'investir en temps sur ce framework, est-ce vraiment le bon choix ?

Est-ce qu'un simple index full text dans ta base de donnée sur les champs que tu veux indexer n'est pas suffisant pour ton projet ?

Voila, j'ai commence par le getting started de la doc en ligne pour HIBERNATE SEARCH.
J'ai dans l'ordre
1) telecharge les JAR et les ai mis dans le classpath de ECLIPSE
2) mappe une classe :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
 
@Indexed
public class User implements UserDetails {
 
	/**
         * User's ID
         */
	@DocumentId
	protected long userId;
	/**
         * The User's Login
         */
	@Field(index=Index.TOKENIZED, store=Store.NO)
	protected String username;
}

3) rajoute les proprietes suivantes dans le fichier hibernate.properties

Code:

1
2
3
4
5
 
#the default directory provider
hibernate.search.default.directory_provider = org.hibernate.search.store.FSDirectoryProvider
#the default base directory for the indecies
hibernate.search.default.indexBase =/Users/xflamant/lucene/indexes

4) execute le code suivant dans un test junit (le test s'est bien passe) :

Code:

1
2
3
4
5
6
7
8
9
 
		Session session = SessionFactoryUtils.getSession(sessionFactory, true);
		FullTextSession fullTextSession = Search.createFullTextSession(session);
		Transaction tx = fullTextSession.beginTransaction();
		List<User> users = session.createQuery("from User as user").list();
		for (User user : users) {
		fullTextSession.index(user);
		}
		tx.commit();

Normalement, apres tout cela je devrais avoir un index qui apparait dans mon repertoire /Users/xflamant/lucene/indexes, mais je n'ai rien
Je ne sais pas où j'ai fait une erreur.
Voici ma configuration : hibernate 3.2.2, le mapping est genere avec des tags XDOCLET automatiquement et j'ai mes fichiers de configuration dont voici l'extrait qui me concerne :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
 
<?xml version="1.0" encoding="UTF-8"?>
 
<!DOCTYPE hibernate-mapping PUBLIC
    "-//Hibernate/Hibernate Mapping DTD 3.0//EN" 
    "http://hibernate.sourceforge.net/hibernate-mapping-3.0.dtd">
 
<hibernate-mapping>
    <class
        name="com.framework.model.users.User"
        table="USERS"
    >
 
        <id
            name="userId"
            column="userId"
            type="long"
            unsaved-value="null"
        >
            <generator class="native">
              <!--  
                  To add non XDoclet generator parameters, create a file named 
                  hibernate-generator-params-User.xml 
                  containing the additional parameters and place it in your merge dir. 
              --> 
            </generator>
        </id>
        <property
            name="username"
            type="java.lang.String"
            update="true"
            insert="true"
            column="username"
            not-null="true"
            unique="true"
        />
</hibernate-mapping>

Une chose m'etonne : à aucun moment dans les fichiers de configuration je ne specifie la classe qui est annotée avec des annotations HIBERNATE SEARCH. Est-ce normal ? Merci pour votre aide

21/11/2008, 07h52
flamant

Bonjour,
j'ai oublie de dire que je suis sous MAC OS X

J'ai oublie de dire aussi que j'ai configure ma sessionFactory pour hibernate dans un fichier de configuration xml comme suit :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
 
    <bean id="sessionFactory" class="org.springframework.orm.hibernate3.LocalSessionFactoryBean">
        <property name="namingStrategy">
            <ref bean="namingStrategy"/>
        </property>
        <property name="mappingDirectoryLocations">
		  <list>
			<value>classpath:com/clinical/orm/hibernate/mapping</value>
		  </list>
		</property>
        <property name="hibernateProperties">
            <props>
				<prop key="hibernate.dialect">${hibernate.dialect}</prop>
				<prop key="hibernate.show_sql">true</prop>
				<prop key="use_sql_comments">true</prop>
				<prop key="hibernate.hbm2ddl.auto">update</prop>
				<prop key="hibernate.search.default.directory_provider">org.hibernate.search.store.FSDirectoryProvider</prop>
                <prop key="hibernate.search.default.indexBase">/Users/xflamant/lucene/indexes</prop>
            </props>
        </property>
        <property name="dataSource">
            <ref bean="dataSource"/>
        </property>
        <property name="eventListeners">
           <map>
               <entry key="post-update" value-ref="searchListener" />
               <entry key="post-insert" value-ref="searchListener" />
               <entry key="post-delete" value-ref="searchListener" />
           </map>
        </property>
 
    </bean>

Merci pour vos reponses

21/11/2008, 11h28
flamant

Pardon, mais je viens de me rendre compte d'une erreur dans mon application. Maintenant ça marche. Merci
19/04/2009, 02h17
bpmfoukamoko

Problème de travailler sur Hibernate search

Bonsoir,
Je suis en train de travailler sur un projet dont une partie doit faire l'indexation du texte de façon intégrale "Full text", mais j'ai un souci de démarrage du fait que je n'ai pas assez de documentation sur hibernate search et comment faire au moins des tests si cela est efficace pour faire de Fulltext.
Merci pour une aide.
19/04/2009, 15h21
flamant

bonjour,
voici les references du bouquin à lire :

http://www.manning.com/bernard/