大家讨论一下hibernate的延迟加载

[fafuhefan]

如题：
大家讨论下，hibernate的延迟加载的原理，应用范围以及优点或缺点。与ajax的异步处理有哪些不同？
或者有其他的高见也可以谈谈。

[APOLLO_TS]

延迟加载分的种类很多！

有一种是select id from XXX

当需要的时候通过ID load实体。

[Kaka272827267]

延迟加载是一把双刃剑

[zzxiaoma]

就是用到的时候加载,不用不加载,因为很多对象是关联着的,如果加载一个对象,另外一个对象也会加载,但是另外一个对象实际我们并不用,所以延迟加载可以提高性能.

[gordonkkk]

hibernate的延迟加载，就是在关联映射的时候，对于被关联的对象或集合，不当时查询数据库，而是该集合或用户被用到的时候才去查。
原理就是使用动态代理的方式，把持久化类替换成代理类（对于单个对象和集合，均有对应的代理类），在代理类中实现这样的功能，即当第一次访问被代理对象的非id字段时，查询数据库。
至于应用范围，默认情况下，hibernate对于集合都是用延迟select抓取，对返回单值的关联使用延迟代理抓取。
这样做从道理上讲是很有道理的，任何被关联的其他对象，hibernate不知道你是否有需求去用它里面的字段。如果全部一口气查出来，大部分时候是在白白浪费资源。当需要的时候才去“叫醒”数据，否则让它在数据库里“冬眠”，这是hibernate的目的所在。
缺点就是在hibernate session关闭后，用该session取到的数据，如果其中有被延迟加载的数据还未被加载过，则不能被加载了。hibernate的建议是，将加载数据的代码放在session被关闭之前。
我个人认同这样的建议（有人认为这是hibernate自打耳光）：不要以为用了hibernate，就可以完全无视对何时该查数据库这样的细节的控制。在明知需要得到被关联数据的情况下，你有义务在session被关闭以前将它初始化。大部分情况下这是完全合理的。
有一种技术叫Open Session In View，针对hibernate在3层架构的webApp中，往往会在业务层做事务，然后在业务层事务提交后关闭session，导致view层显示数据时，延迟加载失败。它可以透明的将session在request来到时打开，response完全送走后关闭。用了它就不用管什么时候查数据库了，做到了在需要时就拿得到数据，不需要时不做多余的查询。但是它把封装了jdbc Connection的session的生存周期拉长了，而Connection应该最晚得到，尽早释放。被一个线程长期占着不放的话，会对效率有影响。在并发访问越多，网络连接越不稳定的时候，这种影响越明显。

[heavilyarmed]

四楼高见

[zhoushaolan]

延时检索返回的是代理类的实例,仅仅初始化的是OID属性;

与ajax的异步处理有哪些不同?
这个倒没听说过,应该是完全不同的,ajax是客户端与服务器的事.hibernate是缓存与数据库的事.

[rijiuyou01]

原来如此 受教了

[l5751311]

感觉简单的说就是在使用的时候才发sql语句
似乎跟ajax没有什么关系吧

[fafuhefan]

如何去实现延迟加载呢？

[fafuhefan]

其实这是一道我以前遇到的面试题，不是用笔试的，是技术经理来问我的，就从延迟加载一直延伸到很多其他方面的知识，你会答了，他再继续追问。
假如问你们，大家可以说多少出来呢？

[zzxiaoma]

配置文件lazy=true

[fafuhefan]

有其他高见的朋友继续讨论。。。。

[qybao]

LS都已经说了，延时加载就是在用的时候才去发SQL取数据
优点就是避免资源浪费，不用到的时候也被加载的话造成数据量大，内存消耗大，网络传输慢
缺点就是，加载的时候发送SQL取数据，SQL被多次发送执行，对DB性能有影响

[fafuhefan]

转自别人的博客http://blog.csdn.net/pengchua/archive/2007/11/30/1908944.aspx
大家可以看看这个讲得很全：

延迟加载：
延迟加载机制是为了避免一些无谓的性能开销而提出来的，所谓延迟加载就是当在真正需要数据的时候，才真正执行数据加载操作。在Hibernate中提供了对实体对象的延迟加载以及对集合的延迟加载，另外在Hibernate3中还提供了对属性的延迟加载。下面我们就分别介绍这些种类的延迟加载的细节。
A、实体对象的延迟加载：
如果想对实体对象使用延迟加载，必须要在实体的映射配置文件中进行相应的配置，如下所示：
<hibernate-mapping>
<class name=”com.neusoft.entity.User” table=”user” lazy=”true”>
……
</class>
</hibernate-mapping>
通过将class的lazy属性设置为true，来开启实体的延迟加载特性。如果我们运行下面的代码：
User user=(User)session.load(User.class,”1”);（1）
System.out.println(user.getName());（2）
当运行到(1)处时，Hibernate并没有发起对数据的查询，如果我们此时通过一些调试工具(比如JBuilder2005的Debug工具)，观察此时user对象的内存快照，我们会惊奇的发现，此时返回的可能是User$EnhancerByCGLIB$$bede8986类型的对象，而且其属性为null,这是怎么回事？还记得前面我曾讲过session.load()方法，会返回实体对象的代理类对象，这里所返回的对象类型就是User对象的代理类对象。在Hibernate中通过使用CGLIB,来实现动态构造一个目标对象的代理类对象，并且在代理类对象中包含目标对象的所有属性和方法，而且所有属性均被赋值为null。通过调试器显示的内存快照，我们可以看出此时真正的User对象，是包含在代理对象的CGLIB$CALBACK_0.target属性中，当代码运行到（2）处时，此时调用user.getName()方法，这时通过CGLIB赋予的回调机制，实际上调用CGLIB$CALBACK_0.getName()方法，当调用该方法时，Hibernate会首先检查CGLIB$CALBACK_0.target属性是否为null，如果不为空，则调用目标对象的getName方法，如果为空，则会发起数据库查询，生成类似这样的SQL语句：select * from user where id=’1’;来查询数据，并构造目标对象，并且将它赋值到CGLIB$CALBACK_0.target属性中。
这样，通过一个中间代理对象，Hibernate实现了实体的延迟加载，只有当用户真正发起获得实体对象属性的动作时，才真正会发起数据库查询操作。所以实体的延迟加载是用通过中间代理类完成的，所以只有session.load()方法才会利用实体延迟加载，因为只有session.load()方法才会返回实体类的代理类对象。
B、集合类型的延迟加载：
在Hibernate的延迟加载机制中，针对集合类型的应用，意义是最为重大的，因为这有可能使性能得到大幅度的提高，为此Hibernate进行了大量的努力，其中包括对JDK Collection的独立实现，我们在一对多关联中，定义的用来容纳关联对象的Set集合，并不是java.util.Set类型或其子类型，而是net.sf.hibernate.collection.Set类型，通过使用自定义集合类的实现，Hibernate实现了集合类型的延迟加载。为了对集合类型使用延迟加载，我们必须如下配置我们的实体类的关于关联的部分：
<hibernate-mapping>
<class name=”com.neusoft.entity.User” table=”user”>
…..
<set name=”addresses” table=”address” lazy=”true” inverse=”true”>
<key column=”user_id”/>
<one-to-many class=”com.neusoft.entity.Arrderss”/>
</set>
</class>
</hibernate-mapping>
通过将<set>元素的lazy属性设置为true来开启集合类型的延迟加载特性。我们看下面的代码：
User user=(User)session.load(User.class,”1”);
Collection addset=user.getAddresses(); (1)
Iterator it=addset.iterator(); (2)
while(it.hasNext()){
Address address=(Address)it.next();
System.out.println(address.getAddress());
}
当程序执行到(1)处时，这时并不会发起对关联数据的查询来加载关联数据，只有运行到(2)处时，真正的数据读取操作才会开始，这时Hibernate会根据缓存中符合条件的数据索引，来查找符合条件的实体对象。
这里我们引入了一个全新的概念——数据索引，下面我们首先将讲一下什么是数据索引。在Hibernate中对集合类型进行缓存时，是分两部分进行缓存的，首先缓存集合中所有实体的id列表，然后缓存实体对象，这些实体对象的id列表，就是所谓的数据索引。当查找数据索引时，如果没有找到对应的数据索引，这时就会一条select SQL的执行，获得符合条件的数据，并构造实体对象集合和数据索引，然后返回实体对象的集合，并且将实体对象和数据索引纳入Hibernate的缓存之中。另一方面，如果找到对应的数据索引，则从数据索引中取出id列表，然后根据id在缓存中查找对应的实体，如果找到就从缓存中返回，如果没有找到，在发起select SQL查询。在这里我们看出了另外一个问题，这个问题可能会对性能产生影响，这就是集合类型的缓存策略。如果我们如下配置集合类型：
<hibernate-mapping>
<class name=”com.neusoft.entity.User” table=”user”>
…..
<set name=”addresses” table=”address” lazy=”true” inverse=”true”>
<cache usage=”read-only”/>
<key column=”user_id”/>
<one-to-many class=”com.neusoft.entity.Arrderss”/>
</set>
</class>
</hibernate-mapping>
这里我们应用了<cache usage=”read-only”/>配置，如果采用这种策略来配置集合类型，Hibernate将只会对数据索引进行缓存，而不会对集合中的实体对象进行缓存。如上配置我们运行下面的代码：
User user=(User)session.load(User.class,”1”);
Collection addset=user.getAddresses();
Iterator it=addset.iterator();
while(it.hasNext()){
Address address=(Address)it.next();
System.out.println(address.getAddress());
}
System.out.println(“Second query……”);
User user2=(User)session.load(User.class,”1”);
Collection it2=user2.getAddresses();
while(it2.hasNext()){
Address address2=(Address)it2.next();
System.out.println(address2.getAddress());
}
运行这段代码，会得到类似下面的输出：
Select * from user where id=’1’;
Select * from address where user_id=’1’;
Tianjin
Dalian
Second query……
Select * from address where id=’1’;
Select * from address where id=’2’;
Tianjin
Dalian
我们看到，当第二次执行查询时，执行了两条对address表的查询操作，为什么会这样？这是因为当第一次加载实体后，根据集合类型缓存策略的配置，只对集合数据索引进行了缓存，而并没有对集合中的实体对象进行缓存，所以在第二次再次加载实体时，Hibernate找到了对应实体的数据索引，但是根据数据索引，却无法在缓存中找到对应的实体，所以Hibernate根据找到的数据索引发起了两条select SQL的查询操作，这里造成了对性能的浪费，怎样才能避免这种情况呢？我们必须对集合类型中的实体也指定缓存策略，所以我们要如下对集合类型进行配置：
<hibernate-mapping>
<class name=”com.neusoft.entity.User” table=”user”>
…..
<set name=”addresses” table=”address” lazy=”true” inverse=”true”>
<cache usage=”read-write”/>
<key column=”user_id”/>
<one-to-many class=”com.neusoft.entity.Arrderss”/>
</set>
</class>
</hibernate-mapping>
此时Hibernate会对集合类型中的实体也进行缓存，如果根据这个配置再次运行上面的代码，将会得到类似如下的输出：
Select * from user where id=’1’;
Select * from address where user_id=’1’;
Tianjin
Dalian
Second query……
Tianjin
Dalian
这时将不会再有根据数据索引进行查询的SQL语句，因为此时可以直接从缓存中获得集合类型中存放的实体对象。

C、属性延迟加载：
在Hibernate3中，引入了一种新的特性——属性的延迟加载，这个机制又为获取高性能查询提供了有力的工具。在前面我们讲大数据对象读取时，在User对象中有一个resume字段，该字段是一个java.sql.Clob类型，包含了用户的简历信息，当我们加载该对象时，我们不得不每一次都要加载这个字段，而不论我们是否真的需要它，而且这种大数据对象的读取本身会带来很大的性能开销。在Hibernate2中，我们只有通过我们前面讲过的面性能的粒度细分，来分解User类，来解决这个问题（请参照那一节的论述），但是在Hibernate3中，我们可以通过属性延迟加载机制，来使我们获得只有当我们真正需要操作这个字段时，才去读取这个字段数据的能力，为此我们必须如下配置我们的实体类：
<hibernate-mapping>
<class name=”com.neusoft.entity.User” table=”user”>
……
<property name=”resume” type=”java.sql.Clob” column=”resume” lazy=”true”/>
</class>
</hibernate-mapping>
通过对<property>元素的lazy属性设置true来开启属性的延迟加载，在Hibernate3中为了实现属性的延迟加载，使用了类增强器来对实体类的Class文件进行强化处理，通过增强器的增强，将CGLIB的回调机制逻辑，加入实体类，这里我们可以看出属性的延迟加载，还是通过CGLIB来实现的。CGLIB是Apache的一个开源工程，这个类库可以操纵java类的字节码，根据字节码来动态构造符合要求的类对象。根据上面的配置我们运行下面的代码：
String sql=”from User user where user.name=’zx’ ”;
Query query=session.createQuery(sql); (1)
List list=query.list();
for(int i=0;i<list.size();i++){
User user=(User)list.get(i);
System.out.println(user.getName());
System.out.println(user.getResume()); (2)
}
当执行到(1)处时，会生成类似如下的SQL语句：
Select id,age,name from user where name=’zx’;
这时Hibernate会检索User实体中所有非延迟加载属性对应的字段数据，当执行到(2)处时，会生成类似如下的SQL语句：
Select resume from user where id=’1’;
这时会发起对resume字段数据真正的读取操作。

---------------------------------

延迟加载的对象：
hibernate 2针对实体对象和集合
hibernate 3同时提供了属性的延迟加载功能。
其中对集合的延迟加载特性意义最为重大。
实体对象的延迟加载:
1.在hibernate配置文件中的class指定

集合类型的延迟加载：
在set中指定lazy=true
这样只有实际加载与对象相关联的集合对象的时候，再通过session从数据库中加载实际的数据集。
Hibernate.initialize方法可以强制Hibernate立即加载关联的对象集，例如：
Hibernate.initialize(user.getAddress());
集合类型的缓存：
如果为某个集合类设定了缓存，如
<set
name="address"
table="t_address"
lazy="true"
......
>
<cache usage="read-only"/>
<key column="user_id" />
<one-to-many class="cn.blogjava.TAddress" />
</set>
Hibernate对集合类型进行缓存的时候，分两部分保存。首先是这个集合中所有实体的id列表，其次才是各个实体对象。
这里制定了cache usage="read-only"只会使得Hibernate对数据索引进行缓存。也就是说只缓存了集合中的数据索引，并不包含集合中的各个实体元素。
如果指定cache usage="read-write"才会对集合中的实体进行缓存。

[fafuhefan]

接上：


属性的延迟加载：
在property节点中声明lazy=true,而且还需要借助Hibernate类增强器对POJO类的二进制Class文件进行强化处理。


hibernate的延迟加载通用方法

public class HibernateUtil extends HibernateDaoSupport ...{
//用法:instance =  getHibernateTemplate().find("from FxjlbVO");
//    super.initialize(instance, "getFxjlbChjs");
    public void initialize(Object object, String methodName)
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{

        String[] methodArray = methodName.split("\.");
        Method method = null;
        Object initializeObject = object;

        if (methodArray.length == 1) ...{
            this.getHibernateTemplate().lock(initializeObject,
                    org.hibernate.LockMode.NONE);
            method = object.getClass()
                    .getMethod(methodArray[0], new Class[] ...{});
            initializeObject = method.invoke(initializeObject, new Object[] ...{});
            this.getHibernateTemplate().initialize(initializeObject);
        } else ...{
            for (int i = 0; i < methodArray.length; i++) ...{
                method = initializeObject.getClass().getMethod(methodArray[i],
                        new Class[] ...{});
                initializeObject = method.invoke(initializeObject,
                        new Object[] ...{});
            }
            this.getHibernateTemplate().lock(initializeObject,
                    org.hibernate.LockMode.NONE);
            this.getHibernateTemplate().initialize(initializeObject);
        }
    }


    public void initialize(Object object, String methodName[])
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{

        for (int i = 0; i < methodName.length; i++) ...{
            String[] methodArray = methodName[i].split("\.");
            Method method = null;
            Object initializeObject = object;

            if (methodArray.length == 1) ...{
                this.getHibernateTemplate().lock(initializeObject,
                        org.hibernate.LockMode.NONE);
                
                method = object.getClass().getMethod(methodArray[0],
                        new Class[] ...{});
                initializeObject = method.invoke(initializeObject,
                        new Object[] ...{});
                //等价于:initializeObject=PropertyUtils.getProperty(initializeObject,methodArray[0]);
                
                this.getHibernateTemplate().initialize(initializeObject);
            } else ...{
                for (int j = 0; j < methodArray.length; j++) ...{
                    method = initializeObject.getClass().getMethod(
                            methodArray[j], new Class[] ...{});
                    initializeObject = method.invoke(initializeObject,
                            new Object[] ...{});
                }
                this.getHibernateTemplate().lock(initializeObject,
                        org.hibernate.LockMode.NONE);
                this.getHibernateTemplate().initialize(initializeObject);
            }
        }

    }
    // fInitializeFields是集合合,不是方法名
    //instance =  getHibernateTemplate().find("from FxjlbVO");
    //    HashSet aa=new HashSet();
    //    aa.add("fxjlbChjs");
    //    super.initialize(instance, aa);
    public void initialize(Object object, HashSet fInitializeFields)
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{
        String[] methodName = new String[fInitializeFields.size()];
        methodName = (String[]) fInitializeFields.toArray(methodName);
        for (int i = 0; i < methodName.length; i++) ...{
            String[] methodArray = methodName[i].split("\.");
            Method method = null;
            Object initializeObject = object;

            if (methodArray.length == 1) ...{
                this.getHibernateTemplate().lock(initializeObject,
                        org.hibernate.LockMode.NONE);
                initializeObject=PropertyUtils.getProperty(initializeObject,methodArray[0]);

                this.getHibernateTemplate().initialize(initializeObject);
            } else ...{
                for (int j = 0; j < methodArray.length; j++) ...{
                initializeObject=PropertyUtils.getProperty(initializeObject,methodArray[0]);
                }
                this.getHibernateTemplate().lock(initializeObject,
                        org.hibernate.LockMode.NONE);
                this.getHibernateTemplate().initialize(initializeObject);
            }
        }

    }
    
    public void initialize(Collection collection, HashSet fInitializeFields)
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{

        for (Iterator i = collection.iterator(); i.hasNext();) ...{
            Object object = i.next();
            this.initialize(object, fInitializeFields);
        }
    }
    
    public void initialize(Object object) throws SecurityException,
            NoSuchMethodException, IllegalArgumentException,
            IllegalAccessException, InvocationTargetException ...{
        this.getHibernateTemplate().lock(object, org.hibernate.LockMode.NONE);
        this.getHibernateTemplate().initialize(object);
    }


    public void initialize(Collection collection, String methodName[])
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{

        for (Iterator i = collection.iterator();i.hasNext(); ) ...{
            Object object = i.next();
            this.initialize(object, methodName);
        }
    }


    public void initialize(Collection collection, String methodName)
            throws SecurityException, NoSuchMethodException,
            IllegalArgumentException, IllegalAccessException,
            InvocationTargetException ...{

        for (Iterator i = collection.iterator();i.hasNext(); ) ...{
            Object object = i.next();
            this.initialize(object, methodName);
        }
    }
}

[fafuhefan]

接上：
这个方法的好外是：可以不在hbm.xml的文件当中，指定为lazy=true这个模式，可以直接使用。
正在装载数据……
使用方法如下：
如果你使用SPRING，则需要把hibernateUtil注入其中：

<bean id="hibernateUtilTarget" class="com.antbee.j2eemodel.util.HibernateUtil">
<property name="sessionFactory">
<ref local="mssqlSessionFactory" />
</property>
</bean>

<bean id="hibernateUtil" parent="BaseTransactionProxy" class="org.springframework.transaction.interceptor.TransactionProxyFactoryBean">
<property name="target">
<ref local="hibernateUtilTarget" />
</property>
</bean>
<!--配置基础事务-->
<bean id="BaseTransactionProxy" class="org.springframework.transaction.interceptor.TransactionProxyFactoryBean" abstract="true">
<property name="transactionManager">
<ref bean="mssqltransactionManager" />
</property>
<property name="proxyTargetClass">
<value>true</value>
</property>
<property name="transactionAttributes">
<props>
<prop key="*">PROPAGATION_REQUIRED</prop>
</props>
</property>
</bean> 

使用示例：
如果你使用STRUTS，则需要这样：
List what_ur_view = XXXManager.find(.);//取得你要展示的对象
//如果这个对象当中有延迟加载的对象(SET)时，则需要如下加载就行
this.hibernateUtil.initialize(what_ur_view, "getTbShipmentSale");
//其中getTbShipmentSale是其对象(SET也可以操作)
在页面显示的时候，你就可以使用JSTL如下表述：
<c:out value="${what_ur_view.tbShipmentSale.goodsReceivePersonPhone}" />//呵呵，是不是很爽呀。
同样的方法，我们也可以对一个SET在页面进行显示，方法如下：
<c:forEach items="${what_ur_view.tbShipmentProductMappingSet}" var="ProductMapping" varStatus="status">
<c:out value="${ProductMapping.productNum}" />
<c:out value="${ProductMapping.tbOutOfWarehouse.outOfWarehouseNum}" />
</c:forEach>
//呵呵，支持多级嵌套，
在ACTION当中则需要加入 hibernateUtil.initialize(what_ur_view.getTbShipmentProductMappingSet(),
new String[] { "getTbProduct", "getTbOutOfWarehouse",
"getTbProductConfigure" }); 呵，如果你要是在HIBERNATE当中使用，这个就太简单了吧。

还一种配置方法就就直接继承DAO类,applicationContext.xml如下：

 <!-- Transaction manager for a single Hibernate SessionFactory (alternative to JTA) -->
    <bean id="transactionManager" class="org.springframework.orm.hibernate3.HibernateTransactionManager">
        <property name="sessionFactory"><ref local="sessionFactory"/></property>
    </bean>
        
    <bean id="UserDAO" class="dao.UserDAO">
        <property name="sessionFactory">
            <ref bean="sessionFactory" />
        </property>
        </bean>
        <bean id="serviceTarget" class="service.Service" singleton="false">
        <property name="userDao">
              <ref bean="UserDAO" />
        </property>
      </bean>
    <bean id="userInfoPage" class="page.UserInfoPage" >
        <property name="userDAO">
              <ref bean="UserDAO" />
        </property>
      </bean>
     <bean id="service" 
        class="org.springframework.transaction.interceptor.TransactionProxyFactoryBean">
        <property name="transactionManager"><ref local="transactionManager"/></property>
        <property name="target"><ref local="serviceTarget"/></property>
        <property name="transactionAttributes">
            <props>
                <prop key="save*">PROPAGATION_REQUIRED</prop>
                <prop key="remove*">PROPAGATION_REQUIRED</prop>
                <prop key="*">PROPAGATION_REQUIRED,readOnly</prop>
            </props>
        </property>
    </bean>

[hanbing6891]

很好,讲得挺深刻

[umbrella_show]

在hbm.xml中配饰lazy=true对附属对象不想立即加载，

当我在需要的时候能否通过HQL语句来使它立即加载呢·？
高手指点·

[liushaoqing88]

学习了...