BlogJava-henry1451 的专栏-文章分类-Hibernate技术

Hibernate的cache管理(转)

henry1451 — Sun, 25 May 2008 06:11:00 GMT

Cache就是缓存，它往往是提高系统性能的最重要手段，对数据起到一个蓄水池和缓冲的作用。Cache对于大量依赖数据读取操作的系统而言尤其重要。在大并发量的情况下，如果每次程序都需要向数据库直接做查询操作，它们所带来的性能开销是显而易见的，频繁的网络舆，数据库磁盘的读写操作都会大大降低系统的性能。此时如果能让数据库在本地内存中保留一个镜像，下次访问的时候只需要从内存中直接获取，那么显然可以带来不小的性能提升。引入Cache机制的难点是如何保证内存中数据的有效性，否则脏数据的出现将会给系统带来难以预知的严重后果。虽然一个设计得很好的应用程序不用Cache也可以表现出让人接受的性能，但毫无疑问，一些对读取操作要求比较高的应用程序可以通过Cache获得更高的性能。对于应用程序，Cache通过内存或磁盘保存了数据库中的当前有关数据状态，它是一个存储在本地的数据备份。Cache位于数据库和应用程序之间，从数据库更新数据，并给程序提供数据。
Hibernate实现了良好的Cache机制，可以借助Hibernate内部的Cache迅速提高系统的数据读取性能。Hibernate中的Cache可分为两层：一级Cache和二级Cache。
一级Cache:
Session实现了第一级Cache，它属于事务级数据缓冲。一旦事务结束，这个Cache也随之失效。一个Session的生命周期对应一个数据库事务或一个程序事务。
Session-cache保证了一个Session中两次请求同一个对象时，取得的对象是同一个JAVA实例，有时它可以避免不必要的数据冲突。另外，它还能为另一些重要的性能提供保证：
1：在对一个对象进行自我循环引用时，不至于产生堆栈溢出。
2：当数据库事务结束时，对于同一个数据库行，不会产生数据冲突，因为对于数据库中的一行，最多只有一个对象来表示它。
3：一个事务中可能会有很多个处理单元，在每一个处理单元中做的操作都会立即被另外的处理单元得知。
我们不用刻意去打开Session-cache，它总是被打开并且不能被关闭。当使用save(),update()或saveOrUpdate()来保存数据更改，或通过load(),find(),list()等方法来得到对象时，对象就会被加入到Session-cache。
如果要同步很多数据对象，就需要有效地管理Cache,可以用Session的evict()方法从一级Cache中移除对象。如下：

在保存50000个或更多对象时，程序可能会抛出OutOfMemoryException异常，因为Hibernate在一级Cache缓存了新加入的所有对象。内存溢出。要解决这全问题就需要把JDBC批处理数量设置为一个合理的数值（一般是10～20）。在Hibernate的配置文件中可以加入以下属性

<property name="hibernate.jdbc.batch_size"> 20 property>

然后我们在程序中一定时刻就提交并更新Session的Cache:

Session session = HibernateUtil.currentSession();
Transaction tx = session.beginTransaction();
for(int i = 0 ; i <100000 ; i++)
{
    Student stu = new Student();

    session.save(stu);
    if(i%20 == 0)    //每保存完20个对象后，进行如下操作
    {
        session.flush();//这个会提交更新
        session.clear();//清除Cache,释放内存
    }
}
tx.commit();
session.close();

二级Cache
二级Cache是SessionFactory范围内的缓存，所有的Session共享同一个二级Cache。在二级Cache中保存持久性实例的散装形式的数据。二级Cache的内部如何实现并不重要，重要的是采用哪种正确的缓存策略，以及采用哪个Cache提供器。持久化不同的数据需要不同的Cache策略，比如一些因素将影响到Cache策略的选择：数据的读/写比例，数据表是否能被其他的应用程序扬访问等。对于一些读/写比例高的数据可以打开它的缓存，允许这些数据进入二级缓存容器有利于系统性能的优化;而对于能被其它应用程序访问的数据对象，最好将此对象的二级Cache选项关闭。
设置Hibernate的二级Cache需要分两步进行：首先确认使用什么数据并发策略，然后配置缓存过期时间并设置Cache提供器。
有4种内置的Hibernate数据并发冲突策略，代表数据库隔离级别，如下：
1：事务（Transaction）仅在受管理的环境中可用。它保证可重读的事务隔离级别，可以对读/写比例高，很少更新的数据采用该策略。
2：读写（read-write）使用时间戳机制维护读写提交事务隔离级别。可以对读/写比例高，很少更新的数据采用该策略。
3：非严格读写（notstrict-read-write）不保证Cache和数据库之间的数据库的一致性。使用此策略时，应该设置足够的缓存过期时间，否则可能从缓存中读出脏数据。当一些数据极少改变，并且当这些数据和数据库有一部份不量影响不大时，可以使用此策略。
4：只读（read-only）当确保数据永不改变时，可以使用此策略。

我们确定了Cache策略后，就要挑选一个高效的Cache提供器，它将作为插件被Hibernate调用。Hibernate允许使用下述几种缓存插件：
EhCache：可以在JVM中作为一个简单进程范围内的缓存，它可以把缓存的数据放入内存或磁盘，并支持Hibernate中可选用的查询缓存。
OpenSymphony OSCache：和EhCache相似，并且提供了丰富的缓存过期策略。
SwarmCache：可作为集群范围的缓存，但不支持查询缓存。
JBossCache：可作为集群范围的缓冲，但不支持查询缓存。

在Hibernate中使用EhCache
EhCache是一个纯JAVA程序，可以在Hibernate中作为一个插件引入。在Hibernate中使用EhCache需要在Hibernate的配置文件中设置如下：

<propery name="hibernate.cache.provider_class">
org.hibernate.cache.EhCacheProvider
property>

EhCacheProvider类是位于Hibernate3.jar包中而不是ehcache-1.1.jar包中。EhCache有自己的配置文档，名为chcache.xml。Hibernate3.x中的etc目录下有ehcache.xml的示例文件，只须要将它COPY到我们的应用程序src目录下（编译时会把ehcache.xmlCOPY到WEB-INF/classes目录下）。对其中的相关值进行更改以和自己的程序相适应。进行配置后，在ehcache.xml文件中的代码如下：

<ehcache>
    <diskStore path="c:\\cache"/>    //设置cache.data文件存放位置

    <defaultCache
                maxElementsInMemory="10000" //缓存中允许创建的最大对象数
                eternal="false"    //缓存中对象是否为永久的
                timeToIdleSeconds="120"//缓存数据钝化时间(即对象在它过期前的空闲时间)
                timeToLiveSeconds="120"//缓存数据生存时间(即对象在它过期前的生存时间)
                overflowToDisk="true"
    />

    <cache name="Student"    //用户自定义的Cache配置
                 maxElementsInMemory="10000"
                 eternal="false"
                 timeToIdleSeconds="300"
                 timeToLiveSeconds="600"
                 overflowToDisk="true"
                 />
ehcache>

此外我们还需要在持久化类的映射文件中进行配置。例如，Group(班级)和Student(学生)是一对多的关系，它们对应的数据表分别是t_group和t_student。现在要把Student类的数据进行二级缓存，这需要在二个映射文件中都对二级缓存进行配置。
在Group.hbm.xml中如下
在其中添加

上述文件虽然在标记中设置了，但Hibernate只是把Group相关的Student的主键ID加入到缓存中，如果希望把整个Student的散装属性都加入到二级缓存中，还需要在Student.hbm.xml文件的标记中添加子标记。如下：

<class name="Student" table="t_student">
<cache usage="read-write" />
class>

henry1451 2008-05-25 14:11 发表评论

Hibernate多表关联

henry1451 — Sun, 18 May 2008 12:47:00 GMT

一、多对一进行关联(多个学生对应同一间宿舍)---学生是主体，宿舍是附体，关联关系在主体学生中设置，在学生类中设置宿舍类，由于宿舍类只有一个可以直接用类来设置,在映射学生类(User)中包含宿舍这个类(Room),在映射配置文件(User.hbm.xml)中定义

哪个是主体类就在哪个配置文件定义关联关系．

cascade属性：表示关联对象的持久化，该属性也要设置在主体中，作用就是当主控方执行操作时，关联对象(被动方)是否同步执行同一操作．
cascade的值：all:表示所有情况下都进行级联操作．
                        none:所有情况下都不进行级联操作
                        save-update:在执行save-update时进行级联操作．
                        delete:在执行delete时进行级联操作．
注意：使用cascade自動持久化時，會先檢查被關聯物件的id屬性，未被持久化的物件之id屬性是由unsaved-value決定，預設是null，如果您使用long這樣的原生型態（primitive type）時，則必須自行指定預設值．

例如：



如果您不想額外設定unsaved-value資訊，則可以將long改為Long，這可以符合預設的unsaved-value為null的設定．

二、一对多进行关联(一间宿舍对应多个学生)---宿舍是主体，学生是附体，关联关系在主体宿舍中设置,由于要在宿舍类中设置学生类，一个宿舍包含多个学生，所以在宿舍类中要用Set类来进行设置，用set类(private Set users = new HashSet();)来存储多个学生类，在映射宿舍类(Room)中要包含这个节点，用来与user相关联

例如：

name:表示属性，table:表示关联的表名，key:表示通过什么字段进行关联，:表示关联类。这里也可以使用cascade属性。

三、在表关联的设计中，不论是一对多还是多对一，都要将关联字段设置在多的那一方。
例如：user表格和room表格，要将关联字段room_id设置在user表格中。

四、一对一进行关联(一个人只有一个房间，一个房间也只有一个人)。
可以通过２中方式进行关联：

(1)、通过外键进行关联：在多对一的例子中就是通过外键进行关联的.
在user-room的设置中(user.hbm.xml):

                     column="ROOM_ID"
                     class="onlyfun.caterpillar.Room"
                     cascade="all"
                     unique="true"/>

其中unique表示限制一個User有一獨有的 Room，这只是单向的，说明一个user只有一个room.
在room-user的设置中(room.hbm.xml):

class="onlyfun.caterpillar.User"
property-ref="room"/>
这样就完成了双向的一对一关联，property-ref告诉hibernate,查询出user并将其参考至room。
(2)、通过主键进行关联：限制兩個資料表的主鍵使用相同的值，如此一個User與Room就是一對一關係
user.hbm.xml:

class="onlyfun.caterpillar.Room"
cascade="all"/>
room.hbm.xml:

class="onlyfun.caterpillar.User"
constrained="true"/>

使用constrained="true"告訴Hibernate參考至User的主鍵

五、双向关联，就是将一和二结合起来，如果將關聯的維護交給User的話會比較容易，因為每個User都對應至一個Room，在儲存時並用像Room一樣必須對Set中的每個物件作檢查，為了將關聯的維護交給User，我們可以在Room.hbm.xml中的修改，加上inverse="true"，表示將關聯的維護「反過來」交給User作

例如：

在設立雙向關聯時，關聯由多對一中「多」的哪一方維護，會比由「一」的哪一方維護來的方便，在Hibernate可以藉由inverse來設定，不設定inverse基本上也可以運行，但是效能會較差

henry1451 2008-05-18 20:47 发表评论

Hibernate使用criteria进行查询

henry1451 — Sun, 18 May 2008 12:41:00 GMT

    1、读取配置文件获得连接
   读取hibernate.cfg.xml配置文件，hibernate.cfg.xml文件放在Classpath下，使用下面的方式读入该文件
      //Configuration 负责管理hibernate配置信息
      Configuration config=new Configuration().configure();
      //根据config建立SessionFactory
      //SessionFactory用于建立Session
      SessionFactory sessionFactory=config.buildSessionFactory();
      //开启session,相当于jdbc的Connection
      session = sessionFactory.openSession();

2、Criteria 基本资料查询
(1)标准查询:
      //创建查询标准
      Criteria criteria=session.creteCriteria(User.class);
      //查询条件
      criteria.add(Expression.eq("name","caterpillar"));
************************************************************************************
Expression.eq(String s1,String s2)---------->相等s1=s2
Expression.allEq(Map map)    --------------->多个属性-值对应关系，多个Expression.eq叠加
Expression.gt(String s1,String s2)----------->大于s1>s2
Expression.ge(String s1,String s2)----------->大于等于s1>=s2
Expression.lt(String s1,String s2)------------>小于s1 Expression.le(String s1,String s2)------------>小于等于s1<=s2
Expression.between(String s1,int s2,int s3)--->s2 Expression.like(String s1,String s2)------------>s1 like s2
比较2个属性
Expression.eqProperty(String s1,String s2)--->s1=s2
Expression.gtProperty(String s1,String s2)---->s1>s2
Expression.geProperty(String s1,String s2)---->s1>=s2
Expression.ltProperty(String s1,String s2)----->s1 Expression.leProperty(String s1,String s2)----->s1<=s2
Expression.and()----->Expression.and(Expression.eq("String s1,String s2"),Expression.eq(String s3,String s4))
Expression.or()
************************************************************************************
(2)高级查询
一、可以使用Criteria进行查询，并用order对结果进行排序。
//设置从第几条开始取的记录
criteria.setFirstResult(100);
//最多取的几条记录
criteria.setMaxResults(20);
//对结果进行排序
criteria.addOrder(Order.asc(String s1));
criteria.addOrder(Order.desc(String s2));

二、可以对查询结果进行统计操作，使用Projections的rowCount(),count(),max(),min(),countDistinct()等方法：
例如：criteria.setProjection(Projections.max("age"));

三、还可以用Projections的groupProperty()来对结果进行分组
例如：criteria.setProjection(Projections.groupProperty("age"));

(***)四、结合统计与分组的功能，可以用ProjectionList
例如：ProjectionList projectionList =Projections.projectionList();
            projectionList.add(Projections.groupProperty("age"));
            projectionList.add(Projections.rowCount());
            criteria.setProjection(projectionList);
^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^^
      //查询所有记录
      List users=criteria.list();
      Iterator iterator=users.iterator();
      while(iterator.hasNext()){
         User user=(User)iterator.next();
         System.out.println(user.getId()+"\t"+user.getName()+"/"+user.getAge());
}
3、criteria的增、删、改（还不完善）
在用到增、删、改时，必须先声明事务
增加：
  Transaction tx = session.beginTransaction();//Transaction表示一组会话操作
  session.save(user);//将事物映射到数据库进行存储
  tx.commit();
  session.close();
删除：
  Session session=this.getSession();
  User user=(User)session.get(User.class, new Integer(1));
  Transaction tx = session.beginTransaction();//Transaction表示一组会话操作
  session.delete(user);//将事物映射到数据库进行存储
  tx.commit();
  session.close();
修改：
  Session session=this.getSession();
  User user =(User)session.get(User.class,new Integer(2));//创建持久化的事物
  user.setName("wyqqqqqqqqqq");
  user.setAge(new Integer(30));
  Transaction tx = session.beginTransaction();//Transaction表示一组会话操作
  session.update(user);//将事物映射到数据库进行存储
  tx.commit();
  session.close();

henry1451 2008-05-18 20:41 发表评论

Hibernate中session的管理

henry1451 — Sun, 18 May 2008 12:36:00 GMT

摘要: session是hibernate运做的核心，是有SessionFactory所创建，sessionFactory是线程安全的，你可以让多个线程同时存取SessionFactory,而不会有资源共用的问题，然而session不是设计为线程安全的，所以让多个线程共用一个session，将发生资料共用而发生... 阅读全文

henry1451 2008-05-18 20:36 发表评论

在Hibernate应用中如何处理批量更新和批量删除(转)

henry1451 — Sun, 27 Apr 2008 08:33:00 GMT

批量更新是指在一个事务中更新大批量数据，批量删除是指在一个事务中删除大批量数据。以下程序直接通过Hibernate API批量更新CUSTOMERS表中年龄大于零的所有记录的AGE字段：

tx = session.beginTransaction();
Iterator customers=session.find("from Customer c where c.age>0").iterator();
while(customers.hasNext()){
Customer customer=(Customer)customers.next();
customer.setAge(customer.getAge()+1);
}
tx.commit();
session.close();

如果CUSTOMERS表中有1万条年龄大于零的记录，那么Session的find()方法会一下子加载1万个Customer对象到内存。当执行tx.commit()方法时，会清理缓存，Hibernate执行1万条更新CUSTOMERS表的update语句：

update CUSTOMERS set AGE=? …. where ID=i;
update CUSTOMERS set AGE=? …. where ID=j;
update CUSTOMERS set AGE=? …. where ID=k;

以上批量更新方式有两个缺点：
(1) 占用大量内存，必须把1万个Customer对象先加载到内存，然后一一更新它们。
(2) 执行的update语句的数目太多，每个update语句只能更新一个Customer对象，必须通过1万条update语句才能更新一万个Customer对象，频繁的访问数据库，会大大降低应用的性能。
为了迅速释放1万个Customer对象占用的内存，可以在更新每个Customer对象后，就调用Session的evict()方法立即释放它的内存：

tx = session.beginTransaction();
Iterator customers=session.find("from Customer c where c.age>0").iterator();
while(customers.hasNext()){
Customer customer=(Customer)customers.next();
customer.setAge(customer.getAge()+1);
session.flush();
session.evict(customer);
}
tx.commit();
session.close();

在以上程序中，修改了一个Customer对象的age属性后，就立即调用Session的flush()方法和evict()方法，flush()方法使Hibernate立刻根据这个Customer对象的状态变化同步更新数据库，从而立即执行相关的update语句；evict()方法用于把这个Customer对象从缓存中清除出去，从而及时释放它占用的内存。
但evict()方法只能稍微提高批量操作的性能，因为不管有没有使用evict()方法，Hibernate都必须执行1万条update语句，才能更新1万个Customer对象，这是影响批量操作性能的重要因素。假如Hibernate能直接执行如下SQL语句：

update CUSTOMERS set AGE=AGE+1 where AGE>0;

那么以上一条update语句就能更新CUSTOMERS表中的1万条记录。但是Hibernate并没有直接提供执行这种update语句的接口。应用程序必须绕过Hibernate API，直接通过JDBC API来执行该SQL语句：

tx = session.beginTransaction();
Connection con=session.connection();
PreparedStatement stmt=con.prepareStatement("update CUSTOMERS set AGE=AGE+1 "
+"where AGE>0 ");
stmt.executeUpdate();
tx.commit();

以上程序演示了绕过Hibernate API，直接通过JDBC API访问数据库的过程。应用程序通过Session的connection()方法获得该Session使用的数据库连接，然后通过它创建PreparedStatement对象并执行SQL语句。值得注意的是，应用程序仍然通过Hibernate的Transaction接口来声明事务边界。
如果底层数据库（如Oracle）支持存储过程，也可以通过存储过程来执行批量更新。存储过程直接在数据库中运行，速度更加快。在Oracle数据库中可以定义一个名为batchUpdateCustomer()的存储过程，代码如下：

create or replace procedure batchUpdateCustomer(p_age in number) as
begin
update CUSTOMERS set AGE=AGE+1 where AGE>p_age;
end;

以上存储过程有一个参数p_age，代表客户的年龄，应用程序可按照以下方式调用存储过程：
tx = session.beginTransaction();
Connection con=session.connection();
String procedure = "{call batchUpdateCustomer(?) }";
CallableStatement cstmt = con.prepareCall(procedure);
cstmt.setInt(1,0); //把年龄参数设为0
cstmt.executeUpdate();
tx.commit();

从上面程序看出，应用程序也必须绕过Hibernate API，直接通过JDBC API来调用存储过程。
Session的各种重载形式的update()方法都一次只能更新一个对象，而delete()方法的有些重载形式允许以HQL语句作为参数，例如：

session.delete("from Customer c where c.age>0");

如果CUSTOMERS表中有1万条年龄大于零的记录，那么以上代码能删除一万条记录。但是Session的delete()方法并没有执行以下delete语句

delete from CUSTOMERS where AGE>0;

Session的delete()方法先通过以下select语句把1万个Customer对象加载到内存中：

select * from CUSTOMERS where AGE>0;

接下来执行一万条delete语句，逐个删除Customer对象：

delete from CUSTOMERS where ID=i;
delete from CUSTOMERS where ID=j;
delete from CUSTOMERS where ID=k;

由此可见，直接通过Hibernate API进行批量更新和批量删除都不值得推荐。而直接通过JDBC API执行相关的SQL语句或调用相关的存储过程，是批量更新和批量删除的最佳方式，这两种方式都有以下优点：

(1) 无需把数据库中的大批量数据先加载到内存中，然后逐个更新或修改它们，因此不会消耗大量内存。
(2) 能在一条SQL语句中更新或删除大批量的数据。

henry1451 2008-04-27 16:33 发表评论