阳光男孩

Never give up!

Entries Tagged ‘问题’

oracle数据库限制返回的记录数问题

0顶一下oracle数据库限制返回的记录数问题,setMaxRow的作用是限制最终的返回记录数,这个限制返回和sql执行的速度是基本没有什么关系。   今天yxg提了一张bug单中提到oracle的环境下告警查询非常慢,连上去看了一下发现是非常慢(十多秒钟),开始怀疑是setMaxRow没有生效,导致进行了全表查询,但是在页面确认返回的结果确实是set过的500条,但是如果在语句里直接加入rownum<500不用Quer...[阅读全文]

0
顶一下

oracle数据库限制返回的记录数问题,setMaxRow的作用是限制最终的返回记录数,这个限制返回和sql执行的速度是基本没有什么关系。

 

今天yxg提了一张bug单中提到oracle的环境下告警查询非常慢,连上去看了一下发现是非常慢(十多秒钟),开始怀疑是setMaxRow没有生效,导致进行了全表查询,但是在页面确认返回的结果确实是set过的500条,但是如果在语句里直接加入rownum<500不用QueryHelper.setMaxRow方法来限制查询条数的时候查询速度确是正常的(毫秒级),是不是jdbc的setMaxRow这个方法在性能上有些不足?

re:

setMaxRow的作用是限制最终的返回记录数,这个限制返回和sql执行的速度是基本没有什么关系。

你需要了解一下sql的运行机制,你可以set showplan on来看看sql的执行计划。

上面红色的最终意思是:数据库已经处理好返回的结果,然后从这些结构中获取指定的返回记录数。

特别是一些带有order by的操作,如果没有用到索引,则需要将查询结果放到临时表中进行排序,然后再从排序结果中返回指定的记录数。这个创建临时表和排序的过程也非常消耗数据库的cpu的。

setMaxRow作用主要是避免应用服务器这段需要处理过多的记录而导致出现IO的性能问题。

我们的web开发主要都是围绕数据库的开发,sql的性能直接影响系统的稳定性。sql的编写通常都需要一些经验和技巧的,关于这块开发中心可以考虑进行一次培训。

re:

我觉得这个接口只能限制你返回的数据,而不能限制你查出来多少数据,限制查出来多少条还是要程序自己控制。

想在这个接口里面控制查出来的结果集有难度。

以oracle为例,我就有个深刻教训。

从97接口表中查询1000条待处理数据,按照SO_NBR,ACT_TYPE排序,原来是这样写的

select * from interface_97 where STS=’D’ and rownum<=1000 order by SO_NBR,ACT_TYPE

这个语句是在oracle里是有问题的,虽然是排序了,也只返回了1000条,但是SO_NBR不连续了,因为oracle只是从STS=’D'的数据中抽取了1000条进行排序(抽取的规则不详,虽然大多数情况下没问题)

后来改成这样就没问题了

select * from (

select * from interface_97

where STS=’D’ order by SO_NBR,ACT_TYPE

)

where rownum<=1000

order by rownum asc

上面举的例子只是想说明,要想在setMaxRow里面把你想做的都做了,实现起来肯定有难度,而且可能和你的预期不一致,所以最好还是在你的代码中控制数据量。

re:

嗯,这个让 QueryHelper 来加或替换 set rowcount 或 rownum 或 top,随意性太大,甚至象魏巍这个例子一样,导致结果可能不是你想要的。

在DBA中,限制查询数据的返回条数,大家都写死 select maxrow=1000, * from table

然后 DBA对应 Sybase翻译成 set rowcount 1000,Oralce翻译成 rownum < 5000,自定义的一套SQL规则。比较土 :)

QueryHelper,仅仅是在 java.sql.* 上简单的包装了一层,做了日志和时间统计过程。和其名字相称,仅仅是一个简单的helper。

大家有没有什么比较好的,又不是太重量级的咚咚,来屏蔽这种数据库层面的差异?

做出来show show,大家都觉得好的话,肯定会加到openEAP上去。

呵呵,openEAP是大家的EAP,是open的….

就如老汤说的,目前用QueryHelper这个层面,很难把数据库的SQL差异给屏蔽掉:

如很常用的日期类型,很多查询中都会用到,如果不加 todate 函数,Oracle不会执行的,而Sybase则不需要。

Sybase用条件查询有 case,Oracle用 decode …

 

Comments (90)

Java或web中解决所有路径问题

2顶一下Java中使用的路径,分为两种:绝对路径和相对路径。归根结底,Java本质上只能使用绝对路径来寻找资源。所有的相对路径寻找资源的方法,都不过 是一些便利方法。不过是API在底层帮助我们构建了绝对路径,从而找到资源的!在开发Web方面的应用时, 经常需要获取 服务器中当前WebRoot的物理路径 如果是Servlet , Action , Controller, 或则Filter , Listener , 拦截器等相关类时, 我们只需要...[阅读全文]

2
顶一下

Java中使用的路径,分为两种:绝对路径和相对路径。归根结底,Java本质上只能使用绝对路径来寻找资源。所有的相对路径寻找资源的方法,都不过 是一些便利方法。不过是API在底层帮助我们构建了绝对路径,从而找到资源的!在开发Web方面的应用时, 经常需要获取 服务器中当前WebRoot的物理路径

如果是Servlet , Action , Controller, 或则Filter , Listener , 拦截器等相关类时, 我们只需要获得ServletContext, 然后通过ServletContext.getRealPath(“/”)来获取当前应用在服务器上的物理地址

如果在类中取不到ServletContext时, 有两种方式可以做到

1) 利用Java的类加载机制 调用 XXX.class.getClassLoader().getResource(“”); 方法来获取到ClassPath , 然后处理获得WebRoot目录

这种方式只能是该class在WebRoot/WEB-INF/classes下才能生效, 如果该class被打包到一个jar文件中, 则该方法失效。这时就应该用下面一种方式

2) spring框架的思路, 在WEB-INF/web.xml中 , 创建一个webAppRootKey的param, 指定一个值(默认为webapp.root)作为键值, 然后通过Listener , 或者Filter , 或者Servlet 执行String webAppRootKey = getServletContext().getRealPath(“/”); 并将webAppRootKey对应的webapp.root 分别作为Key , Value写到System Properties系统属性中。之后在程序中通过System.getProperty(“webapp.root”)来获得WebRoot的物理路径

根据第二种的思路,我们还可以再扩展一下。不过对于在部署在一台服务器中的应用来说,若还不是你所需请再往下看。

下面是一些得到classpath和当前类的绝对路径的一些方法。你可使用其中的一些方法来得到你需要的资源的绝对路径:

1.DebitNoteAction.class.getResource(“”)

得到的是当前类FileTest.class文件的URI目录。不包括自己!

如:file:/D:/eclipse/springTest/WebRoot/WEB-INF/classes/

atacarnet/src/com/evi/modules/atacarnet/action/

2.DebitNoteAction.class.getResource(“/”)

得到的是当前的classpath的绝对URI路径。

如:file:/D:/eclipse/springTest/WebRoot/WEB-INF/classes/

3.Thread.currentThread().getContextClassLoader().getResource(“”)

得到的也是当前ClassPath的绝对URI路径

如:file:/D:/eclipse/springTest/WebRoot/WEB-INF/classes/

4.DebitNoteAction.class.getClassLoader().getResource(“”) 或ClassLoader.getSystemResource(“”)

得到的也是当前ClassPath的绝对URI路径。

如:file:/D:/eclipse/springTest/WebRoot/WEB-INF/classes/

5.取得服务器相对路径

System.getProperty(“user.dir”)

例如:E:\apache-tomcat-5.5.16\apache-tomcat-5.5.16\bin

我推荐使用Thread.currentThread().getContextClassLoader().getResource(“”) 来得到当前的classpath的绝对路径的URI表示法

6.取得项目中的绝对路径

一般用request.getRealPath(“/”)或request.getRealPath(“/config/”)

但现在不提倡使用request.getRealPath(“/”)了,大家可试用ServletContext.getRealPath(” /”)方法得到Web应用程序的根目录的绝对路径

要取得src的文件非常容易,因为src是默认的相对目录,比如你说要取得src下com目录的test.java文件,你只需要这样就够了

File f = new File(com/test.java);

但如果我要取得不在src目录或者WebRoot目录下的文件呢,而是要从src或者WebRoot同级的目录中取呢,比如说doc吧

我的硬方法是这样实现的:

String path = this.getServletContext().getRealPath(“/”);

Properties p = new Properties();

p.load(new FileInputStream(new File(path.substring(0,(path.lastIndexOf(“\\WebRoot”) + 1)) + “doc/db.properties”)));

System.out.println(p.getProperty(“driverName”));

Comments (59)

mysql远程登陆问题

3顶一下mysql默认是没有开启远程控制的,必须添加远程访问的用户。 mysql默认是没有开启远程控制的,必须添加远程访问的用户。 g&00 x$ Y 0VE }0(fQ 如果是安装版的话,从mysql提供的控制台进入。 1s+<( 0R/ 用root用户登陆,然后: Q k C jgS0 grant all privileges on *.* to 创建的用户名 @”%” identified by “密码”; o! q*)`xuQ flush privileges; * 刷新刚才的内容* )/ z (5 3X ...[阅读全文]

3
顶一下

mysql默认是没有开启远程控制的,必须添加远程访问的用户。

mysql默认是没有开启远程控制的,必须添加远程访问的用户。 g&00 x$ Y
0VE }0(fQ
如果是安装版的话,从mysql提供的控制台进入。 1s+<( 0R/
用root用户登陆,然后: Q k C jgS0
grant all privileges on *.* to 创建的用户名 @”%” identified by “密码”; o! q*)`xuQ
flush privileges; * 刷新刚才的内容* )/ z (5 3X
; (Q:LY \v
格式:grant 权限 on 数据库名.表名 to 用户@登录主机 identified by “用户密码”; .=h j Qi[
@ 后面是访问mysql的客户端IP地址(或是 主机名) % 代表任意的客户端,如果填写 localhost 为本地访问(那此用户就不能远程访问该mysql数据库了)。 U <T 1O 6
lp 8 z Rc
同时也可以为现有的用户设置是否具有远程访问权限。如下: \ch3 X X#
use mysql; o$`> :>N e
update db set host = '%' where user = '用户名'; (如果写成 host=localhost 那此用户就不具有远程访问权限) B Gnl: R *
FLUSH PRIVILEGES; zn 6en;&?
3 Pj_2B=
查看结果,执行: $4b 5-U
use mysql; ){[' 66!
select host,user,password from user; J):H\B:j_M
i oZ 0 " H
+--------------+--------+---------------+ t75 JSdQ
| Host | User | Password | XKL Di{ U
+--------------+--------+-----------------+ B*1Q< Cx5B
| localhost | | | U 8RZq(f
| % | John | 123456 | r ` Al B
| localhost | root | | H fd ZE
+--------------+------ --+---------------+ pd7= 8 8
ArJ~Vs "+
总结: ? Av L`B A
其实MySQL默认有两个数据库分别为 mysql 和 test 而MySQL用户的信息都放在数据库 mysql 的相关表中 gb: hj /
也可以使用 Navicat (推荐)这样的GUI工具来管理用户。 HUD?}U BB5
update user set host='%' where host='localhost'

工作中用到web服务器和mysql服务器不在同一台计算机上安装的运用。需要通过mysql的远程账户访问mysql。

先上语法:

grant [权限] on [数据库名].[表命] to ['用户命']@['web服务器的ip地址'] identified by ['密码'];

Comments (310)