BlogJava-wiflish-随笔分类-database

[转]mysql批量导入已经格式好的文本数据

想飞的鱼 — Tue, 26 Feb 2008 04:39:00 GMT

原文连接：
http://blog.csdn.net/fenglibing/archive/2007/10/11/1820153.aspx
语法：

				LOAD DATA [LOW_PRIORITY | CONCURRENT] [LOCAL] INFILE 'file_name'

				    [REPLACE | IGNORE]

				    INTO TABLE tbl_name

				    [CHARACTER SET charset_name]

				    [FIELDS

				        [TERMINATED BY 'string']

				        [[OPTIONALLY] ENCLOSED BY 'char']

				        [ESCAPED BY 'char']

				    [LINES

				        [STARTING BY 'string']

				        [TERMINATED BY 'string']

				    [IGNORE number LINES]

				    [(col_name_or_user_var,...)]

				    [SET col_name = expr,...]

使用如下命令：

LOAD DATA LOCAL INFILE 'C:\\stu.txt' INTO TABLE stu;

因为这是一条SQL语句，你同样可以在你的JAVA程序序中用：

st.execute(“LOAD DATA LOCAL INFILE 'C:\\stu.txt' INTO TABLE stu”);

(st表示Statement的一个实例变量，假设数据库连接，st的初使化已经完成)

创建stu表：

create table stu_other(id int auto_increment primary key,stu_name varchar(50),age int);

然后创建一个文本文件“stu.txt”，每行包含一个记录，放在C盘的根目录下。默认的字段分隔符是(tab)，你可以更改，下面说明。并且以CREATE TABLE语句中列出的列次序给出。对于丢失的值(例如未知的性别，或仍然活着的动物的死亡日期)，你可以使用NULL值。为了在你的文本文件中表示这些内容，使用\N（反斜线，字母N）。

如stu.txt的内容如下：

100001 FLB100001 100001

100002 FLB100002 100002

100003 FLB100003 100003

100004 FLB100004 100004

100005 FLB100005 100005

100006 FLB100006 100006

100007 FLB100007 100007

100008 FLB100008 100008

…

这里我用的是table分开。

要想将文本文件“stu.txt”装载到stu表中，使用这个命令：

mysql> LOAD DATA LOCAL INFILE 'c:\\stu.txt' INTO TABLE stu;

这里没有指定字段分隔符，以及行的终止符，默认情况下是这样的：

字段分隔符：

				FIELDS TERMINATED BY '\t' ENCLOSED BY '' ESCAPED BY '\\'

				其中的'\t'就表示是字段分隔符为tab键，如果不想更改，那就把FIELDS TERMINATED BY '\t'中的'\t'改在你自己的分隔符。将执行命令改成这样：

mysql> LOAD DATA LOCAL INFILE 'c:\stu.txt' INTO TABLE stu fields terminated by ‘ ‘;

这里我用的是空格。

行终止符：

				LINES TERMINATED BY '\n' STARTING BY ''

请注意如果用Windows中的编辑器（使用\r\n做为行的结束符）创建文件，应使用：

mysql> LOAD DATA LOCAL INFILE 'C:\\stu.txt' INTO TABLE stu

-> LINES TERMINATED BY '\r\n';

（在运行OS X的Apple机上，应使用行结束符'\r'。）

如果你愿意，你能明确地在LOAD DATA语句中指出列值的分隔符和行尾标记，但是默认标记是定位符和换行符。这对读入文件“stu.txt”的语句已经足够。

另外，还可以使用SELECT ... INTO OUTFILE 将数据导入到外部文件中，如下：

select * from stu_t into outfile "c:\\stu_t.txt";

不过，没有按记录自动分行

这样才能够换行：

select * from stu_t into outfile "c:\\stu_t.txt" lines terminated by '\r\n';

所有实例都是经过测试的，运行成功。

参加文章：http://www.wang48.com/jishubaodianview/?jsd_id=327

Trackback: http://tb.blog.csdn.net/TrackBack.aspx?PostId=1820153

想飞的鱼 2008-02-26 12:39 发表评论

Mysql5 交叉表查询

想飞的鱼 — Tue, 09 Oct 2007 14:07:00 GMT

# Host: localhost Database: test
# ------------------------------------------------------
# Server version 5.0.45-community-nt-log

#
# Table structure for table sale
#

DROP TABLE IF EXISTS `sale`;
CREATE TABLE `sale` (
`id` int(10) unsigned NOT NULL auto_increment,
`year` int(11) NOT NULL,
`quarter` int(11) NOT NULL,
`amount` decimal(15,2) NOT NULL,
PRIMARY KEY (`id`)
) ENGINE=MyISAM AUTO_INCREMENT=10 DEFAULT CHARSET=latin1;

#
# Dumping data for table sale
#

/*!40101 SET NAMES latin1 */;

INSERT INTO `sale` VALUES (1,2004,1,2328);
INSERT INTO `sale` VALUES (2,2004,2,3822);
INSERT INTO `sale` VALUES (3,2004,3,7071);
INSERT INTO `sale` VALUES (4,2004,4,8931);
INSERT INTO `sale` VALUES (5,2005,1,2633);
INSERT INTO `sale` VALUES (6,2005,2,3910);
INSERT INTO `sale` VALUES (7,2005,3,237193);
INSERT INTO `sale` VALUES (8,2005,4,567444);
INSERT INTO `sale` VALUES (9,2006,1,12313);
插入数据后结果为：

id	year	quarter	amount
1	2004	1	2328.00
2	2004	2	3822.00
3	2004	3	7071.00
4	2004	4	8931.00
5	2005	1	2633.00
6	2005	2	3910.00
7	2005	3	237193.00
8	2005	4	567444.00
9	2006	1	12313.00

交叉表查询语句：
select a.year, 1d, 2d, 3d, 4d from
(select distinct year from sale) a left join
(select year, amount 1d from sale where quarter=1 group by year) a1d on a.year = a1d.year
left join (select year, amount 2d from sale where quarter=2 group by year) a2d on a2d.year=a.year
left join (select year, amount 3d from sale where quarter=3 group by year) a3d on a3d.year=a.year
left join (select year, amount 4d from sale where quarter=4 group by year) a4d on a4d.year=a.year
该语句查询某年的四个季度的amount，以行显示，显示结果：

year	1d	2d	3d	4d
2004	2328.00	3822.00	7071.00	8931.00
2005	2633.00	3910.00	237193.00	567444.00
2006	12313.00	NULL	NULL	NULL

实现定长列的查询（即quarter的最大取值为4，定长为4列）.

想飞的鱼 2007-10-09 22:07 发表评论

mysql中varchar字段长度超过限制长度自动截取的问题

想飞的鱼 — Wed, 29 Aug 2007 10:30:00 GMT

mysql手册的说明：
如果分配给CHAR或VARCHAR列的值超过列的最大长度，则对值进行裁剪以使其适合。如果被裁掉的字符不是空格，则会产生一条警告。如果裁剪非空格字符，则会造成错误(而不是警告)并通过使用严格SQL模式禁用值的插入。
MySQL服务器模式说明：

MySQL服务器可以以不同的SQL模式来操作，并且可以为不同客户端应用不同模式。这样每个应用程序可以根据自己的需求来定制服务器的操作模式。

模式定义MySQL应支持哪些SQL语法，以及应执行哪种数据验证检查。这样可以更容易地在不同的环境中使用MySQL，并结合其它数据库服务器使用MySQL。

你可以用--sql-mode="modes"选项启动mysqld来设置默认SQL模式。如果你想要重设，该值还可以为空(--sql-mode ="")。

你还可以在启动后用SET [SESSION|GLOBAL] sql_mode='modes'语句设置sql_mode变量来更改SQL模式。设置 GLOBAL变量时需要拥有SUPER权限，并且会影响从那时起连接的所有客户端的操作。设置SESSION变量只影响当前的客户端。任何客户端可以随时更改自己的会话 sql_mode值。

Modesis是用逗号(‘，’)间隔开的一系列不同的模式。你可以用SELECT @@sql_mode语句查询当前的模式。默认值是空(没有设置任何模式)。

主要重要sql_mode值为：

· ANSI

更改语法和行为，使其更符合标准SQL。

· STRICT_TRANS_TABLES

如果不能将给定的值插入到事务表中，则放弃该语句。对于非事务表，如果值出现在单行语句或多行语句的第1行，则放弃该语句。本节后面给出了更详细的描述。

· TRADITIONAL

Make MySQL的行为象“传统”SQL数据库系统。该模式的简单描述是当在列中插入不正确的值时“给出错误而不是警告”。注释：一旦发现错误立即放弃INSERT/UPDATE。如果你使用非事务存储引擎，这种方式不是你想要的，因为出现错误前进行的数据更改不会“滚动”，结果是更新“只进行了一部分”。

本手册指“严格模式”，表示至少STRICT _TRANS_TABLES或STRICT _ALL_TABLES被启用的模式。

想飞的鱼 2007-08-29 18:30 发表评论

windows下安装解压版mysql

想飞的鱼 — Tue, 26 Dec 2006 07:39:00 GMT

1、下载mysql
http://dev.mysql.com/downloads/
2、将mysql解压到待安装目录，使用%MYSQL_HOME%表示。
3、编辑my.ini文件(该文件放到C:\windows目录下)，内容如下：

[mysqld]
#default-character-set=gbk
basedir=%MYSQL_HOME%
datadir=%MYSQL_HOME%/data

[WinMySQLadmin]
Server=%MYSQL_HOME%/bin/mysqld-nt.exe
user=root
password=

4、打开windows的cmd命令窗口，进入到%MYSQL_HOME%\bin。
5、执行命令： mysqld-nt.exe --install （安装到windows的服务）
6、执行命令： net start mysql
一般情况下，这样操作后，mysql安装完成。

注：
1、如果以前系统存在mysql。则进入以前系统存在的mysql目录,执行 mysqld-nt.exe --remove(先从系统中移
除mysql服务)在开始执行上面第4步。
2、如果出现1067错误，一般是my.ini文件配置问题。更改my.ini文件使之符合本地情况.

想飞的鱼 2006-12-26 15:39 发表评论

[转]ysql4.1以上版本连接时出现Client does not support authentication protocol问题解决办法

想飞的鱼 — Sat, 23 Dec 2006 07:50:00 GMT

转：http://www.phpv.net/article.php/288

mysql4.1以上版本连接时出现Client does not support authentication protocol问题解决办法

shell> mysql
Client does not support authentication protocol requested
by server; consider upgrading MySQL client

官方的说法是

MySQL 4.1 and up uses an authentication protocol based on a password hashing algorithm that is incompatible with that used by older clients. .....

如果你升级mysql到4.1以上版本后遇到以上问题,请先确定你的mysql client 是4.1或者更高版本.(WINDOWS下有问题你就直接跳到下面看解决方法了,因为MYSQL 在WINDOWS是client和server一起装上了的)

请使用以下两种方法之一

其一:

mysql> SET PASSWORD FOR
    -> 'some_user'@'some_host' = OLD_PASSWORD('newpwd');

其二:

mysql> UPDATE mysql.user SET Password = OLD_PASSWORD('newpwd')
    -> WHERE Host = 'some_host' AND User = 'some_user';
mysql> FLUSH PRIVILEGES;

上面红色的部分请按自己实际情况修改....

这样做后,连接就会正常了@!

想飞的鱼 2006-12-23 15:50 发表评论

Linux平台：忘记mysql的root密码解决办法

想飞的鱼 — Sat, 23 Dec 2006 05:43:00 GMT

转：http://www.domsn.net/index.php?play=reply&id=490

当忘记MySQL的root密码的时候，可以进行如下的步骤重新设置MySQL的root密码：

■■Linux的平台■■

1．首先确认服务器出于安全的状态，也就是没有人能够任意地连接MySQL数据库。
因为在重新设置MySQL的root密码的期间，MySQL数据库完全出于没有密码保护的
状态下，其他的用户也可以任意地登录和修改MySQL的信息。可以采用将MySQL对
外的端口封闭，并且停止Apache以及所有的用户进程的方法实现服务器的准安全
状态。最安全的状态是到服务器的Console上面操作，并且拔掉网线。

2．修改MySQL的登录设置：
# vi /etc/my.cnf
在[mysqld]的段中加上一句：skip-grant-tables
例如：
[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
skip-grant-tables
保存并且退出vi。

3．重新启动mysqld
# /etc/init.d/mysqld restart
Stopping MySQL: [ OK ]
Starting MySQL: [ OK ]

4．登录并修改MySQL的root密码
# /usr/bin/mysql
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 3 to server version: 3.23.56

Type 'help;' or '\h' for help. Type '\c' to clear the buffer.

mysql> USE mysql ;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> UPDATE user SET Password = password ( 'new-password' ) WHERE User = 'root' ;
Query OK, 0 rows affected (0.00 sec)
Rows matched: 2 Changed: 0 Warnings: 0

mysql> flush privileges ;
Query OK, 0 rows affected (0.01 sec)

mysql> quit
Bye

5．将MySQL的登录设置修改回来
# vi /etc/my.cnf
将刚才在[mysqld]的段中加上的skip-grant-tables删除
保存并且退出vi。

6．重新启动mysqld
# /etc/init.d/mysqld restart
Stopping MySQL: [ OK ]
Starting MySQL: [ OK ]

7．恢复服务器的正常工作状态
将步骤一中的操作逆向操作。恢复服务器的工作状态。

想飞的鱼 2006-12-23 13:43 发表评论

[原创]安装phpMyAdmin

想飞的鱼 — Mon, 29 May 2006 08:30:00 GMT

软件环境(windowsXP)：Apache2.0.55 + PHP4.3.5 + MySQL4.0.24 + phpMyAdmin-2.5.6-rc2
配置方法：
1、复制%PHP_HOME%\php4ts.dll文件到%Apache_HOME%\bin\php4ts.dll；
2、修改%Apache_HOME%\conf\httpd.conf查找：

#
# Commonly used filename extensions to character sets. You probably
# want to avoid clashes with the language extensions, unless you
# are good at carefully testing your setup after each change.
# See http://www.iana.org/assignments/character-sets for the
# official list of charset names and their respective RFCs.
#
在后面加上：AddDefaultCharset GB2312

即：

3、在文件末尾加上：

LoadModule php4_module "%PHP_HOME%/sapi/php4apache2.dll"
AddType application/x-httpd-php .php

通过上述配置，将php与apche2整合在一起了，即apache2能解析*.php文件了。
测试配置：在%Apache_HOME%\htdocs\目录下新建test.php文件，内容如下：

echo phpinfo(); ?>

启动apache2，输入：http://localhost/test.php，就能看到php的相关配置信息的页面。
4、将下载的phpMyAdmin-2.5.6-rc2压缩包解压到%Apache_HOME%\htdocs\下。
5、打开phpMyAdmin-2.5.6-rc2目录下的config.inc.php文件，
查找：

$cfg['Servers'][$i]['user'] = 'root'; // MySQL user
$cfg['Servers'][$i]['password'] = ''; // MySQL password (only needed

上述代码，设置连接MySQL的用户名和密码。
查找：

// Default language to use, if not browser-defined or user-defined
$cfg['DefaultLang'] = 'en-iso-8859-1';

更改为：

// Default language to use, if not browser-defined or user-defined
$cfg['DefaultLang'] = 'zh';

查找：

$cfg['DefaultCharset'] = 'iso-8859-1';

更改为：

$cfg['DefaultCharset'] = 'gbk';

保存config.inc.php文件。

6、将%PHP_HOME%目录下的php.ini-dist文件复制到系统目录（C:\WINDOWS），并将php.ini-dist修改为php.ini，打开php.ini文件，查找extension_dir，将该值更改为%PHP_HOME%\extensions(PHP5为：%PHP_HOME%\ext)；查找;extension=php_mysql.dll，将前面的";"去掉；再将%PHP_HOME%根目录下的libmysql.dll和extensions（PHP5为：ext）目录下的php_mysql.dll复制到C:\WINDOWS\system32下。

7、启动apache2，输入：http://localhost/phpMyAdmin-2.5.6-rc2，就能对mysql数据库进行相关操作了。

想飞的鱼 2006-05-29 16:30 发表评论

安装和卸载Mysql的windows系统服务

想飞的鱼 — Fri, 26 May 2006 07:20:00 GMT

安装mysql的windows系统服务： ${mysql.home}\bin\mysqld-nt --install;
卸载mysql的windows系统服务： ${mysql.home}\bin\mysqld-nt --remove

绿色心情大大介绍的更好的方法：

在命令行使用sc命令：
DESCRIPTION:
SC is a command line program used for communicating with the
NT Service Controller and services.
USAGE:
sc [command] [service name] ...

The option has the form "\\ServerName"
Further help on commands can be obtained by typing: "sc [command]"
Commands:
query-----------Queries the status for a service, or
enumerates the status for types of services.
queryex---------Queries the extended status for a service, or
enumerates the status for types of services.
start-----------Starts a service.
pause-----------Sends a PAUSE control request to a service.
interrogate-----Sends an INTERROGATE control request to a service.
continue--------Sends a CONTINUE control request to a service.
stop------------Sends a STOP request to a service.
config----------Changes the configuration of a service (persistant).
description-----Changes the description of a service.
failure---------Changes the actions taken by a service upon failure.
qc--------------Queries the configuration information for a service.
qdescription----Queries the description for a service.
qfailure--------Queries the actions taken by a service upon failure.
delete----------Deletes a service (from the registry).
create----------Creates a service. (adds it to the registry).
control---------Sends a control to a service.
sdshow----------Displays a service's security descriptor.
sdset-----------Sets a service's security descriptor.
GetDisplayName--Gets the DisplayName for a service.
GetKeyName------Gets the ServiceKeyName for a service.
EnumDepend------Enumerates Service Dependencies.

The following commands don't require a service name:
sc