把MySQL数据导出为CSV格式,实现快速的导入导出,分为本地和远程两种方式
MySQL自带的数据导出的命令(本地导出)
导出:select * from tableA into outfile ‘/tmp/aa.csv‘ fields terminated by ‘,‘ optionally enclosed by ‘"‘ lines terminated by ‘\n‘ "
导入:load data infile "/tmp/file.csv" into table money fields terminated by ‘,‘ optionally enclosed by ‘"‘ lines terminated by ‘\n‘
相关参数:
FIELDS TERMINATED BY ‘字符串‘:设置字符串为字段之间的分隔符,可以为单个或多个字符。默认值是“\t”。
OPTIONALLY ENCLOSED BY ‘字符‘:设置字符来括住CHAR、VARCHAR和TEXT等字符型字段。默认情况下不使用任何符号
LINES TERMINATED BY ‘字符串‘:设置每行数据结尾的字符,可以为单个或多个字符。默认值是“\n”
远程导出CSV格式:
/usr/local/mysql/bin/mysql -h 192.168.1.1 -P3307 -udlan -proot123 -ss -e "select * from gjol_log_ob3.money_20160821 limit 2" |sed ‘s/\t/","/g;s/^/"/;s/$/"/;s/\n//g‘>/tmp/file1.csv
##ss为导出的时候去掉表头字段
导入数据:load data infile "/tmp/file1.csv" into table money1 fields terminated by ‘,‘ optionally enclosed by ‘"‘ lines terminated by ‘\n‘
###sed 命令使用:
常用选项:
-n∶使用安静(silent)模式。在一般 sed 的用法中,所有来自 STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后,则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
-e∶直接在指令列模式上进行 sed 的动作编辑;
-f∶直接将 sed 的动作写在一个档案内, -f filename 则可以执行 filename 内的sed 动作;
-r∶sed 的动作支援的是延伸型正规表示法的语法。(预设是基础正规表示法语法)
-i∶直接修改读取的档案内容,而不是由萤幕输出。
常用命令:
a ∶新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~
c ∶取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行!
d ∶删除,因为是删除啊,所以 d 后面通常不接任何咚咚;
i ∶插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);
p ∶列印,亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作~
s ∶取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是啦!
数据导出为CSV格式,能更好的应用到其他的平台,如hadoop,inf等场景,加快数据的I/O的速度