读取文件，通过标签解析，并使用Bash Script插入mysql数据库

Question

我正在做一个bash脚本，逐行读取文件，解析并将其插入mysql数据库。

脚本如下：

#!/bin/bash

echo "Start!"

while IFS='     ' read -ra ADDR;
do
   for line in $(cat filename)
   do
      regex='(\d\d)-(\d\d)-(\d\d)\s(\d\d:\d\d:\d\d)'
      if [[$line=~$regex]]
      then
         $line='20$3-$2-$1 $4';
      fi
      echo "insert into table (time, total, caracas, anzoategui) values('$line', '$line', '$line', $
   done | mysql -uuser -ppassword database;
done < filename

带有数据的文件“文件名”是这样的：

15/08/13 09:34:38       17528                                   5240    399     89      460     159     1107    33240
15/08/13 09:42:57       17528                                   5240    399     89      460     159     1107    33240
15/08/13 10:20:03       17492                                   5217    394     89      459     159     1101    33245
15/08/13 11:20:02       17521                                   5210    402     90      462     158     1112    33249
15/08/13 12:20:04       17540                                   5209    396     90      459     160     1105    33258

并删除此：

Answer 1

我建议使用awk创建您的sql文件，然后从mysql采购它。 将输出重新定向到一个新文件（例如insert.sql ），然后从mysql命令行获取它。 像这样：

$ cat file
15/08/13 09:34:38       17528                                   5240    399     89      460     159     1107    33240
15/08/13 09:42:57       17528                                   5240    399     89      460     159     1107    33240
15/08/13 10:20:03       17492                                   5217    394     89      459     159     1101    33245
15/08/13 11:20:02       17521                                   5210    402     90      462     158     1112    33249
15/08/13 12:20:04       17540                                   5209    396     90      459     160     1105    33258

$ awk -F'[/ ]+' -v q="'" '{print "insert into table (time, total, caracas, anzoategui) values ("q"20"$3"-"$2"-"$1" "$4q","q$5q","q$6q","q$7q");"}' file
insert into table (time, total, caracas, anzoategui) values ('2013-08-15 09:34:38','17528','5240','399');
insert into table (time, total, caracas, anzoategui) values ('2013-08-15 09:42:57','17528','5240','399');
insert into table (time, total, caracas, anzoategui) values ('2013-08-15 10:20:03','17492','5217','394');
insert into table (time, total, caracas, anzoategui) values ('2013-08-15 11:20:02','17521','5210','402');
insert into table (time, total, caracas, anzoategui) values ('2013-08-15 12:20:04','17540','5209','396');

Answer 2

使用LOAD DATA语句。 首先对文件进行任何转换，然后

LOAD DATA LOCAL INFILE 'filename' INTO table (time, total, caracas, anzoategui)

制表符分隔的字段是默认字段。

Answer 3

Bash使用POSIX字符类。 因此，您可以使用[0-9]或[[:digit:]]代替数字\\d来匹配数字。

另外，在正则表达式测试中，括号和运算符之间必须有空格。 因此[[$line=~$regex]]可以通过[[ $line =~ $regex ]] 。

为了访问括号中的正则表达式，必须访问内置数组变量BASH_REMATCH 。 因此，要访问第一个匹配项，您将引用${BASH_REMATCH[1]} ，第二个${BASH_REMATCH[2]} ，依此类推。