OGG运维优化脚本(二. 五)-信息修改类--快速加表

文件名:add.sh

所在路径:$HOME/ggadd

功能:批量加表脚本的优化版,用于针对少量加表需求,包括重复配置表过滤功能以及附加日志自动增加功能

该脚本通过alias方式写入账户系统配置文件.profile 和.bash_profile通过命令使用

日志路径:$HOME/ggscript/ggadd

具体脚本内容

#!/bin/bash
if [ $# -eq 0 ]; then
        echo "info EXTRACT TABLE AREA user"
        exit 2
fi

if [ $# -eq 1 ]; then
        echo "info EXTRACT TABLE AREA user"
        exit 2
fi

if [ $# -eq 2 ]; then
        echo "info EXTRACT TABLE AREA user"
        exit 2
fi

if [ $# -eq 3 ]; then
        echo "info EXTRACT TABLE AREA user"
        exit 2
fi

backuptime=`date +%Y%m%d-%H%M`
datenow=`date +%Y%m%d%H`

echo $backuptime > ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘

 cd $HOME/ggscript/ggadd
echo $backuptime
echo "This script can only insert one  table( by RenYi)"

val=$1
echo $2 > AddTemp
area=$3
name=$4
#echo $val
cat AddTemp
#echo $area

echo "--------insert process name------" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
echo $val >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
val=`echo $val|tr a-z A-Z `

if [ `echo $val|grep ^E` ];then
         IType=EXTRACT

elif [ `echo $val|grep ^P` ];then
         IType=POST

elif  [ `echo $val|grep ^R` ];then
        echo "can not operate the REPLICAT process"
         echo "can not operate the REPLICAT process"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
         echo "process break off"
         echo "process break off"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        exit 2
else
        echo "only can operate the EXTRACT and the POST process"
         echo "can not operate the REPLICAT process"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        echo "process break off"
        echo "process break off"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        exit 2
fi
val=`echo $val.PRM|tr A-Z a-z`
echo $val
echo "--------insert file name------" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
echo $val >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘

cd $HOME/ggserver/dirprm
if [ ! -e $val ]; then
        echo "the EXTRACT is not exist"
         echo "the EXTRACT is not exist"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        exit 2
fi

cd $HOME/ggscript/ggadd

echo $val
cat $HOME/ggserver/dirprm/$val |grep Begin|sed ‘s/--//g‘|sed ‘s/-Begin//g‘ > arealist
cat arealist
echo "------------area check-------------- " >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
check=`grep -w $area arealist`
if [ "$check" = "$area" ];then
        echo "area is exist"
        echo "area is exist"   >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
else
        echo "area is not exist"
        #echo "area is not exist"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        #exit 2
fi

cat $HOME/ggserver/dirprm/$val|awk ‘/--‘$area‘-Begin/,/--‘$area‘-End/{if(i>1)print x;x=$0;i++}‘ > temp
awk -F ‘--‘  ‘($1) { print $1}‘ temp > temp2
rm -rf temp
sed  -e ‘/^$/d‘  temp2 > temp3
rm -rf temp2
awk -F ‘,‘ ‘{print $1}‘ temp3 >temp4
rm -rf temp3
awk -F ‘;‘ ‘{print $1}‘ temp4 >temp5
rm -rf temp4
echo "Confirm the tables that have increased"
cat temp5|awk  -F ‘TABLE ‘  ‘{print $2}‘ > AddedTemp
rm -rf temp5
sed ‘/^$/d‘ AddedTemp > AddedTemp2
sed ‘/^$/d‘ AddTemp > AddTemp2
cat AddedTemp2 |sort -n > AddTable
comm -12  AddTable AddTemp > Duplicate

echo "--------Table Check---------------"
cat AddTemp >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘

echo "--------Table Check---------------">> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘

check=`grep -w $2 Duplicate`
if [ "$check" = "$2" ];then
        echo "The table has being added"
         echo "The table has being added"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
        echo "process break off"
        exit 2
else
       echo "The table not be add"
        echo "The table not be add"  >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
fi

 cp $HOME/ggserver/dirprm/$val $HOME/ggserver/dirprm/bak/$val.$backuptime.bak
echo "backup complete"
echo "backup complete" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
 sed ‘s/^/TABLE /‘ AddTemp > table1
sed ‘s/$/;/‘ table1 > table2
rm -f table1

echo "-----The Operator is ‘$name‘--------" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘

sed ‘1 i--‘$datenow‘-‘$name‘-add
‘ table2 > table3
rm -f table2
                        mv table3 table2

                echo "inserting table"
                        sed  ‘/‘$area‘-Insert/r table2
                        ‘ $HOME/ggserver/dirprm/$val > $HOME/ggserver/dirprm/tem3
                rm -f $HOME/ggserver/dirprm/$val
                mv $HOME/ggserver/dirprm/tem3 $HOME/ggserver/dirprm/$val

if [ "$IType" == "EXTRACT" ];then
                sed ‘s/^/add trandata /‘ AddTemp > addtrandata
                 cd $HOME/ggserver
                        echo dblogin `more $HOME/ggserver/dirprm/$val|grep USERID` > dirdat/addtrandata
                        cat  $HOME/ggscript/ggadd/addtrandata >> dirdat/addtrandata
                        echo   OBEY dirdat/addtrandata |./ggsci
                 echo "process complete"
                echo "process complete" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
                exit 2
elif [ "$IType" == "POST" ];then
                 echo "process complete"
                echo "process complete" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
                exit 2
else
                 echo "process complete"
                echo "process complete" >> ‘‘$HOME‘/gglog/ggadd/InsertLog-‘$backuptime‘.log‘
fi
时间: 2024-12-20 19:48:40

OGG运维优化脚本(二. 五)-信息修改类--快速加表的相关文章

OGG运维优化脚本(五)-信息修改类--批量注释

文件名:comment.sh 路径:$HOME/ggscript/ggcomment 功能:该脚本基于CBS用户每月大批量注释源端表进行数据清理的需求而设计 通过edit脚本选择并调用 日志路径:$HOME/gglog/ggcomment #!/bin/bash backuptime=`date +%Y%m%d-%H%M` echo "This script is used to annotate the specified table!(created by renyi)" echo

OGG运维优化脚本(三)-信息修改类--附加日志增加

文件名: addtrandata.sh 所在路径:$HOME/ggscript/gginsert 功能:用于批量增加表附加日志,属于从加表脚本中独立出来的功能,用于应对表附加日志丢失以及加表附加日志增加失败的情况 #!/bin/bash echo "This script will add trandata( by RenYi)" ls -lrt $HOME/ggserver/dirprm/e*.prm echo "The EXTRACT process:" cd 

OGG运维优化脚本(十一)-查询维护类--操作选择

文件:ggedit 路径:$HOME/ggscript 功能:该脚本用于选择使用其他脚本 通过alias别名初始化入.profile和.bash_profile文件,以edit指令方式使用 #!/bin/bash echo "Select an action you want to perform" select ch in "addtable" "addtrandata" "annotate" "reannotat

OGG运维优化脚本(十二)-信息同步类--信息上传

文件: upload.sh 路径:$HOME/ggscript/ggupload 功能:该脚本不会直接使用,为满足其他脚本进行信息上传而设计,在脚本内直接调用上传相应的文件信息 他会读取系统信息配置文件sysinfo内的系统配置信息 范例 [detest#] Ip-MTMyLjEyMS4xMDEuODYK UserName-Z2dzCg== PassWord-Z2dzxxxxxx Port-MjIK path-L2RhdGExL2dncy9nZ3NlcnZlci9kaXJkZWYK [#dete

OGG运维优化脚本(十五)-信息同步类--错误日志同步

文件:logtitle.sh  log.sh 路径:$HOME/ggscript/gginfo 该脚本主要用于每小时检查ggserr.log内包含error关键字的信息(具体可调整) 然后拼接成html格式文件发送给监控网站 该脚本需要配合crontab计划任务使用 logtile.sh  每月月初执行一次,生成文件头 #!/bin/bash cd $HOME if [ -f .profile ];then         . .profile fi if [ -f .bash_profile 

OGG运维优化脚本(十)-查询维护类--进程详细信息查询

文件:processinfo.sh 路径:$HOME/ggscript/ggupload 功能:该脚本为满足维护配置时检查所有goldengate进程的详细源端目标端,定义文件等信息而设计 #!/bin/bash export PATH="/usr/local/sbin:/usr/local/bin:/sbin:/bin:/usr/sbin:/usr/bin:/root/bin"  echo "This sciprt is write by RenYi" hn=`e

OGG运维优化脚本(十三)-信息同步类--进程信息上传

文件:pcsinfoupload.sh 路径:$HOME/ggscript/ggupload 功能:用于查询所有进程的部署时填写好的详细配置注释信息,进程状态,生成以HTML格式的文件,并通过上传脚本定时上传至某台目标机器,通过其他脚本整合形成网页 以网页信息浏览所有进程的监控信息 日志路径:$HOME/gglog/ggupload #!/bin/bash cd #HOME if [ -f .profile ];then         . .profile fi if [ -f .bash_p

OGG运维优化脚本(十四)-信息同步类--定义文件自动下发

文件: resend.sh 路径:$HOME/ggscript/ggdef 功能:该脚本为用于应对目标端因为定义文件失效导致的进程异常中断所设计 因源端业务经常未通知目标端以及系统组自行修改表结构 因此设计该脚本自动生成定义文件,并发送至指定目标机器的相应路径,以用于目标机器REPLICATE进程的正常读取 日志路径:$HOME/gglog/ggupload #!/bin/bash cd $HOME if [ -f .profile ];then         . .profile fi if

OGG运维优化脚本(七)-信息修改类--快速注释

文件名:note.sh 路径:$HOME/ggscript/ggnote 功能:该脚本用于注释指定行的配置表,配合重复值检查脚本repeat.sh使用 通过alias初始化入.profile或.bash_profile文件,通过指令note使用 日志路径:$HOME/gglog/ggnote #!/bin/bash if [ $# -eq 0 ]; then         echo "note EXTRACT rowsnum"         exit 2 fi if [ $# -e