亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb

首頁 > 編程 > Perl > 正文

Perl訪問MSSQL并遷移到MySQL數據庫腳本實例

2020-10-31 15:16:40
字體:
來源:轉載
供稿:網友

Linux下沒有專門為MSSQL設計的訪問庫,不過介于MSSQL本是從sybase派生出來的,因此用來訪問Sybase的庫自然也能訪問MSSQL,FreeTDS就是這么一個實現。
Perl中通常使用DBI來訪問數據庫,因此在系統安裝了FreeTDS之后,可以使用DBI來通過FreeTDS來訪問MSSQL數據庫,例子:

復制代碼 代碼如下:

using DBI;
my $cs = "DRIVER={FreeTDS};SERVER=主機;PORT=1433;DATABASE=數據庫;UID=sa;PWD=密碼;TDS_VERSION=7.1;charset=gb2312";
my $dbh = DBI->connect("dbi:ODBC:$cs") or die $@;

因為本人不怎么用windows,為了研究QQ群數據庫,需要將數據從MSSQL中遷移到MySQL中,特地為了QQ群數據庫安裝了一個Windows Server 2008和SQL Server 2008r2,不過過幾天評估就到期了,研究過MySQL的Workbench有從MS SQL Server遷移數據的能力,不過對于QQ群這種巨大數據而且分表分庫的數據來說顯得太麻煩,因此寫了一個通用的perl腳本,用來將數據庫從MSSQL到MySQL遷移,結合bash,很方便的將這二十多個庫上百張表給轉移過去了,Perl代碼如下:
復制代碼 代碼如下:

#!/usr/bin/perl
use strict;
use warnings;
use DBI;


die "Usage: qq db/n" if @ARGV != 1;
my $db = $ARGV[0];

print "Connectin to databases $db.../n";
my $cs = "DRIVER={FreeTDS};SERVER=MSSQL的服務器;PORT=1433;DATABASE=$db;UID=sa;PWD=MSSQL密碼;TDS_VERSION=7.1;charset=gb2312";

sub db_connect
{
    my $src = DBI->connect("dbi:ODBC:$cs") or die $@;
    my $target = DBI->connect("dbi:mysql:host=MySQL服務器", "MySQL用戶名", "MySQL密碼") or die $@;
    return ($src, $target);
}
my ($src, $target) = db_connect;

print "Reading table schemas..../n";

my $q_tables = $src->prepare("SELECT name FROM sysobjects WHERE xtype = 'U' AND name != 'dtproperties';");#獲取所有表名
my $q_key_usage = $src->prepare("SELECT TABLE_NAME, COLUMN_NAME from INFORMATION_SCHEMA.KEY_COLUMN_USAGE;");#獲取表的主鍵
$q_tables->execute;
my @tables = ();
my %keys = ();
push @tables, @_ while @_ = $q_tables->fetchrow_array;

$q_tables->finish;

$q_key_usage->execute();
$keys{$_[0]} = $_[1] while @_ = $q_key_usage->fetchrow_array;
$q_key_usage->finish;


#獲取表的索引信息
my $q_index = $src->prepare(qq(
    SELECT T.name, C.name
    FROM sys.index_columns I
    INNER JOIN sys.tables T ON T.object_id = I.object_id
    INNER JOIN sys.columns C ON C.column_id = I.column_id AND I.object_id = C.object_id;
));
$q_index->execute;
my %table_indices = ();
while(my @row = $q_index->fetchrow_array)
{
    my ($table, $column) = @row;
    my $columns = $table_indices{$table};
    $columns = $table_indices{$table} = [] if not $columns;
    push @$columns, $column;
}
$q_index->finish;

#在目標MySQL上創建對應的數據庫
$target->do("DROP DATABASE IF EXISTS `$db`;") or die "Cannot drop old database $db/n";
$target->do("CREATE DATABASE `$db` DEFAULT CHARSET = utf8 COLLATE utf8_general_ci;") or die "Cannot create database $db/n";
$target->disconnect;
$src->disconnect;


my $total_start = time;
for my $table(@tables)
{
    my $pid = fork;
    unless($pid)
    {
        ($src, $target) = db_connect;
        my $start = time;
        $src->do("USE $db;");
        #獲取表結構,用來生成MySQL用的DDL
        my $q_schema = $src->prepare("SELECT COLUMN_NAME, IS_NULLABLE, DATA_TYPE, CHARACTER_MAXIMUM_LENGTH from INFORMATION_SCHEMA.COLUMNS where TABLE_NAME = ? ORDER BY ORDINAL_POSITION;");
        $target->do("USE `$db`;");
        $target->do("SET NAMES utf8;");
        my $key_column = $keys{$table};
        my $ddl = "CREATE TABLE `$table` ( /n";
        $q_schema->execute($table);
        my @fields = ();
        while(my @row = $q_schema->fetchrow_array)
        {
            my ($column, $nullable, $datatype, $length) = @row;
            my $field = "`$column` $datatype";
            $field .= "($length)" if $length;
            $field .= " PRIMARY KEY" if $key_column eq $column;
            push @fields, $field;
        }
        $ddl .= join(",/n", @fields);
        $ddl .= "/n) ENGINE = MyISAM;/n/n";
        $target->do($ddl) or die "Cannot create table $table/n";
        #創建索引
        my $indices = $table_indices{$table};
        if($indices)
        {
            for(@$indices)
            {
                $target->do("CREATE INDEX `$_` ON `$table`(`$_`);/n") or die "Cannot create index on $db.$table$.$_/n";
            }
        }
        #轉移數據
        my @placeholders = map {'?'} @fields;
        my $insert_sql = "INSERT DELAYED INTO $table VALUES(" .(join ', ', @placeholders) . ");/n";
        my $insert = $target->prepare($insert_sql);
        my $select = $src->prepare("SELECT * FROM $table;");
        $select->execute;
        $select->{'LongReadLen'} = 1000;
        $select->{'LongTruncOk'} = 1;
        $target->do("SET AUTOCOMMIT = 0;");
        $target->do("START TRANSACTION;");
        my $rows = 0;
        while(my @row = $select->fetchrow_array)
        {
            $insert->execute(@row);
            $rows++;
        }
        $target->do("COMMIT;");
        #結束,輸出任務信息
        my $elapsed = time - $start;
        print "Child process $$ for table $db.$table done, $rows records, $elapsed seconds./n";
        exit(0);
    }
}
print "Waiting for child processes/n";
#等待所有子進程結束
while (wait() != -1) {}
my $total_elapsed = time - $total_start;
print "All tasks from $db finished, $total_elapsed seconds./n";

這個腳本會根據每一個表fork出一個子進程和相應的數據庫連接,因此做這種遷移之前得確保目標MySQL數據庫配置的最大連接數能承受。
然后在bash下執行

復制代碼 代碼如下:

for x in {1..11};do ./qq.pl QunInfo$x; done
for x in {1..11};do ./qq.pl GroupData$x; done

就不用管了,腳本會根據MSSQL這邊表結構來在MySQL那邊創建一樣的結構并配置索引。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
亚洲香蕉成人av网站在线观看_欧美精品成人91久久久久久久_久久久久久久久久久亚洲_热久久视久久精品18亚洲精品_国产精自产拍久久久久久_亚洲色图国产精品_91精品国产网站_中文字幕欧美日韩精品_国产精品久久久久久亚洲调教_国产精品久久一区_性夜试看影院91社区_97在线观看视频国产_68精品久久久久久欧美_欧美精品在线观看_国产精品一区二区久久精品_欧美老女人bb
日韩精品在线电影| 成人激情春色网| 亚洲香蕉在线观看| 久久久国产影院| 国产日韩专区在线| 日韩av在线天堂网| 国产一区二区三区在线| 国产精品ⅴa在线观看h| 懂色aⅴ精品一区二区三区蜜月| 国产精品久久二区| 欧美黄色三级网站| 国产主播喷水一区二区| 美女久久久久久久久久久| 久久躁狠狠躁夜夜爽| 欧美精品videosex牲欧美| 中文字幕av一区二区| 91欧美激情另类亚洲| 欧美与黑人午夜性猛交久久久| 日韩成人高清在线| 在线看国产精品| 国产成人精品电影| 久久亚洲精品小早川怜子66| 亚洲成人精品av| 91精品国产免费久久久久久| 日韩有码片在线观看| 欧美中文字幕在线观看| 国产一区二区三区高清在线观看| 欧美性生交大片免网| 国产91色在线|| 欧美在线欧美在线| 欧美日韩亚洲精品一区二区三区| 日本国产一区二区三区| 欧美久久精品一级黑人c片| 91精品国产电影| 欧美黑人又粗大| 久久人人爽人人| 国产精品精品国产| 久久精品免费播放| 欧美成人免费一级人片100| 日韩在线视频国产| 欧美综合国产精品久久丁香| 欧美成人激情在线| 欧美成年人视频网站| 亚洲精品videossex少妇| 蜜臀久久99精品久久久无需会员| 亚洲美女精品久久| 亚洲精品视频网上网址在线观看| 欧美人与性动交a欧美精品| 91成品人片a无限观看| 国产mv免费观看入口亚洲| 国产精品入口日韩视频大尺度| 成人av.网址在线网站| 国模叶桐国产精品一区| 久久久久久美女| 中文字幕亚洲一区二区三区五十路| 午夜精品久久久久久久99黑人| 国产精品观看在线亚洲人成网| 日韩精品免费在线视频| 欧美激情按摩在线| 成人国内精品久久久久一区| 日韩电影在线观看免费| 亚洲国产精彩中文乱码av在线播放| 亚洲精品欧美极品| 国产精品国产亚洲伊人久久| 亚洲国产成人精品久久| 日韩一区二区三区xxxx| 日韩中文字幕在线精品| 亚洲精品美女在线| 国产午夜精品全部视频在线播放| 亚洲精品久久久一区二区三区| 中文字幕在线看视频国产欧美在线看完整| 国产成人免费av电影| 日韩av色综合| 久久久精品2019中文字幕神马| 日韩欧美亚洲范冰冰与中字| 日韩亚洲欧美中文高清在线| 亚洲va码欧洲m码| 中文字幕日韩综合av| 亚洲欧美制服丝袜| 亚洲国产成人在线播放| 91沈先生在线观看| 精品动漫一区二区三区| 岛国av一区二区| 日韩性生活视频| 国产69久久精品成人| 18一19gay欧美视频网站| 96精品久久久久中文字幕| 日韩精品视频中文在线观看| 欧美高跟鞋交xxxxxhd| 美女福利视频一区| 久久久极品av| 韩剧1988在线观看免费完整版| 亚洲一区二区三区sesese| 日韩视频在线观看免费| 国产精品久久久久久久久免费看| 成人免费xxxxx在线观看| 亚洲成av人影院在线观看| 欧美激情视频在线免费观看 欧美视频免费一| 尤物yw午夜国产精品视频| 欧美精品一区二区三区国产精品| 欧美日韩激情美女| 欧美视频精品一区| 亚洲欧洲国产一区| 国产成人中文字幕| www.日韩av.com| 午夜精品一区二区三区在线视频| 精品福利一区二区| 一本色道久久88综合亚洲精品ⅰ| 在线播放精品一区二区三区| 69久久夜色精品国产69乱青草| 国产性猛交xxxx免费看久久| 欧美插天视频在线播放| 日韩欧美国产一区二区| 精品女厕一区二区三区| 久久久久久噜噜噜久久久精品| 91精品免费视频| 欧美高清视频在线播放| 欧美疯狂性受xxxxx另类| 丁香五六月婷婷久久激情| 98视频在线噜噜噜国产| 亚洲精品久久久一区二区三区| 91九色综合久久| 九色成人免费视频| 久久av中文字幕| 精品国产一区二区三区久久狼5月| 日韩二区三区在线| 91免费版网站入口| 精品伊人久久97| 国产精品扒开腿爽爽爽视频| 欧美野外猛男的大粗鳮| 热久久视久久精品18亚洲精品| 亚洲午夜女主播在线直播| 成人伊人精品色xxxx视频| 亚洲xxxx做受欧美| 欧美激情一级欧美精品| 欧美日韩中国免费专区在线看| 日韩在线www| 欧美激情乱人伦一区| 国产精品久久在线观看| 韩国精品美女www爽爽爽视频| 国模叶桐国产精品一区| 亚洲国产福利在线| 精品亚洲国产成av人片传媒| 精品国产区一区二区三区在线观看| 97久久精品人人澡人人爽缅北| 国产精品欧美在线| 日韩成人在线播放| 中文字幕亚洲欧美日韩在线不卡| 日本久久久久亚洲中字幕| 国产精品成人观看视频国产奇米| 国产精品成人aaaaa网站| 亚洲午夜国产成人av电影男同| 欧美大胆a视频| 精品福利视频导航| 亚洲品质视频自拍网| 久久99久久99精品免观看粉嫩| 成人黄色免费在线观看| 国产精品久久久久aaaa九色| 成人深夜直播免费观看| 精品国偷自产在线视频99| 96精品视频在线| 91在线视频精品| 在线成人免费网站| 6080yy精品一区二区三区|