none
ssis是否支持 mysql导入其他异构数据库 RRS feed

  • 问题

  • 我的组件选择如下
    源数据库:source data reader我解决用ado.net连接 成功
    目的数据库:destination data reader  死活不知道如何配置

    但是ssis好像不支持 mysql作为目的来接受数据。
    死活找不到 如何让destination data reader 接受来自source data reader的数据
    清问ssis是否支持 mysql导入其他异构数据库?
    2010年1月31日 4:02

答案

全部回复

  • sql2005 的表有一个image字段
    导到 mysql不知道会是哪个字段类型与之对应 ????手动导也麻烦
    2010年1月31日 4:14
  • 1. install MySql odbc driver on ssis machine.
    2. check MySql data type in its manual.
    2010年1月31日 19:31
  • 源数据库:source data reader我解决用ado.net连接 成功   (我连接的是 mysql)
    但是目的 死活不出现连接界面  (sqlserver2000 是支持的   异构数据库互导
    反思ssis应该有这个能力作的 

    2010年2月1日 5:02
  • I found one paper

    数据从sqlserver导入到mysql数据库的方法
    2010-01-27 09:50
    第 一种是安装mysql ODBC,利用sql server的导出功能,选择mysql数据源,进行数据的直接导出,这种方法很简便,但是针对实际应用有很多弊端,最主要体现就是数据类型问题,首 先,sql server数据库中的ntext,image等数据类型的数据无法直接写入到mysql数据库中,据说只要稍加改动就可以,可惜偶这只菜鸟还没想到如何 改动,其次,因为偶在mysql中的数据库设计中将时间都设成int型(保存的是时间戳),所以在数据导过来后,就会出现冲突,再次,这种方法生成的 mysql数据表的字段类型都不很合适,所以此种方法我觉得不能提倡。

    第二种是利用php或asp脚本来实现数据的导入功能,这种方法需要编写程序,但灵活性大,操作也不是那么困难,一切都尽在你的掌握之中,现简单介绍 一下该方法前提条件是你的mysql环境已经搭建好了,先建好目标数据库,再将所有的表结构用sql语句生成,现在万事具备,只缺数据了。

    可以通过下面的php脚本来实现sql server中mydb数据库的user表中数据向mysql中mydb数据库导入
    <?
    $cnx = odbc_connect('web', 'admin', '123456');//'web'是sqlserver中mydb的数据源名,'admin'是访问mydb的用户名,'123456'是访问mydb的密码
    $cur= odbc_exec( $cnx, 'select * from user' );//打开sql server中mydb数据库的user表
    $num_row=0;
    $conn=mysql_pconnect("localhost","root","123456");// 连接mysql
    @mysql_select_db('mydb',$conn) or

    die("无法连接到数据库,请与管理员联系!");//打开mysql的mydb数据库
    while( odbc_fetch_row( $cur ))      //从sql server的mydb库中的user表逐条取出数据,如果对数据进行选择,可在前面的select语句中加上条件判断
    {
    $num_row++;
    $field1 = odbc_result( $cur, 1 );  // 这里的参数i(1,2,3..)指的是记录集中的第i个域,你可以有所选择地进行选取,fieldi得到对应域的值,然后你可以对fieldi进行操作
    $field2 = odbc_result( $cur, 2 ); 
    $field3 = odbc_result( $cur, 3 ); 
    $field4 = odbc_result( $cur, 4 ); 
    $field5 = odbc_result( $cur, 5 ); 
    $field6 = odbc_result( $cur, 6 ); 
    $field5 = timetoint($field5);  //这里是对sql server中的datetime类型的字段进行相应转换处理,转换成我所需要的int型 
    $querystring = "insert into user
    (id,name,username,password,recdate)
    values('$field1','$field2','$field3','$field4','$field5')" ;

    mysql_query($querystring,$conn);
    }

    function timetoint($str){
    $arr1=split(" ",$str);
    $datestr=$arr1[0];
    $timestr=$arr1[1];
    $arr_date=split("-",$datestr);
    $arr_time=split(":",$timestr);
    $year=$arr_date[0];
    $month=$arr_date[1];
    $day=$arr_date[2];
    $hour=$arr_time[0];
    $minute=$arr_time[1];
    $second=$arr_time[2];
    $time_int=mktime($hour,$minute,$second,$month,$day,$year);
    return $time_int;
    }
    ?>

    将该段脚本存成sql.php,在服务器上执行,就可以将服务器上sql server中mydb数据库的user表中的数据导入到mysql中mydb数据库的user表中去。其他表的操作与此雷同,就不赘述了。

    [NextPage]   下面再介绍一下asp脚本实现sql server中mydb数据库的数据向mysql中mydb数据库导入
    <%
    set conn=server.createobject("adodb.connection")
    conn.open 'web', 'admin', '123456' // 'web'是sqlserver中mydb的数据源名,'admin'是访问mydb的用户名,'123456'是访问mydb的密码
    set rs=server.createobject("adodb.recordset")
    sql="select ID,name,username,password,datediff(s,'1970-01-01 00:00:00',recdate)-8*3600,reid,filename,fileContentType,filevalue from senddate" //这条sql语句实现了将datetime类型的recdate字段转化成unix时间戳的int型

    rs.open sql,conn,1,3
    set conn1=server.createobject("adodb.connection")
    conn1.open "myoa","root","q1-d6=7?"
    i=1
    do while not rs.eof
    field1 = rs(0) 
    field2 = rs(1) 
    field3 = rs(2) 
    field4 = rs(3) 
    field5 = rs(4) 
    sql1 = "insert into user(ID,name,username,password,recdate)    

    values("&field1&",'"&field2&"','"&field3&"','"&field4&"',"&field5&")"

    conn1.execute sql1
    rs.movenext
    i=i+1
    loop
    rs.close
    set rs=nothing
    conn.close
    set conn=nothing
    conn1.close
    set conn1=nothing

    %>

    以上两个是分别采用php脚本和asp脚本对user表的数据进行由sql server到mysql的导入其间我采用2种回避的方法来避免ntext,image类型数据的传递,一种是将ntext字段改为 nvarchar(4000),因为实际情况,原始数据中该字段的数据长度都未超过4000个字,所以并没有出现数据截断,另一个手段是将image类型 数据取出来写到文件中,以文件形式保存,将文件路径存到数据库中,方法见下:

    function makeattach(fileContentType,filevalue,i)
    select case fileContentType
    case "application/msword"
    ext="doc"

    case "application/vnd.ms-excel"
    ext="exl"

    case "application/vnd.ms-powerpoint"
    ext="pps"

    case "application/x-rar-compressed"
    ext="rar"

    case "application/x-zip-compressed"
    ext="zip"

    case "image/gif"
    ext="gif"

    case "image/pjpeg"
    ext="jpg"

    case "text/plain"
    ext="txt"

    case else
    ext="x"

    end select
    if ext<>"x" then
    set fso=server.createobject("FileSystemObject")
    fName="attech"&i&"."&ext
    Dir="d:\attach\"
    If fso.FileExists(Dir & fName) Then fso.deletefile Dir & fName
    If fName<>"" AND NOT fso.FileExists(Dir & fName) Then
    Set strm1=Server.CreateObject("ADODB.Stream")
    strm1.Open
    strm1.Type=1 'Binary
    strm1.Write filevalue
    strm1.SaveToFile Dir & fName,2
    Set strm1=Nothing
    end if
    makeattach=fName
    end if
    end function

    这个函数有3个输入参数,第一个是文件的contentType,第二个是文件的二进制数值,第三个是个可以区别文件名的变量,先根据 contentType确定所存文件的后缀名,然后就是将二进制数值保存成指定文件名的文件,并将文件名作为输出参数返回,将返回的参数作为数据写到 mysql的数据库中保存。
    2010年2月1日 7:13
  • 数据从MSSQL Server导到mysql的一种方法2008-12-08 09:49使用文本文件来进行导数据,要求比较低,不需要mssql和mysql直接连接.


    1.导表结构


    使用mssql生成create脚本的方法,首先生成要导出的脚本,按mysql的语法修改一下到mysql数据库中创建该表.


    2.导表数据


    在mssql端使用bcp导出文本文件:


    bcp "SELECT * FROM dbname.dbo.tablename;" queryout tablename.txt -c -Slocalhost\db2005 -Usa


    其中""中是要导出的sql语句,-c指定使用\t进行字段分隔,使用\n进行记录分隔,-S指定数据库服务器及实例,-U指定用户名,-P指定密码.


    在mysql端使用mysqlimport 导入文本文件到相应表中


    mysqlimport -uroot -p databasename /home/test/tablename.txt


    其中-u指定用户名,-p指定密码,databasename指定数据库名称,表名与文件名相同.

    另一种简单方法
    电脑网络:天下一帅
    从sql导出到mysql的方法很多,现介绍一种无需编程,直接利用sql和mysql里的图形界面进行导入导出的简单方法。
      前提是已经安装了sqlserver客户端和mysql的图形界面管理工具phpmyadmin。

      在控制台根目录下打开sqlserver企业管理器,新建sqlserver组,根据自己的情况进行选择;然后新建sqlserver 注册,进行对sqlserver的连接。准备妥当后,下面就开始了:

      首先打开数据转换服务,新建包,打开DTS界面,在连接中选择数据源进行配置。再选择将要转换到的目的文件,这里我选的 Textfile(destination),选择好文件的存放位置之后,我们来新建一个任务。这里我们只选择转换数据任务,将带有“选择源连接”“选择目的连接”的鼠标分别选中数据源和目的之后,我们对新生成的连接进行定义,在其属性中将源,目的,转换依次定义。

      执行任务,提示成功。保存任务。然后在新建的任务上导出数据,有向导提示,其中一项选择“从源数据库复制表和视图”。

      这一步已经把数据导出到目的文件中。

      下一步在mysql中新建表,与将要导入的结构保持一致时,直接选取“从文本文件中提取数据,插入到数据表:”,将选项添好后,“发送”就可以了,浏览一下,数据已导入了。若要导入的表已经存在,且属性名也不同,这时就先建一个与要导入的数据相同结构的表并导入数据(按刚才的进行就可以了),然后在mysql中导出“数据和结构”,得到sql语句,将其在文本文件中编辑,利用文本编辑器的替换功能,将表名修改,列名加入,最后将其粘贴在要导入表的执行sql语句的地方,执行一下,数据便导入了。

    第一个问题:
    1. 先将SQL Server中的数据备份。
    2. 先将SQL Server表结构导出成文本文件,按照MySql的创建方式修改该文件,然后在MySql服务器上运行该文件中的sql语句。经验之谈:多做几次试验,时间不会需要很久的,验证无误后在倒数据。
    3. 如果在SQL Server中有存储过程,触发器之类的东西,在一些较早的MySql版本是不支持的,你可能需要用外部代码的方式来代替,最新的MySql版本支持存储 过程和触发器之类的东西,但由于两者有所差别,你可能需要修改原来的存储过程和触发器才能在MySql中使用。

    第二个问题:
    如果第一个问题解决了,第二个问题应该就好办了。最差的情况就是自己写一个程序从SQL Server取数据,往MySql里写数据就可以。需要注意的是,一次不要取太多数据了,写的时候也要记得及时commit,否则内存可能会受不了。如果 你的MySql的数据库引擎MyISAM的话,那么1秒钟倒2000条记录问题应该不会很大的。

    或者,将SQL Server的数据到处成文本文件,然后用MySql提供的工具批量导入。这个方法相对更快一点,但要求包含数据的那个文本文件要符合MySql的格式。
    <!-- End_rbody_56646577//-->
    code
    SQL导出Mysql

    1 可以生成标准的.sql文件,在mysql下导入

    mysql -h localhost -u root -p1234 < c:/123/123.sql

    mysql -h localhost -u root -p1234 < c:\\123\\123.sql


    2 到www.mysql.com上下个myodbc,装以下这个驱动,然后在mssql的enterprise manager中选择表,点右键选择export data,然后利用mysql 的ODBC接口操作即可


    --------------------------------------------------------------------------------------
    SQL导出到MYSQL StarryNightIceTea(原作)

    从sql导出到mysql的方法很多,现介绍一种无需编程,直接利用sql和mysql里的图形界面
    进行导入导出的简单方法。
    前提是已经安装了sqlserver客户端和mysql的图形界面管理工具phpmyadmin。
    在控制台根目录下打开sqlserver企业管理器,新建sqlserver组,根据自己的情况进行选择;然后新建sqlserver 注册,进行对sqlserver的连接。准备妥当后,下面就开始了:
    首先打开数据转换服务,新建包,打开DTS界面,在连接中选择数据源进行配置。再选择将要转换到的目的文件,这里我选的 Textfile(destination),选择好文件的存放位置之后,我们来新建一个任务。这里我们只选择转换数据任务,将带有“选择源连接”“选择目的连接”的鼠标分别选中数据源和目的之后,我们对新生成的连接进行定义,在其属性中将源,目的,转换依次定义。
    执行任务,提示成功。保存任务。
    然后在新建的任务上导出数据,有向导提示,其中一项选择“从源数据库复制表和视图”。
    这一步已经把数据导出到目的文件中。
    下一步在mysql中新建表,与将要导入的结构保持一致时,直接选取“从文本文件中提取数据,插入到数据表:”,将选项添好后,“发送”就可以了,浏览一下,数据已导入了。若要导入的表已经存在,且属性名也不同,这时就先建一个与要导入的数据相同结构的表并导入数据(按刚才的进行就可以了),然后在mysql中导出“数据和结构”,得到sql语句,将其在文本文件中编辑,
    利用文本编辑器的替换功能,将表名修改,列名加入,最后将其粘贴在要导入表的执行sql语句的地方,执行一下,数据便导入了。
    若过程中出现错误,请仔细检查配置的选项,确保正确。



    --连接mysql
    安装MySQL的ODBC驱动MyODBC

    1、为MySQL建立一个ODBC系统数据源,例如:选择数据库为test ,数据源名称为 myDSN

    2、建立链接数据库
    EXEC sp_addlinkedserver @server = 'MySQLTest', @srvproduct='MySQL', @provider = 'MSDASQL', @datasrc = 'myDSN'
    GO
    EXEC sp_addlinkedsrvlogin @rmtsrvname='MySqlTest',@useself='false',@locallogin='sa',@rmtuser='mysql的用户名',@rmtpassword='mysql的密码'

    3、查询数据


    SELECT * FROM OPENQUERY (MySQLTest ,'select * from 表' )

    但是我还是希望能得到  
    SSIS  how to solve this problem????
    2010年2月1日 9:07
  • 1. install MySql odbc driver on ssis machine.
    2. check MySql data type in its manual.

    Additionally,
    http://technet.microsoft.com/en-us/library/cc966396.aspx[Migrating MySQL to Microsoft SQL Server 2000 ]
    2010年2月3日 5:06
    版主