[英]How do I import XML files using an SSIS package?
我正在嘗試使用SSIS將XML文件導入SQL Server。 XML文件的結構如下
<?xml version="1.0" encoding="utf-8"?>
<dataset xmlns="http://developer.cognos.com/schemas/xmldata/1/" xmlns:xs="http://www.w3.org/2001/XMLSchema-instance">
<!--
<dataset
xmlns="http://developer.cognos.com/schemas/xmldata/1/"
xmlns:xs="http://www.w3.org/2001/XMLSchema-instance"
xs:schemaLocation="http://developer.cognos.com/schemas/xmldata/1/ xmldata.xsd"
>
-->
<metadata>
<item name="ORDERNUM" type="xs:string" length="26"/>
<item name="Business Stream" type="xs:string" length="482"/>
<item name="ORDERNO" type="xs:decimal" precision="8"/>
<item name="ORDERTYPE" type="xs:string"/>
<item name="ITEM_NO" type="xs:decimal" precision="8"/>
<item name="ITEM_NO2" type="xs:string" length="52"/>
<item name="PG" type="xs:int" precision="1"/>
<item name="SG" type="xs:int" precision="1"/>
<item name="LINEDESC" type="xs:string" length="122"/>
<item name="CUSTNO" type="xs:decimal" precision="8"/>
<item name="ORDERQNTY" type="xs:decimal" scale="3" precision="77"/>
<item name="COST_VALUE" type="xs:decimal" scale="5" precision="77"/>
<item name="EXTD_LIST" type="xs:decimal" scale="4" precision="77"/>
<item name="EXTD_VALUE" type="xs:decimal" scale="4" precision="77"/>
<item name="LINE_NO" type="xs:decimal" precision="9"/>
<item name="TDATE" type="xs:date"/>
<item name="TQUARTER" type="xs:decimal" precision="1"/>
<item name="INVOICEDAT" type="xs:date"/>
<item name="IQUARTER" type="xs:decimal" precision="1"/>
<item name="ORIGNUM" type="xs:decimal" precision="10"/>
<item name="ORIGTYPE" type="xs:string" length="22"/>
<item name="TYPECALC" type="xs:string"/>
<item name="SEQ" type="xs:int" precision="1"/>
<item name="INC_IN_COU" type="xs:string"/>
<item name="COSTMOD" type="xs:string" length="4"/>
<item name="GROSSMOD" type="xs:string" length="4"/>
<item name="CHFLOOR" type="xs:string" length="16"/>
<item name="Group Customer Description" type="xs:string" length="482"/>
<item name="Sales Area Description" type="xs:string" length="482"/>
<item name="Sales Area" type="xs:string" length="8"/>
<item name="Segment / Region Description" type="xs:string" length="482"/>
<item name="Segment / Region" type="xs:string" length="8"/>
<item name="ScheduledDespatchDate" type="xs:date"/>
<item name="Status Sid" type="xs:int" precision="1"/>
<item name="ShiptoCustomerNumber" type="xs:decimal" precision="8"/>
<item name="CONT_TYPE" type="xs:string" length="122"/>
<item name="EST_START" type="xs:date"/>
<item name="EST_COMPLTN" type="xs:date"/>
<item name="ACT_START" type="xs:date"/>
<item name="ACT_COMPLTN" type="xs:date"/>
<item name="Project_Status" type="xs:string" length="18"/>
</metadata>
<data>
<row>
<value>SO1897977</value>
<value>Products & Applications</value>
<value>1897977</value>
<value>SO</value>
<value>731305</value>
<value>0670800</value>
<value>67</value>
<value>3</value>
<value>3/4" HM10/8 CI Steam TrapBSP</value>
<value>20021</value>
<value>1</value>
<value>62.136</value>
<value>187.1</value>
<value>187.1</value>
<value>1000</value>
<value>2011-11-17</value>
<value>4</value>
<value>2011-11-17</value>
<value>4</value>
<value xs:nil="true" />
<value> </value>
<value>SO</value>
<value>1</value>
<value>Y</value>
<value>N</value>
<value>N</value>
<value>PDQ/KSP</value>
<value>Other Customers</value>
<value>Crumb Jonathan</value>
<value>917</value>
<value>Southern Division</value>
<value>STH</value>
<value>2011-11-17</value>
<value>70</value>
<value>60206</value>
<value xs:nil="true" />
<value>1900-01-01</value>
<value>1900-01-01</value>
<value>1900-01-01</value>
<value>1900-01-01</value>
<value xs:nil="true" />
</row>
<row>
<value>SO1897977</value>
<value>Products & Applications</value>
<value>1897977</value>
<value>SO</value>
<value>799262</value>
<value>1643100</value>
<value>164</value>
<value>60</value>
<value>1/2" FIG12 Bronze Y Type BSP+ 0.8 SS</value>
<value>20021</value>
<value>5</value>
<value>54.051</value>
<value>130.2</value>
<value>130.2</value>
<value>2000</value>
<value>2011-11-17</value>
<value>4</value>
<value>2011-11-17</value>
<value>4</value>
<value xs:nil="true" />
<value> </value>
<value>SO</value>
<value>1</value>
<value>Y</value>
<value>N</value>
<value>N</value>
<value>PDQ/KSP</value>
<value>Other Customers</value>
<value>Crumb Jonathan</value>
<value>917</value>
<value>Southern Division</value>
<value>STH</value>
<value>2011-11-17</value>
<value>70</value>
<value>60206</value>
<value xs:nil="true" />
<value>1900-01-01</value>
<value>1900-01-01</value>
<value>1900-01-01</value>
<value>1900-01-01</value>
<value xs:nil="true" />
</row>
我制作了一個看起來像這樣的XSD文件
<?xml version="1.0"?>
<schema xmlns:xs="http://www.w3.org/2001/XMLSchema-instance" attributeFormDefault="unqualified" elementFormDefault="qualified" targetNamespace="http://developer.cognos.com/schemas/xmldata/1/" xmlns="http://www.w3.org/2001/XMLSchema">
<element name="dataset">
<complexType>
<sequence>
<element minOccurs="0" name="data">
<complexType>
<sequence>
<element minOccurs="0" maxOccurs="1" name="row">
<complexType>
<sequence>
<element name="ORDERNUM" type="string" />
<element name="BusinessStream" type="string" />
<element name="ORDERNO" type="decimal"/>
<element name="ORDERTYPE" type="string"/>
<element name="ITEM_NO" type="decimal" />
<element name="ITEM_NO2" type="string" />
<element name="PG" type="int" />
<element name="SG" type="int" />
<element name="LINEDESC" type="string" />
<element name="CUSTNO" type="decimal" />
<element name="ORDERQNTY" type="decimal" />
<element name="COST_VALUE" type="decimal" />
<element name="EXTD_LIST" type="decimal" />
<element name="EXTD_VALUE" type="decimal"/>
<element name="LINE_NO" type="decimal" />
<element name="TDATE" type="date"/>
<element name="TQUARTER" type="decimal" />
<element name="INVOICEDAT" type="date"/>
<element name="IQUARTER" type="decimal" />
<element name="ORIGNUM" type="decimal" />
<element name="ORIGTYPE" type="string" />
<element name="TYPECALC" type="string"/>
<element name="SEQ" type="int" />
<element name="INC_IN_COU" type="string"/>
<element name="COSTMOD" type="string" />
<element name="GROSSMOD" type="string" />
<element name="CHFLOOR" type="string" />
<element name="GroupCustomerDescription" type="string" />
<element name="SalesAreaDescription" type="string" />
<element name="SalesArea" type="string" />
<element name="SegmentRegionDescription" type="string" />
<element name="SegmentRegion" type="string" />
<element name="ScheduledDespatchDate" type="date"/>
<element name="StatusSid" type="int" />
<element name="ShiptoCustomerNumber" type="decimal" />
<element name="CONT_TYPE" type="string" />
<element name="EST_START" type="date"/>
<element name="EST_COMPLTN" type="date"/>
<element name="ACT_START" type="date"/>
<element name="ACT_COMPLTN" type="date"/>
<element name="Project_Status" type="string" />
</sequence>
</complexType>
</element>
</sequence>
</complexType>
</element>
</sequence>
</complexType>
</element>
</schema>
問題是當我運行任務時,我得到了正確的行數,但是所有值都為空。 我對XML還是很陌生,所以我懷疑它確實很愚蠢,有人可以幫忙嗎?
這可能不是您問題的答案。 我使用反復試驗來only
找出問題的原因。 一種可能的解決方案似乎是您需要使用XSD文件中定義的元素名稱來重建XML文件。
我帶了您的XML文件和XSD文件來創建一個新的SSIS包。 我在數據流任務中使用了XML Source來讀取文件。
執行該程序包時,得到以下結果。 如您在問題中所述,所有值均為NULL。
看完XSD文件后,我覺得您在XSD文件中的元素(如ORDERNUM
和BusinessStream
定義的名稱應在XML文件中具有相應的節點,但它們丟失了。 因此,我將第一個具有節點value
元素更改為ORDERNUM
和BusinessStream
。
重新執行該程序包,這一次正確顯示了值。 請注意,我僅更改了第一行中的值,而未更改第二行。 這就是為什么值仍為NULL的原因。
希望能有所幫助。
以下兩篇文章的第二篇顯示了如何在SSIS中使用XLST文件將XML源文件轉換為可用於您描述的目的的文件。 我在底部提供了兩個XSLT文件內容。
http://sqlserverpedia.com/blog/sql-server-bloggers/loading-xml-using-ssis/
http://blog.hoegaerden.be/2011/04/20/loading-complex-xml-using-ssis/
修復列出的數據樣本:
1)刪除開頭似乎是注釋的空格:“ ... xmldata / 1 / xmldata.xsd ...”至“ xmldata / 1 / xmldata.xsd”
2)將</data></dataset>
到數據的最后。
您可以在此處進行測試(嗯,它似乎在這里不起作用!):
http://www.w3schools.com/xsl/tryxslt.asp?xmlfile=cdcatalog&xsltfile=cdcatalog
或通過打開XML文件將其添加為要在IE中進行測試的XML的第二行:
<?xml-stylesheet type="text/xsl" href="Cognos.xsl"?>
仔細查看xslt清單,並注意'output'元素中的差異。 請注意,我需要在XSLT文件中定義XML文件的“數據集”元素中使用的名稱空間,並為其命名,以便為在“數據集”中定義的節點的引用添加前綴。 假設大小寫敏感在任何地方都很重要,因為它可能確實如此。 在以下位置閱讀XSLT元素:
Cognos.xsl以“管道”(豎線)定界文件列出內容。 由於尾隨定界符,結尾處將有一個空列,您將需要在使用該文件的代碼中忽略該列。
<?xml version="1.0" encoding="utf-8"?>
<xsl:stylesheet version="1.0"
xmlns:xsl="http://www.w3.org/1999/XSL/Transform"
xmlns:cog="http://developer.cognos.com/schemas/xmldata/1/">
<xsl:output method="text" encoding="UTF-8" indent="no"
omit-xml-declaration="yes"
/>
<xsl:template match="/">
<xsl:apply-templates select="cog:dataset/cog:metadata/cog:item">
</xsl:apply-templates>
<xsl:text> </xsl:text>
<xsl:apply-templates select="cog:dataset/cog:data/cog:row">
</xsl:apply-templates>
</xsl:template>
<xsl:template match="cog:dataset/cog:metadata/cog:item">
<xsl:value-of select="@name"/>
<xsl:text>|</xsl:text>
</xsl:template>
<xsl:template match="cog:dataset/cog:data/cog:row">
<xsl:text> </xsl:text>
<xsl:apply-templates select="./cog:value">
</xsl:apply-templates>
</xsl:template>
<xsl:template match="cog:dataset/cog:data/cog:row/cog:value">
<xsl:value-of select="."/>
<xsl:text>|</xsl:text>
</xsl:template>
</xsl:stylesheet>
Cognos.xsl將內容列出為HTML表:
<?xml version="1.0" encoding="utf-8"?>
<xsl:stylesheet version="1.0"
xmlns:xsl="http://www.w3.org/1999/XSL/Transform"
xmlns:cog="http://developer.cognos.com/schemas/xmldata/1/">
<xsl:output method="html" encoding="UTF-8" indent="yes"
/>
<xsl:template match="/">
<html><body>
<table border="1"><tr>
<xsl:apply-templates select="cog:dataset/cog:metadata/cog:item">
</xsl:apply-templates>
</tr>
<xsl:text> </xsl:text>
<xsl:apply-templates select="cog:dataset/cog:data/cog:row">
</xsl:apply-templates>
</table>
</body></html>
</xsl:template>
<xsl:template match="cog:dataset/cog:metadata/cog:item">
<td>
<xsl:value-of select="@name"/>
</td>
</xsl:template>
<xsl:template match="cog:dataset/cog:data/cog:row">
<tr>
<xsl:apply-templates select="./cog:value">
</xsl:apply-templates>
</tr>
</xsl:template>
<xsl:template match="cog:dataset/cog:data/cog:row/cog:value">
<td>
<xsl:choose>
<xsl:when test=". !='' and . !=' '">
<xsl:value-of select="." />
</xsl:when>
<xsl:when test=". =' '">
<xsl:text>space</xsl:text>
</xsl:when>
<xsl:otherwise>
<xsl:text>null</xsl:text>
</xsl:otherwise>
</xsl:choose>
</td>
</xsl:template>
</xsl:stylesheet>
而且,是的,我們都花了將近14個小時來研究這些需求,修復,鏈接和技術的簡潔集合,我們都對此表示歡迎。 也許我將其轉為一篇文章。
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.