如何使用内置工具将 excel 中的电力查询数据导出到 csv 中？

Question

我正在尝试从 excel 中的 ETL 操作中导出大量数据以供以后查询。

为此，我需要 csv 中的数据。

但是，excel 不允许表中存在超过 100 万行。

我该如何解决这个限制？

Answer 1

我确定这可以通过将数据旋转到单元格中来实现。 由于每个单元格可以容纳 32767 个字符，因此我可以将表格中的几行压缩到每个单元格中。 我将选择一个不是逗号的分隔符，以便稍后在针对此 csv 的查询期间将列取消透视到行。

定制的 function 为：

// function to compress data for export to csv in excel
let
    Source = (delimiter as text, maxChars as number, input as table, colname as text) => let
        Source = input,
        #"Changed Type" = Table.TransformColumnTypes(Source,{{colname, type text}}),
        #"Added Index" = Table.AddIndexColumn(#"Changed Type", "Index", 0, 1, Int64.Type),
        #"Renamed Columns" = Table.RenameColumns(#"Added Index",{{colname, "main"}}),
        avg = Number.RoundUp((List.Average(List.Transform(#"Renamed Columns"[main], each Text.Length(_)))),0),
        compression = Number.RoundDown(maxChars/(avg +1),0),
        #"Divided Column" = Table.TransformColumns(#"Renamed Columns", {{"Index", each Number.RoundDown(_ / compression,0)}}),
        #"Grouped Rows" = Table.Group(#"Divided Column", {"Index"}, {{
            "comp", 
            each Text.Combine(List.Transform(
                    Table.ToList(
                        Table.SelectColumns(
                                _, {"main"})
                                ), each Text.Combine(
                                    {_, delimiter}
                                                    ) ))
                                                    }}
                                ),
        #"Removed Columns" = Table.RemoveColumns(#"Grouped Rows",{"Index"})
    in
        #"Removed Columns"
in
    Source

Answer 2

使用 DAX Studio 导出到 csv。 这是一个免费的工具。