不确定为什么条件列变换没有识别要更新的值（text.contains）

Question

我有一个人群记录，其中包含各种人口统计信息（种族，种族，性别等）。

对于null [族裔]中的值（即西班牙裔Y/n），我想为字符串“非西班牙裔”搜索相应的[race]值，因为对于某些记录作为[race]下的合并价值（例如，“白色（非西班牙裔）”）。我想清洁/归一化两个字段（[竞赛]在下游单独的步骤中清洁）。

但是，我不确定为什么我的代码没有成功地识别前两个条件的匹配，因为我知道有很多实例“白色（非西班牙裔）”至少：

cleanData = 
    Table.ReplaceValue(rawData, each [Ethnicity], each
        if [Ethnicity] = null and (
            Text.Contains([Race],"non-Hispanic", Comparer.OrdinalIgnoreCase) or 
            Text.Contains([Race],"not Hispanic", Comparer.OrdinalIgnoreCase)) 
            then "Non-hispanic" else
        if [Ethnicity] = null and 
            Text.Contains([Race], "hispanic", Comparer.OrdinalIgnoreCase) 
            then "Hispanic" else
        [Ethnicity], Replacer.ReplaceText, {"Ethnicity"}
        ),

这两个字段是类型文本，我不会遇到错误 - 只是缺乏预期行为。 [族裔]中的null值不变。

样本输入：

种族	种族
白色	是
亚洲	否
白色（非西班牙裔）	拒绝做出反应
白色（非西班牙裔）	null
white（西班牙	null
裔	） /em>

样本输出：

种族	种族
白色	是
亚洲	否
白色（非西班牙裔）	拒绝做出反应
（非西班牙裔）	no
白色（西班牙裔）	是是是
亚洲人	是 > null

Answer 1

它的替代品

cleanData =  Table.ReplaceValue(rawData,  each [Ethnicity], each
    if [Ethnicity] = null then 
        if (Text.Contains([Race],"non-Hispanic", Comparer.OrdinalIgnoreCase) or  Text.Contains([Race],"not Hispanic", Comparer.OrdinalIgnoreCase)) 
        then "Non-hispanic" else 
        if  Text.Contains([Race], "hispanic", Comparer.OrdinalIgnoreCase)  then "Hispanic"  else [Ethnicity]
    else [Ethnicity]
 ,Replacer.ReplaceValue,{"Ethnicity"}),

。

cleanData =  Table.ReplaceValue(rawData,  each [Ethnicity], each
    if [Ethnicity] = null and
        (Text.Contains([Race],"non-Hispanic", Comparer.OrdinalIgnoreCase) or  Text.Contains([Race],"not Hispanic", Comparer.OrdinalIgnoreCase) )
        then "Non-hispanic" else 
         if [Ethnicity] = null  and Text.Contains([Race], "hispanic", Comparer.OrdinalIgnoreCase)  then "Hispanic"  else [Ethnicity]
 ,Replacer.ReplaceValue,{"Ethnicity"}),

Answer 2

@horseyride您可以抽象它以使用任何大小的列表

    Text.ContainsAny = (source as text, searchStrings as list) as logical =>
        let
            matches = List.Transform( searchStrings, (string) =>
                Text.Contains(source, string, Comparer.OrdinalIgnoreCase) )
        in
            List.AnyTrue(matches),

，然后您可以写

if [Ethnicity] = null and Text.ContainsAny( [Race], {"non-hispanic", "not-hispanic"} ) then "Non-hispanic"
else ...

我是使用table.addcolumn的另一种方法，然后重命名。这听起来比使用替换列（就位）更糟糕。测试后，我使用两种方法获得了相同的最终折叠SQL查询。

let
    Source = Table.FromRows(
        Json.Document( Binary.Decompress( Binary.FromText( "i45WCs/ILElVUNJRikwtVorViVZyLM5MzAMJ+OWD+RAFGnn5eboemcUFiXmZyZogaZfU5JzMvFSFknyFotTigvy8FLzKkSUxJeCWoppRgm5GLAA=", BinaryEncoding.Base64 ), Compression.Deflate ) ),
        let _t = ((type nullable text) meta [Serialized.Text = true]) in type table [Race = _t, Ethnicity = _t]
    ),
    // eliminate whitespace, or control chars
    #"Changed Type"   = Table.TransformColumnTypes( Source, {{"Race", type text}, {"Ethnicity", type nullable text}} ),
    #"Cleaned Text"   = Table.TransformColumns( Source, {{"Ethnicity", Text.Clean, type nullable text}}),
    #"Replaced Value" = Table.ReplaceValue( #"Cleaned Text", "", null, Replacer.ReplaceValue, {"Ethnicity"} ),

    merge_columns = Table.AddColumn(
        #"Changed Type",
        "Ethnicity2",
        (row) =>
            let
                isBlank = row[Ethnicity] = null or row[Ethnicity] = "",
                race = row[Race],
                replacement =
                    if (
                        Text.Contains(race, "non-Hispanic", Comparer.OrdinalIgnoreCase)
                        or Text.Contains(race, "not-Hispanic", Comparer.OrdinalIgnoreCase)
                    ) then
                        "Non-Hispanic"
                    else if Text.Contains(race, "Hispanic", Comparer.OrdinalIgnoreCase) then
                        "Hispanic"
                    else
                        race
            in
                if isBlank then
                    replacement
                else
                    race,
        type text
    ),
    #"ReplaceColumns" = Table.RenameColumns(
        Table.RemoveColumns(merge_columns, {"Ethnicity"}), {{"Ethnicity2", "Ethnicity"}}
    )
in
    #"ReplaceColumns"