字符串拼接

创建自主数据集,汇总时候有个字符串拼接,这个相同的数据是会去重的是吗?怎么做到直接拼接不去重

FineBI yzm288102 发布于 2022-9-22 14:21
1min目标场景问卷 立即参与
回答问题
悬赏:4 F币 + 添加悬赏
提示:增加悬赏、完善问题、追问等操作,可使您的问题被置顶,并向所有关注者发送通知
共3回答
最佳回答
0
zsh331Lv8专家互助
发布于2022-9-22 18:03

系统默认走的spark sql是concat_ws('/', collect_set(字段)) as KK  --去重逻辑

如果需要保留不去重:

切换成 concat_ws('/', collect_list(字段)) as KK 在数据集SQL中去处理;

————————————

最佳回答
0
yzm339714Lv6中级互助
发布于2022-9-22 14:24(编辑于 2022-9-22 14:28)

~~~

最佳回答
0
snrtuemcLv8专家互助
发布于2022-9-22 14:25

如果汇总了,它自动会去重,软件规定了,没办法不去重。。。。

  • 4关注人数
  • 712浏览人数
  • 最后回答于:2022-9-22 18:03
    请选择关闭问题的原因
    确定 取消
    返回顶部