机器数据分析平台

  • 机器数据分析平台 > 产品手册 > SPL参考手册 > dedup

    dedup

    最近更新时间:2019-11-07 14:24:40

    dedup 命令用来对数据进行去重处理。

    语法:

    dedup <field1,field2……>

    示例

    比如 “dedup a, b, c ”命令,代表根据a,b,c 三个字段对数据进行去重,如果a,b,c 字段组合值相同的话,则会将多条数据聚合成一条(一般是第一条)返回。

    原始数据:

    user loginIp
    a 127.0.0.1
    a 10.0.0.10
    b 123.98.83
    b 10.8.8.19

    去重命令:

    * | dedup user
    

    返回结果:

    user loginIp
    a 127.0.0.1
    b 123.98.83
    以上内容是否对您有帮助?
  • Icon helper
    Icon free helper
    Close