hive 在insert 之后生成了小文件，无法merge

[wscxyok]

场景：
对每天的业务数据进行增量归档，即对hive 现有的执行 insert into table 操作，hive 每次insert 不会将文件append 到之前的文件中，而是新生成了一个问题，例如：
插入之前文件：000000_0
插入之后文件：000000_0
000000_0_copy_1
多次插入会更多。
官方提供了关于如何merge 这些小文件的配置如下：

 <property>
      <name>hive.merge.mapfiles</name>
    <value>true</value>
  </property>
  <property>
    <name>hive.merge.mapredfiles</name>
    <value>true</value>
  </property>
    <property>
    <name>hive.merge.smallfiles.avgsize</name>
    <value>134217728</value>
  </property>
  <property>

但依然没有起到作用，文件个数还是在继续累加
求指导是否还有其他的配置？

[嘿儿呀]

解决了么？同求

[Tomas_Rosicky]

建一个PK表保存每天新数据的PK，每次insert前比较，PK存在的删除旧数据，insert新数据