数据巧处理：重复数据的合并处理

要处理一批数据，形式为：
lat,lon,num
每个文件有一个timestamp，文件数量巨大，开始我感觉lat、lat应该唯一，但后来检查数据后发现，这批数据存在大量重复的点（可能之前高精度数据是唯一的，但精度降低后导致有重复数据出现），因此需要专门处理。
开始是想在bash里直接处理，但点位相同的数据，其后的num感觉应该sum后替换，因此还没有想到较好的方法。
后来一想数据不是要入库么，入库后先放松唯一性检查，然后通过group操作，可以简单获取到对应的结果。
SQL：
create table sum_point as
select ts,lat,lon,sum(num) from point group by ts,lat,lon