标签： bash
-
split：分割文本文件
在数据处理时有时需要将一个大的数据集分为几个部分，交给不同机器或不同账号进行处理，之前我都是用sed或vi进行…
-
cron脚本中date命令问题
在shell中可以正常执行的命令，转移到cron中让其定时运行发现存在问题，即有错误提示，导致命令不执行。 d…
-
bash tips: kill a background bash job
执行了一个shell脚本，突然发现脚本里的代码有错误，想要终止其运行，这是要用ps & kill 来执…
-
bash tips：巧用xargs来组合不同命令
在处理数据时，使用python编写了一个小程序，可将多个同类型但文件头次序有可能不同的csv文件进行合并，其使…
-
用sort对csv内容进行排序
bash下可以用sort对文本进行排序。若需要对csv（有header）进行排序，则可以： sort -t, …
-
shell下定时监测程序的死锁
这几天在处理微博爬虫。由于各种原因，爬虫经常为会出现网络错误断开连接，有时莫名其妙的程序锁死（程序在运行，但其…
-
数据巧处理：重复数据的合并处理
要处理一批数据，形式为： lat,lon,num 每个文件有一个timestamp，文件数量巨大，开始我感觉l…
-
linux shell下处理web log
现在要将服务器的web log经过分析后将对应的分析结果保存到数据库里，因此需要在服务器后台自动运行，采用sh…
-
linux shell的代码执行问题
之前通过incron触发执行的一个wsn文件生成代码，据用户反馈，有很多情况下文件并未生成，因此思考是不是之前…
-
批量重命名gzip包内文件
应wu要求，转换一个gz文件里的文件名称为gz文件名，而且gz包只有一个文件，其实就是解压缩，然后再压缩。 f…
-
用shell脚本导入landuse数据到postgis
全国的土地利用数据，80年代末,1995和2000年3期数据，ARCINFO COVERAGE格式，打算直接转…
-
bash中&&和||
一直没有搞清楚在bash中这两个符号的意义。最近在学习BASH编程一书才有所了解。 使用& …