关于数据处理优化的问题,太难了
有日常处理数据的任务,从ip1的服务器上镜像数据到ip2上处理。每五分钟镜像判断一次有没有新数据包,有的话就解压处理。但是现在的问题是5分钟镜像一次判断新数据来得及,但是由于数据包多,光解压文件就得花20几分钟,来不及处理啊。需求是:有什么办法可以在10分钟内镜像新数据并解压完成。谢谢!
作者: Roby83 发布时间: 03-23
awk 实现 grep -A3 -B3 的效果,文本10G行
比如grep-A3-B3 B text.txt我自己的解法如下,但想集思广益下,应该有其他的思路,并且,我这个方法,如果文本行数在10G级别的话,那得耗费多少内存呀?{ra[NR]=$0}/B/{for(i=NR-3;i<=NR+3;i++){if(i>0)ln_pflag[i]=1}}END{for(j=1;
作者: unixzhong 发布时间: 03-23
linux 中的 - 代表什么意思
看到有很多倒入key的需要这个连接符"-"当然还有选项前面也要加这个 , 在命令行输入cd -返回上一次的目录,这个"-" 到底是什么含意阿?
作者: 南极雨 发布时间: 03-23
awk匹配,下面的两种方式,有什么区别?
一个用引号,一个用斜线:>echo"green"|awk'{if($0~"^green$")print$0}'green>echo"green"|awk'{if($0~/^green$/)print$0}'green
作者: ljt2k 发布时间: 03-23
tail 输出问题,请教下,谢谢
每日上午和下午tail-200f 程序日志日志文件比较大,每天上午和下午会自动生成2个文件,文件格式,如ggg.log.`date'+%Y%m%d'`+随机时间。其中每天上下午自动生成log的时间不同,所以日志后六位每天是不同的。如:上午ggg.log.20110323013224 下午ggg.log.2011
作者: faith900 发布时间: 03-23
求助:构建安全Shell环境
打算给学生分配一些账号,用于远程登录shell,做bash编程练习。需要限制用户的权限,有些数据时不希望他们访问的,也不能随意重启和关机。两个思路,chroot环境或虚拟机。但是都需要一个比较稳妥的权限设置,ulimitquote之类。这方面没什么经验,求教CU各位高人,应该怎么设置比较完整,最好有详细脚本。
作者: zhblue 发布时间: 03-22
寻找一个查看与一个软件相关联的所有文件和目录的命令
假设要在很多台机子上装同一个软件,但这个软件很大,没有deb包,只能用源代码编译安装,但就是编译安装的时间很长。所以想到一种方法就是先在一台机子(设为A)上完整装好,然后在A机上把安装这个软件新增的文件和目录全部打包成一个文件,这样安装其它机子的时候,只需要解压就行了。-----前提:所有的机子开始都是相同的。关键是现在如何知道装这个软件时,到底新曾了多少目录和文件。有没有办法?locate
作者: linycobie 发布时间: 03-22
shell里怎么插sql语句?
我想用shell写个用很简单的脚本:链接到数据库:conn base/zdsoft然后查询:select*fromtable;如果有内容,则输出pass。如果空,则输出nopass。
作者: 天蝎之寂 发布时间: 03-22