查找某一时间段内的文件内容并输出到文件

2013-11-04 04:38:03 356 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

查找word指定内容并输出到csv word中存在非标准字符，如拉丁字母。在上一节讲到的替换word关键内容基础上，这节将找出没被替换的内容，自己在word上手动标记。135条查重内容中，有9条是没被识别的。 #用python我们可以抓取网页，表格，JSON这种半结构化的数据，那么word文档中的内容这种非结构化的数据我们如何抓取呢。 # check_13=re.findall("thetihuan13",file_text) #筛... 阅读详情

现有目录下大量文件，文件格式如下：
[2013-11-4 16:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc
如何用脚本找出每个文件中16:00:00-18:00:00之间的文件内容并输出到新文件？

...全文

ipc$漏洞攻击（实验）我们总在说ipc$漏洞ipc$漏洞,其实,ipc$并不是真正意义上的漏洞,它是为了方便管理员的远程管理而开放的远程网络登陆功能,而且还打开了默认共享,即所有的逻辑盘(c$,d$,e$……利用IPC$,连接者甚至可以与目标主机建立一个空的连接而无需用户名与密码(当然,对方机器必须开了ipc$共享,否则你是连接不上的)，而利用这个空的连接，连接者还可以得到目标主机上的用户列表(不过负责的管理员会禁止导出用户列表的)。5.然后，我们物理连接到靶机上，到了两分钟后，我们可以用命令看到，这个pp45的用户就出现了。阅读详情

南城IT小工

系统维护与使用区 19,615 成员 74,556 内容

+ 关注 + 加入社区

切换为时间正序

ceclinux 2013-11-05

打赏
举报

引用 4 楼 magi1201 的回复:

[quote=引用 3 楼 Cecil_911 的回复:] 我看不出哪里不准确了，漏了什么

hadoop3@linux-240:~> cat time.txt
[2013-11-4 16:00:00]aa
[2013-11-4 20:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc
[2013-11-4 19:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc
hadoop3@linux-240:~> sed -n '/16:00:00/,/18:00:00/p' time.txt
[2013-11-4 16:00:00]aa
[2013-11-4 20:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc

如果数据不规整的话，那截取的值就不准确了[/quote] 这。。不符合科学道理啊，时间都会乱序

南城IT小工 2013-11-05

打赏
举报

请问用awk如何处理呢？不规整数据的处理问题我也发现了，我的一个思路是：如果非要用sed，需要事先对处理的数据排序。

ljc007 2013-11-05

打赏
举报

引用 6 楼 magi1201 的回复:

我想跟着探讨下，如果出现这种格式的数据，该如何处理，仅从技术角度。当然，实际应用中可能很少产生上述格式的数据。

这种情况需要逐行读取然后判断时间，用awk比较方便。另外常见的做法就是先排序再处理。但是遇到非常巨大的文件，处理速度会很慢。

姜小白- 2013-11-05

打赏
举报

引用 5 楼 ljc007 的回复:

在实际工作中，哪个软件会产生这样的日志？

我想跟着探讨下，如果出现这种格式的数据，该如何处理，仅从技术角度。当然，实际应用中可能很少产生上述格式的数据。

ljc007 2013-11-05

打赏
举报

引用 4 楼 magi1201 的回复:

如果数据不规整的话，那截取的值就不准确了

在实际工作中，哪个软件会产生这样的日志？

姜小白- 2013-11-05

打赏
举报

引用 3 楼 Cecil_911 的回复:

我看不出哪里不准确了，漏了什么

hadoop3@linux-240:~> cat time.txt
[2013-11-4 16:00:00]aa
[2013-11-4 20:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc
[2013-11-4 19:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc
hadoop3@linux-240:~> sed -n '/16:00:00/,/18:00:00/p' time.txt
[2013-11-4 16:00:00]aa
[2013-11-4 20:00:00]aa
[2013-11-4 17:00:00]bb
[2013-11-4 18:00:00]cc

如果数据不规整的话，那截取的值就不准确了

linux-c 2013-11-05

打赏
举报

引用 10 楼 ljc007 的回复:

[quote=引用 8 楼 orient0001 的回复:] 请问用awk如何处理呢？不规整数据的处理问题我也发现了，我的一个思路是：如果非要用sed，需要事先对处理的数据排序。

[root]# cat urfile [2013-11-4 16:00:00]aa [2013-11-4 20:00:00]aa [2013-11-4 17:00:00]bb [2013-11-4 18:00:00]cc [2013-11-4 19:00:00]aa [2013-11-4 17:00:00]bb [2013-11-4 18:00:00]cc [root]# awk 'BEGIN{FS=OFS="[][]+"}{if($2>="2013-11-4 16:00:00")if($2<="2013-11-4 18:00:00")print}' urfile [2013-11-4 16:00:00]aa [2013-11-4 17:00:00]bb [2013-11-4 18:00:00]cc [2013-11-4 17:00:00]bb [2013-11-4 18:00:00]cc[/quote]

引用 10 楼 ljc007 的回复:

[quote=引用 8 楼 orient0001 的回复:] 请问用awk如何处理呢？不规整数据的处理问题我也发现了，我的一个思路是：如果非要用sed，需要事先对处理的数据排序。

ljc007 2013-11-05

打赏
举报

引用 8 楼 orient0001 的回复:

请问用awk如何处理呢？不规整数据的处理问题我也发现了，我的一个思路是：如果非要用sed，需要事先对处理的数据排序。

ceclinux 2013-11-04

打赏
举报

引用 2 楼 orient0001 的回复:

这种取法不太准确，不能有效截取时间段内的全部内容

我看不出哪里不准确了，漏了什么

南城IT小工 2013-11-04

打赏
举报

这种取法不太准确，不能有效截取时间段内的全部内容

Carl_CCC 2013-11-04

打赏
举报

sed -n '/16:00:00/,/18:00:00/p' * > newfile.txt

查找某一时间段内的文件内容并输出到文件

相关推荐