Python中动态数据集的字符串计数

Question

我的问题与这里的其他人非常相似，但是我没有找到我想要的确切答案，因此我希望Python的资深用户能够进一步帮助我。

我正在为自己的工作学习脚本方法，但是它们不会将我送往培训中心学习，因此我的首席技术官说我应该学习如何从摘要的Wireshark收集报告中创建日志文件。 我在Bash方面很幸运，但是他希望我能熟练使用Python-在脚本/编程方面没有任何帮助或背景知识，这是一项艰巨的任务。 我试图将Wireshark报告中的grep实质上复制到一个新文件中，从而给出DNS流量的发生次数和列表。 唯一的事情是为了有效，它必须能够在每次使用时使用新的数据集进行工作，否则这将是毫无意义的练习。

>> f1 = open('/home/user/file','r')
>> for line in f1
** if "DNS" in line:
**** print line

两个问题：
1）如何计算每个DNS发生次数？
2）我将如何管道/打印到新的txt文件？

Answer 1

您可以简单地初始化一个新变量来计算您的商品

counter = 0

if 'DNS' in line:
    counter += 1

print counter

WRT保存数据，您可以使用python进行处理，也可以仅打印出数据并将其输出到文件中

counter = 0
data = []

if 'DNS' in line:
    counter += 1
    data.append(line)

to_s = "\n".join(data)
f = open('out.txt', 'w')
f.write(to_s)
f.close()

Answer 2

但是，对于文件处理，这可能会更高级一些，我真的很喜欢做一些生成器流水线！

# this is a generator (an iterable) which only outputs a 
# line containing "DNS" if it was requested in an iteration
# furthermore, the way i use a generator here is called "list comprehension"
dns_lines = ( line for line in open('/home/user/file','r') if "DNS" in line )

# the with-statement uses python's magic-methods to take care of 
# opening and closing the file
with open("output", 'w') as f:
    # enumerate works on generators
    # it enumerates each item that is iterated over
    # a tuple is returned (count, line)
    for count_line in enumerate(dns_lines):
        f.write("%d - %s" % (count_line))

David Beazley的更多有关生成器和文件处理的信息

我以为，您想进一步了解python的功能。 因此，我的长篇评论。 :)

//编辑：有关此处将要发生的事情的更多解释：

• 第一行将只生成一个生成器对象。
• 文件读取将在第二个for循环中开始运行。
• 一旦开始此迭代，将读取文件，直到找到包含“ DNS”的行。
• 将创建一个元组（计数，行）并将其移交给此迭代。
• 使用格式字符串将元组写入文件中！
• 下一次迭代将发生并请求下一行，这将再次开始文件读取。

我希望这有帮助！ 生成器阻止将整个列表加载到内存中，并且它们允许进行许多巧妙的操作和流水线处理。 但是，除了本文中您可以提到的之外，还有很多其他功能！