如何使用Python中的urllib2创建新目录并保存文件？

Question

我正在尝试创建一个python脚本来检查主机是否还活着，如果是，请将该网站下载到一个结果/目录中。一旦我学习了如何做到这一点，我将研究如何蜘蛛和启动其他子进程(例如，在检查完成后启动nikto/skipfish，并加载保存的文件)。

#! /usr/bin/python

import os
import sys
import urllib
import urllib2
import subprocess

# Where the magic happens

str1 = raw_input("Enter your target: ")
print "Target = ", str1
print "commencing testing on", str1

# Let's set the user-agent headers
http_headers = {"User-Agent":"Mozilla/5.0"}

request = urllib2.Request(str1)
response = urllib2.urlopen(request)
payload = response.read()

dir_path = os.path.join(self.results)
os.makedirs(dir_path)
**with open(os.join.path(dir_path, 'index.html', 'wb') as file:
        file.write(payload)
print str1, "index written to file"**

# Send an email to notify us when complete
var = "world"
pipe = subprocess.Popen(["./email.sh", var], stdout=subprocess.PIPE)
result = pipe.stdout.read()
print result

我收到以下错误消息：

File "./webtest.py", line 43
    with open(os.join.path(dir_path, 'index.html', 'wb') as file:
                                                          ^
SyntaxError: invalid syntax

在结束括号后出错(来自菲尔的回答)：

    Traceback (most recent call last):
      File "./webtest.py", line 41, in <module>
        dir_path = os.path.join(self.results)
NameError: name 'self' is not defined

Answer 1

你漏掉了一个括号：

with open(os.join.path(dir_path, 'index.html', 'wb')) as file:

编辑

这一行与您想要的目录有关。它会产生错误，因为您不在类中(因此"self“不存在)。最好的行动方针是用公正的“结果”取代它，并具体说明结果在哪里。例如：

results = "/resultsdir/"
dir_path = os.path.join(results)