Python: POSTing二进制数据导致UnicodeDecodeError或Ascii解码错误

Question

当使用urllib2、urllib3或httplib2对二进制数据执行POSTing时，我收到错误UnicodeDecodeError: 'utf8' codec can't decode或UnicodeDecodeError: 'ascii' codec can't decode...，这取决于Python脚本是处于UniCode模式还是ASCII模式。

我首先认为是库的问题，所以我尝试了不同的库，但都没有解决问题。

堆栈跟踪的结尾：

File "/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/httplib.py", line 895, in _send_output
    msg += message_body
File "/Library/Frameworks/Python.framework/Versions/2.7/lib/python2.7/encodings/utf_8.py", line 16, in decode
    return codecs.utf_8_decode(input, errors, True)
UnicodeDecodeError: 'utf8' codec can't decode byte 0xc4 in position 627: invalid continuation byte

Answer 1

正如Python评论中提到的那样，问题是bug 11898字符串在某个时候被标记为Unicode或Ascii字符串。

然后，当httplib库为整个HTTP/S消息创建字节字符串时，

msg += message_body

执行时，Python会尝试将message_body (包含二进制数据)转换为Ascii或Unicode。在这两种情况下，转换都会失败。

Solution在对url进行任何修改时使用str()。在我的例子中：

url = baseUrl + "/envelopes"      # throws UnicodeDecodeError
url = str(baseUrl + "/envelopes") # works great

如果这还不够，请检查您的其他字符串，以确保它们没有被标记为Unicode或Ascii。