Python socket.send编码

Question

似乎我在需要通过Bing翻译的垃圾邮件中遇到了编码本身的问题。

def _unicode_urlencode(params):
    if isinstance(params, dict):
        params = params.items()
    return urllib.urlencode([(k, isinstance(v, unicode) and v.encode('utf-8') or v) for k, v in params])

def _run_query(args):
        data = _unicode_urlencode(args)
        sock = urllib.urlopen(api_url + '?' + data)
        result = sock.read()
        if result.startswith(codecs.BOM_UTF8):
                result = result.lstrip(codecs.BOM_UTF8).decode('utf-8')
        elif result.startswith(codecs.BOM_UTF16_LE):
                result = result.lstrip(codecs.BOM_UTF16_LE).decode('utf-16-le')
        elif result.startswith(codecs.BOM_UTF16_BE):
                result = result.lstrip(codecs.BOM_UTF16_BE).decode('utf-16-be')
        return json.loads(result)

def set_app_id(new_app_id):
        global app_id
        app_id = new_app_id

def translate(text, source, target, html=False):
        """
        action=opensearch
        """
        if not app_id:
                raise ValueError("AppId needs to be set by set_app_id")
        query_args = {
                'appId': app_id,
                'text': text,
                'from': source,
                'to': target,
                'contentType': 'text/plain' if not html else 'text/html',
                'category': 'general'
        }
        return _run_query(query_args)
...
text = translate(sys.argv[2], 'en', 'tr')
HOST = '127.0.0.1'
PORT = 894
s = socket.socket()
s.setsockopt(socket.IPPROTO_TCP, socket.TCP_NODELAY, 1)
s.connect((HOST, PORT))
s.send("Bing translation: " + text.encode('utf8') + "\r");
s.close()

如您所见，如果翻译后的文本包含一些土耳其字符，则脚本无法将文本发送到套接字。

您有关于如何摆脱这一点的想法吗？

问候。

Answer 1

您的问题与套接字完全无关。 text已经是一个字节串，您正在尝试对其进行编码。 发生的情况是，Python尝试通过安全的ASCII编码将字节字符串转换为unicode，以便能够将其编码为UTF-8，然后失败，因为字节字符串包含非ASCII字符。

您应该解决translate返回一个unicode对象，通过使用JSON变量返回Unicode对象。

另外，如果已经编码为UTF-8的文本，则可以简单地使用

s.send("Bing translation: " + text + "\r")

Answer 2

# -*- coding:utf-8 -*-

 text = u"text in you language"
 s.send(u"Bing translation: " + text.encode('utf8') + u"\r");

这必须工作。 text必须使用utf-8编码进行拼写。