Блог

Я написал простой веб-сервис Flask на Python, который ожидает HTTP POST-запросы со строкой в качестве данных.

 @app.route('/hello', methods=['POST'])
def hello():

json_response = {}
data = request.get_data(as_text=True)

json_response['data'] = data
return json_response
  

Когда я пытаюсь вызвать его с помощью cURL, используя строку ASCII, он работает нормально:

 curl 127.0.0.1:5000/hello -X POST -H "Content-Type: text/plain" -d "hello world"
{
  "data": "hello world"
}
  

Но когда я пытаюсь вызвать его с помощью строки, содержащей символ UTF-8, символ UTF-8 не читается должным образом и вместо этого заменяется символом замены (как decode('utf-8', 'replace') было бы):

 curl 127.0.0.1:5000/hello -X POST -H "Content-Type: text/plain" -d "hello €"
{
  "data": "hello ufffd"
}
  

Я думал, что весь смысл get_data(as_text=True) в том, чтобы прочитать данные в виде строки Unicode? Я что-то здесь упускаю?

Я не могу воспроизвести это с помощью Flask 1.1.2 на macOS с использованием iTerm:

 from flask import *

app = Flask(__name__)

@app.route('/hello', methods=['POST'])
def hello():
    data = request.get_data(as_text=True)
    return {'data': data}

if __name__ == '__main__':
    app.run(debug=True)
  

 ~ $ curl 127.0.0.1:5000/hello -X POST -H "Content-Type: text/plain" -d "hello world"
{
  "data": "hello world"
}
~ $ curl 127.0.0.1:5000/hello -X POST -H "Content-Type: text/plain" -d "hello world€"
{
  "data": "hello worldu20ac"
}
  

Я склонен полагать, что ваш терминал на самом деле вообще не кодирует это € как UTF-8.

Для дальнейшего доказательства (и во избежание проблем с терминалом) мы можем создать полезную нагрузку, которая сертифицирована в формате utf-8, и опубликовать ее:

 ~ $ python3
>>> open("data.txt", "w", encoding="utf-8").write("kräftskiva")
10
~ $ curl 127.0.0.1:5000/hello -X POST -H "Content-Type: text/plain" -d @data.txt
{
  "data": "kru00e4ftskiva"
}
~ $