这是一个创建于 2453 天前的主题,其中的信息可能已经有所发展或是发生改变。
一个大文件
我在 client 通过 requests 库来进行传输
with open(path_file, "rb") as f:
res = requests.post(url, data=f, timeout=600)
我在 server 端,从 tornado_request 中该如何接收这个文件流并保存下来呢。
谢谢各位的不吝赐教。
第 1 条附言 · 2019 年 4 月 25 日
没有采用标准上传方式是因为这个文件过大了,内存扛不住,就用了 requests 的流式传输。
但是有个问题,我这样流式传输,我的 nginx upload 并没有反应。如果采用 form-data 的方式,nginx 是 OK 的。
所以只能自己在 server 端去拿到文件流保存下来。
8 条回复 • 2019年04月25日 18:09:08 +08:00
sujin190
1
sujin190 2019 年 4 月 25 日
RequestHandler 上有 request 属性,request 这个有 body 原始字节属性,和 files 属性吧,files 就是已经被解析成 file 对象,body 则必须你自己解析了
再说调试下就知道了啊,python 用 pycharm 啥的还是调试很方便的
zhze93
2
zhze93 2019 年 4 月 25 日
@
sujin190 调试过了。request body 接收到后是字符串,这里该怎么解析。
之前文件不大,传输的都是 form-data 格式,服务端我就直接二进制读写就行了。
momo1999
3
momo1999 2019 年 4 月 25 日
self.request.files
kidlj
4
kidlj 2019 年 4 月 25 日
几年前学习 Python web frameworks,flask 和 Django 都不太喜欢,看到 Tornado 的 api 一下子就喜欢了。可是当时不太懂 coroutine 和异步编程,觉得难以入门。后来学习了 Node.js 和 Express,也是很喜欢,现在回过头来看,Tornado 就相当于 Python 的 Express 吧。
zhze93
5
zhze93 2019 年 4 月 25 日
sujin190
7
sujin190 2019 年 4 月 25 日
@
zhze93 #2 正常 request.files 肯定是解析好的,
requests.post 上传文件不是这么写的吧,你这是把文件内容读出来整个放到 body 里了,所以服务端 request.body 就是文件内容吧,直接写入文件就行了
wupeaking
8
wupeaking 2019 年 4 月 25 日
这个问题很多年前我也遇到过,request 一次是把 http 请求的数据全部读取完后返回给你的。 如果你是请求大文件这种一下就把内存干光了。 后来我是重写了 tornado 的 httpclient,每次读取一部分数据然后异步回调。 现在我转到 Go 了, 具体实现记不清了。 你要是需要我翻一翻以前的代码贴给你。