OC

Knowledge OS
登录 注册
全部话题 移民 创业 iOS Mac Objective-C Swift Android 招聘 求职

flask图片小站-大胆晒

sanhao
sanhao 发布于 2014年03月21日 | 更新于 2015年09月21日
zzz6519003 等0人欣赏。

title: '大胆晒'

请大家关注我的新帖,欢迎加入靠谱k12创业公司

btw 新东方的pp妹子真心多,可以各种搭也,肯定有一款适合你,来这边工作,妹子都会有的。

都说豆瓣妹纸好,谁约谁知道。。。

http://dadanshai.com

经常逛豆瓣,请不要害羞等几个小组亮瞎了我的双眼,不能直视,三观全毁。在内心里默默念道以后再也不上这些小组了。..., 可意识坚定敌不过菇凉白花花的大腿。然后每天就翻这些帖子,可翻这些帖子太花时间了。我只喜欢看菇凉不喜欢看评论神马的,然后就动手把小组里的图片抓下来然后以瀑布流的形式展示。独乐乐,不如众乐乐,但不要叫我雷锋...

这些菇凉晒的尺度为什么这么大啦?我想原因大概如下:

  1. 豆瓣是一个陌生人社区,小组里的人基本上在现实社会中没有交集,所以基本上没有心理负担。

  2. 这些菇凉想迅速的让他人了解,认可。菇凉常常会说如果评论超过500楼,会上高清、正面的大图,喜欢的数目、评论的数目、yp豆油的数目她们都很在意的,这些数字反应了他人对她外表的认可。

  3. 还有一部分是偶尔空虚寂寞冷发图的。

下面说说大胆晒的技术实现细节。

  1. 抓取用scrapy,每一个小时抓取一次,然后把结果保存为json文件。豆瓣对访问次数有限制,我用了http://www.samair.ru/proxy-by-country/China-01.htm上的代理,获取这些代理以后需要验证是否是匿名代理,并且验证访问豆瓣的速度,目前滤掉了连接和读取时间超过3s的代理。

  2. 定时脚本然后把数据录入到数据库中,把图片存放到beansdb中。

  3. 网站用了我最喜欢的flask,django太笨重了有木有,除了可以参考flask的官方文档外还可以参考http://blog.miguelgrinberg.com/post/the-flask-mega-tutorial-part-i-hello-world, 前端用了bootstrap,masonry。

  4. 部署采用nginx+gunicorn, gunicorn作为python-cgi的容器,可以参考http://www.onurguzel.com/how-to-run-flask-applications-with-nginx-using-gunicorn/, 顺便吐槽下开始准备用uwsgi,在网上找了半天资料都没有搞定然后转投gunicorn了..

  5. 后台的人工审核,定时会把漏点或低质的图片删掉。

网址是http://dadanshai.com

我的豆瓣是http://www.douban.com/people/yytv5/, 羞涩了,掩面。。。

共68条回复
楼长 ·
adad184 回复于 2014年03月21日

双手打字以示清白

2楼 ·
tinyfool 回复于 2014年03月21日

看完了一部分以后,心情一下子就复杂了

3楼 ·
Leland 回复于 2014年03月21日

"定时会把漏点或低质的图片删掉"。后者能理解,前者为什么?T.T

4楼 ·
txsniper 回复于 2014年03月21日

我到底是看了还是不看了,下午还要工作啊

5楼 ·
prepostrous 回复于 2014年03月21日

尼玛啊,下午还有很多活儿等着我去做啊。。。。怎么可以酱紫!

6楼 ·
尼克徐 回复于 2014年03月21日

4楼 @txsniper

5楼 @prepostrous

论程序员午休时都在干什么

7楼 ·
cnsoft 回复于 2014年03月21日

python 支持啊

8楼 ·
terryso 回复于 2014年03月21日

楼主,开放几个API,让我做iOS APP玩玩。。。

10楼 ·
sanhao 回复于 2014年03月21日

3楼 @Leland 太没节操了不太好吧。。

本帖有68个回复,因为您没有注册或者登录本站,所以只能看到本帖的10条回复。如果想看到全部回复,请注册或者登录本站。
登录 或者 注册
[顶 楼]
|
|
[底 楼]
|
|
[首 页]

AltStyle によって変換されたページ (->オリジナル) /