用 Django 创建的第一个网站+scrapy 写的爬虫

2015-09-22 10:29:45 +08:00
 wsb200514
花了将近 2 周的时间:(1)用 django 搭了网站(2)用 scrapy 写了几十个爬虫。
目前看来可以正常使用了。
起初,是因为自己有每天浏览 36Kr 等科技博客、还有些技术帖子的习惯,之前一直用推酷,里面很全面,但还是想根据自己的喜好定制一个。所以如果正好也是你需要的话,倍感欣慰。
网站叫三四秒: www.34miao.com
谢谢。
12630 次点击
所在节点    Django
67 条回复
wsb200514
2015-09-23 07:14:53 +08:00
@88250 哈哈,这个……爬得时候温柔点就行啊,因为几十块钱的服务器经不住啊,你懂得……哈哈
wsb200514
2015-09-23 07:23:13 +08:00
@miaozaiye 多谢,已注册~~
lijiacong0702
2015-09-23 09:13:03 +08:00
厉害,赞一个
lizhiqing1996
2015-09-23 09:41:19 +08:00
@wsb200514 Win8.1 + chrome
wsb200514
2015-09-23 11:02:11 +08:00
@lizhiqing1996 请问一下具体是什么问题啊?方便的话可以截图给我吗?我邮箱是: weisubao1987@gmail.com ,万分感谢~~~
wsb200514
2015-09-23 12:33:20 +08:00
@lizhiqing1996 我在 win7+chrome 45.0 和 win10+chrome 45.0 上试了没有问题。估计问题出在 win8 上。可是我木有安装 win8 的机子啊,难道虚拟机走起么~~感叹 web 前端的同学不容易啊,现在不仅要兼容浏览器版本,还要兼容系统版本了啊,逆天了喂。我回头改改,应该还是 chrome 特殊默认字体的原因,想个替代方案。多谢了啊
wsb200514
2015-09-23 13:25:29 +08:00
@lizhiqing1996 刚对 development 那边也做了点修改,您再清除一下缓存后再试一下看看。有可能不是 win8 的问题,不知道是不是缓存的问题。
lizhiqing1996
2015-09-23 16:30:51 +08:00
@wsb200514 Development 好了,但是 Design 还是不行,我试着用 F12 把图片的宽度改成 198px ,结果就正常了,
wsb200514
2015-09-23 16:35:35 +08:00
@lizhiqing1996 OK 。我再改改哈
gulullu
2015-09-23 17:20:39 +08:00
logo 不是高清图,差评
codercai
2015-09-23 18:34:05 +08:00
想用 django 搭个博客,但是没有前端基础,估计比较吃力。楼主有什么建议没有呀
raikecody
2015-09-23 18:41:28 +08:00
期待开源中
wsb200514
2015-09-23 20:47:49 +08:00
@codercai 前端学深了比较难,但是入门还是很快的, html+css 学一个星期就可以上手做简单的项目, js 和 jquery 估计半个月就可以做简单的效果了。没有你想的那么难。都是先入了门再说,然后就是不断做项目实践的时候一边被虐一边成长。加油
wsb200514
2015-09-23 20:49:18 +08:00
@gulullu 我自己连半个业余美工都算不上,所以效果你懂的,请见谅啊,哈哈
wsb200514
2015-09-24 12:35:33 +08:00
@lizhiqing1996 design 页面做了修改,放弃上下居中的排版,采用固定高度,自动缩放宽度,多余宽度自动隐藏,宽度不够图片就左右居中。您再清除缓存后试一下。多谢耐心地指教~~~
tim520
2015-09-24 13:28:54 +08:00
很牛逼啊,请问用 scrapy 爬虫新浪、网易的新闻容易吗?
robotdiy
2015-09-24 15:07:01 +08:00
这个设计,很喜欢。
lizhiqing1996
2015-09-24 20:54:40 +08:00
@wsb200514 已经完美显示。指教算不上,我还是个菜鸟
wsb200514
2015-09-24 21:10:27 +08:00
@tim520 一般来说都是可以的,只是控制好频率,不要给对方服务器增加压力即可。方便自己也给她们带流量,大家和谐共存嘛,哈哈
wsb200514
2015-09-24 21:12:33 +08:00
@robotdiy 谢谢,因为不懂设计,所以一切从简变成这样了,只要能方便阅读就行~~~嘿嘿

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/222686

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX