学 Python 不久，尝试写了个 instagram 爬虫，想问问大家的建议？

[waibunleung]

学 python 不久，尝试参照别的库写了个 instagram 爬虫，想问问大家的建议？

link： https://github.com/luengwaiban/instagram-python-scraper

按照自己感觉写的，望各位 python 大虾能指点一下，教练，我想变强~

[waibunleung]

little cute one waiting for you masters~

[dt2vba]

厉害，感觉方法的命名很不错，简洁、规范

[vkhsyj]

写的不错，代码规范也挺好的，说实话不像新手写的

[Northxw]

老油条~

[waibunleung]

@vkhsyj 之前有写过一下 php，不过也不是很厉害，算是有一点编程基础，谢谢您的肯定

[waibunleung]

还是恳请大家提出一些改进的建议，我现在心里没什么底的，因为我之前没接触过 python 开发，也不知道这样写是否是好的方式，请大家不要吝啬批评和建议呀~

[waibunleung]

up 一下期待更多大佬进来指点~

[claysec]

都能直接写包了😂😂😂

[claysec]

能拜师吗（滑稽）

[waibunleung]

@claysec 噗...别啊大哥，我认真的，我在各位大佬面前不敢抬头啊~

[tikazyq]

可以用爬虫平台 Crawlab 来管理你的爬虫，https://github.com/tikazyq/crawlab

[waibunleung]

@tikazyq ok，谢谢你的推荐。另外关于我项目上的建议吗？

[tikazyq]

单个网站来说不错，可以考虑一下用同样的框架扩展到其他社交平台，这样就强大得多了

[waibunleung]

@tikazyq 谢谢你的建议，我会认真考虑一下的，十分感谢~！

[fenghuang]

楼主您好，能介绍一下整个开发流程吗？我现在写爬虫只写了一个 py 文件，感觉不成体系

[nondanee]

看了下 usage 感觉不像爬虫像 SDK 啊，要不你改个名吧😂

[waibunleung]

@nondanee 那我改成什么比较好？或者你印象中爬虫是怎么样的呢?

[waibunleung]

@fenghuang 首先要有大概的整体逻辑的设计，然后就是模块适当分离，然后公用的部分抽取一下，最后组合起来，大概是这样吧，如果觉得不清晰我们可以再交流。其实我在项目里面放了一个 design.md ，你可以看看~

[BlackL]

楼主你好，请问你的 InitializerModel 类中_is_auto_constructed 这个属性是起什么作用呢，因为整个类初始化的时候这个属性一直为 False，我也没在其他子类中见到过更改这个属性的，所以想问下这个属性的作用

[Takamine]

厉害，从分层到代码再到注释，都很漂亮阿。（｡ò ∀ ó｡）

个人感觉硬是要“鸡蛋里面挑骨头”的话（别打我 233333 ），那我感觉可能不够 pythonic。

可能我是想要看到 @property （干掉 Java 一般的 get，set ），
一些内容返回可以跟 scrapy 返回到 middleware 层一样试试 yield，
提到爬虫，那就什么 async/wait，线程池阿都换上去，
异常有了，日志也不能缺，用装饰器加上些功能。


各位别打我，我对楼主也是服气，楼主带我飞。_(:з」∠)_