利用深度学习将原型图转换为界面代码

[janxin]

在满足足够训练模型之后是否可以替代程序员实现界面的编程效果呢？

起码让程序代替人工实现编码功能已经不再遥远了吧。

从演示视频中可以看到支持 iOS storyboard 和 Web Bootstrap。

Transforming a graphical user interface screenshot created by a designer into computer code is a typical task conducted by a developer in order to build customized software, websites and mobile applications. In this paper, we show that Deep Learning techniques can be leveraged to automatically generate code given a graphical user interface screenshot as input. Our model is able to generate code targeting three different platforms (i.e. iOS, Android and web-based technologies) from a single input image with over 77% of accuracy.

视频： https://youtu.be/pqKeXkhFA3I

项目相关信息： https://github.com/tonybeltramelli/pix2code

[Morriaty]

扫了眼论文，网络结构倒是蛮复杂的，大致相当于 XML 的生成模型，不过这离 AI 替人编程还差的远吧.....

人类的编程过程可是 输入逻辑 输出代码，这应该是 NLP，不是 CV 啊。

[bumz]

从原理上真没什么稀奇的

至于说什么离自动编程又近了一步——别做梦了

自动编程 NLP 也是没用的，NLP 顶多帮人做一些苦力

视频中 CV 的应用也是一样。

[Yinz]

@bumz 把别人的成果踩得一文不值，不好吧

[reus]

别做梦了。

[lizon]

先让深度学习学会怎么引导产品（策划）把自己的需求搞清楚再考虑“让程序代替人工实现编码功能”

[wsy2220]

这个不用深度学习也能做到吧

[yidinghe]

@wsy2220 不用深度学习，人类也能下围棋

[bumz]

@Yinz #3 我可没说它一文不值

帮人做一些苦力，这就是它的价值所在呀

做梦是好的，但是不切实际的梦，恐怕只会把无数努力白白浪费