现在大模型思考能力还是为零,我让 Claude 帮我分析内存泄漏原因,它对 10GB 的 byte[]占用只提一句,揪着一个 60MB 的 List 输出了满满一页。那些说 AI 编程有用的人做的都是多无脑的工作

4 天前
 drymonfidelia
GPT-4 也是差不多的情况。
另外我给它上传了一个公共库代码和调用它的完整代码,它疯狂优化根本没用上的函数,怎么提醒都不看实际用上的函数,必须把公用库代码清理干净或者是完整写明哪些函数有用他才会看。看完也是几个地方翻来覆去就是改不出来,要不就是直接把我业务逻辑全改/删了。

6565 次点击
所在节点    程序员
71 条回复
czfy
3 天前
这个 OP 是有移动主题权限的
然后 ta 持续发布看起来很傻的主题,我只能理解为是在运营/促活
最好的方式我觉得是标记然后不回复任何 ta 发布的主题

ruimz
3 天前
恭喜 OP 发现了现在软件工程领域对 LLM 研究的三大前沿:
1. ”我给它上传了一个公共库代码和调用它的完整代码“,这对应着 ”仓库级代码自动修复“ ( Repository-Level Automatic Program Repair)
如今年的 Y. Chen et al., "When Large Language Models Confront Repository-Level Automatic Program Repair: How Well They Done?," in 2024 IEEE/ACM 46th International Conference on Software Engineering: Companion Proceedings (ICSE-Companion), Lisbon, Portugal, 2024, pp. 459-471, doi: 10.1145/3639478.3647633.

2. ”必须把公用库代码清理干净“,这表明 OP 发现了代码注释对 LLM 理解的重大影响甚至误导的现象,在 2024 年发表的多篇论文中亦有研究记载,如今年的 H. Yu et al., "CoderEval: A Benchmark of Pragmatic Code Generation with Generative Pretrained Models," in 2024 IEEE/ACM 46th International Conference on Software Engineering (ICSE), Lisbon, Portugal, 2024, pp. 428-439, doi: 10.1145/3597503.3623322.

3. “或者是完整写明哪些函数有用他才会看”,这表明 OP 发现了思考链( chain-of-thought )以及专业知识对 LLM 理解能力的提升的现象

此外,SWE-agent: Agent-Computer Interfaces Enable Automated Software Engineering 或许可以对”它疯狂优化根本没用上的函数“ 的现象有所缓解
sillydaddy
3 天前
@czfy #41 你想歪了。最近 1 年间站长给好几个人添加了移动主题的权限,包括我。
lao66
3 天前
知道了,就你的工作有脑。无脑就无脑吧,一个月几万块也够用了。
jonsmith
3 天前
需要引导,自己要有大体解决思路,比如 bug 的可能原因,让 AI 分析检查,不断尝试。
durban126
3 天前
其实大部分还是在宣传阶段
每个阶段的社会发展都有好找一些东西来炒作,炒作的本质就是泡沫
因为如果日子都是平平常常的话,是无法让经济活跃的
Skifary
3 天前
把 AI 当做有总结的搜索来用在目前来说是最合适的,不要信任 AI 输出的代码,一定要检查+测试。

顺便说一句,AI 写出来的正则很好用,好用体现在 AI 能写一个大概 90%正确的东西出来,用这个东西跑一跑测试,改一改就能用了。
mightybruce
3 天前
@czfy 原来还有这种人,我标记他了。
txhwind
3 天前
AI 要那么厉害大伙就该下岗了,现在适合把 AI 当实习生用,你写好文档或者架构,让它做脏活累活填空。
tabc2tgacd
3 天前
感觉纯粹是没获得自己想要的结果说得气话。其实得不到想要的结果很正常的,我也用 AI ,能得到想要的结果固然是好事,得不到也没什么。毕竟自己在解决问题过程中通过手动搜索也一样不可能一次命中获得想要的结果的。
lightattractbugs
3 天前
@czfy 中肯
agegcn
3 天前
没有东西是万能的。ai 目前能完成的任务,大概是一个中上水平的大学生,思考几十秒,加动手几分钟,能完成的任务。你能在几分钟内就分析完公共代码库和调用关系吗
zxfgds
3 天前
提问都不会, 考虑转行吧
这么强悍的 AI 工具都用不明白 , 考虑转行吧
lovestudykid
3 天前
@songray 让他纠正,不如回到初始点,把需要注意的问题加到 prompt 里,这样效果感觉好很多
gorvey
3 天前
第一,要选对模型
第二,要给出正确的提示词和上下文,IDE 里面的 AI 插件就是干这个的
第三,要正确提问
unco020511
3 天前
应该是你使用的不对,大模型很强,你要引导他的
vipfts
3 天前
你清高, 你了不起🤣👉🤡
iyaozhen
3 天前
我觉得挺好的,有人觉得有用,有人觉得没用。
先不说不用的人会不会淘汰,但有用的人效率、思路会提升,得到更多机会
auhah
3 天前
代码注释影响 GPT 确实。。。

我给他一段代码进行 codereview

他就把代码注释念了一遍。。。
AlexHsu
3 天前
你知道去年这个时候大模型的代码能力啥样么
那你能预想到明年这时候大模型的代码能力吗
另外 ai 只是解决重复性工作
在另外 你这个工作我也没看出来多‘有脑’ 倒是你这个 prompt 写的 没什么脑

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1092537

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX