[开源] 让 ChatGPT 帮我们总结 Hacker News

[polythene]

背景

Hacker News 是了解科技圈资讯的一个高质量数据源，但首页 30 条新闻读起来还是挺费劲的。所以我用 ChatGPT 替我们阅读新闻，直接生成摘要：

服务地址

• 🔗 整个服务其实是个静态页面，由定时器定时部署到 GitHub Pages 上： https://hackernews.betacat.io/

• 📰 具体做法参见这篇中文博客，简单介绍了撰写提示词的技巧，调用 OpenAI API 的过程，以及怎样用本地类似的 GoogleT5 模型作为 API 的兜底

• ⭐ 最后是这个服务的代码，全部开源在 GitHub 上，欢迎 star: https://github.com/polyrabbit/hacker-news-digest/

[imhx233]

看起来很棒，但是 $0.41/d 的成本也是不小；加到自己的 RSS 里面去了！

[polythene]

@imhx233 是的，所以页面里嵌了两条广告，希望能回点血

[vsitebon]

有没有办法加上 HN 的讨论链接？

[polythene]

@vsitebon 标题下的 💬 图标，可以直接链到 comments 页面，看来得标注下

[vsitebon]

@polythene #4 原来那个是可以点的。。感谢这个网站，好用

[jasonslyvia]

赞，楼主跟我想一块去了，我其实还想过用 GPT 去分析每一个链接的评论区（毕竟 HN 里的评论才是真的宝藏），看看大家的主流观点是哪些，整体是 positive 还是 negative 等等……可惜行动力太弱，而且 token 消耗可能远超解析正文的费用

[codyfeng]

看起来不错，收藏了👍

[polythene]

@jasonslyvia 确实，主要评论区的内容无法收敛，token 消耗吃不消。不过等这个赛道越来越卷，以后应该会降价的。

[jasonslyvia]

@polythene #8 HN 似乎是有 API 的？评论都有独立 ID ，应该还是可以收敛的，定一个更新时效性就够了……（例如只爬链接更新 48 小时内的评论，每 30 分钟一次），这样还能看到舆论的变化情况

[sleeepyy]

赞，建议顺便提供中文的 summary

[polythene]

@sleeepyy 好主意，可以搞个多语言版，应该在 prompt 里面加个步骤就行了

[Latin]

@polythene 附议

[mingoing428]

建议输出 rss

[polythene]

@mingoing428 建议已实现，直接把网址贴到 rss 阅读器中就行了，一楼的老哥上来就用上了

[zmx976508106]

好用

[liuhuan475]

墙裂建议搞一下国际化~~~

[MstMoonshine]

我也在开发一模一样的东西！但是号被 OpenAI 封了……

[MstMoonshine]

@polythene 我的实现里是把所有 first level comments 用爬虫合并起来，一次性发过去，prompt 是"The following is a list of comments from Hacker News. Categorize the comments and summarize the main point of each category. Less than 50 words for each category. List the categories as bullet points in markdown format."

测试发现分类效果很不错，不过输出格式不统一，需要进一步提升 prompt ，暂时不支持 comment of comment 。
其实也不用很担心 token 数量，因为你只需要最 top 的（比如十个二十个） comments 就够了。

[polythene]

@liuhuan475 能否细说下哪方面可以更国际化一点？还是你想表达的是希望做本地化？

[polythene]

@MstMoonshine 这个不错，有很多评论质量很高，但整体的评论数量太多了，读完很费劲。等你弄完了，我们可以互链合作下