[卖瓜 🍉] Shmily-聊天记录归档 支持 QQ、Wechat、SMS 等

[lqzhgood]

❓ 这是啥

Github - lqzhgood/Shmily

这好像是一个可能没用又可能很有用的工具。

能归档 QQ 、MobileQQ 、Wechat 、SMS 、CallLog 、Camera 、Email 等记录。more

并支持筛选、搜索、评论、图标统计分析等功能。

少啰嗦，先看 Demo http://demo.shmily.lqzh.me/（托管在 Github ，访问可能略慢）

🔆 亮点

我看过 现有 的聊天记录归档项目大都有以下问题

• 使用上
  • 大都为 HTML 模板直出，无分页，几百兆的 HTML 不可用
  • 导出的归档数据无法查询，筛选、评论等，失去了归档数据的意义
  • 没有图表统计，数据未体现额外价值
  • 显示数据单一，无法多项目如 QQ Wechat 按时间线合并查看
  • 多次导出的数据 (如 2020 年导出的数据和 2021 年导出的数据) 不能累计查看并分析
• 程序上
  • 获取数据不完整，获取的数据取决于作者用到的，无法拿到数据库中完整的额外字段
  • 全流程耦合，如果对产物不满意，只能从头开始造轮子，难以从中间(如解密后的数据库)开始

基于以上问题，Shimly 的亮点在于

• 使用上

  • Show 基于组件化开发，纯前端实现，人脑智能榨汁级优化 /:dog （ 240M 数据文件浏览搜索无压力 ）
  • 支持筛选、搜索（支持正则）、评论（支持双向引用链接）
  • 支持我能想到所有维度的数据图表统计 （连表情的使用频率都有）
  • 支持多种类、多批次数据合并显示与统计

• 程序上

  • 完整的数据导出、不管是否 Show 有使用，能导尽导，万一别人需要呢

  • 架构（详见 文档）

    我将架构分为 Get(ExportDB 、ToMsg) 和 Show(Modify 、Web) 4 个部分，中间使用 <JSON>${Shimly-Msg} 标准格式进行融合

    • 你可以只使用 ExportDB、ToMsg 部分，做自己的数据导出与分析
    • 也可以写自己需要的 Get，而不再担心前端的编写
    • 在 Show 的基础上也可以更简单的自定义显示

总结： 没看过这么完整且好用的数据归档工具

👀 过程中的发现

都看到这了不拿出点干货都骗不到 star 了。

• S60v3 的 SMS 时间戳编码方式未知，但 解码 符合 y = kx + b
• QQ 里很多表情都已经雪藏了，例如 委屈
• QQ 里表情都是 GIF 无限循环的，如 左太极。但 右太极 ，至少从 S60V3 开始，只播放一次。
  • 今年好像被修复了，但可以通过之前的 QQ 经典表情包 验证，如这个

💖 爱发电

都到这了

• ✨ Github 点个 Star 呗
• 🪙 也可以 这里 看看 世界上最可爱的动物 ，顺便投个币 X ）
• 👨‍💻 聊聊酷工作，简历

[abcdxe2v]

@xiaoyuesanshui 是的，/data/data 这个目录，data 分区，必须得 root 了才能访问。华为新款应该没法 root

[abcdxe2v]

安卓没 root 获取不到微信和 qq 的聊天记录数据库的

[bkmi]

不错不错，要是 UI 能适配移动设备就更好了

[bkmi]

没法 root 的把数据迁移到 root 的设备就好了，实在不行迁移到模拟器也是可以的

[lqzhgood]

@aoguai
我是从 .mht 和 富文本 两个角度导出的，数据还包含了 表情 alias 信息，还有消息的类型
.mht 因为包含了 html 结构，解析会比 .txt 更精准

干脆合并一下吧， 又少一点轮子。你从 Get 项目拿到的 JSON ，转 Excel 好像更方便

// QQ 记录到处从来就没更新过，新的很多消息类型也都不支持
// 这里更新的 QQ NT 应该会重写吧

[lqzhgood]

@abcdxe2v MIUI 通过系统的备份功能能拿到。

[lqzhgood]

@bkmi 有想过，但觉得没啥必要把。
没人会在手机上看这个吧……
归档成冷数据备查应该是主要场景

[lqzhgood]

@abcdxe2v 是的，PC QQ 太不开放了，自带的聊天记录导出功能应该十多年没更新了吧。

[abcdxe2v]

@lqzhgood 嗯对，还有一些间接的解决办法。。。比如 pdd 漏洞提权。。。

[lqzhgood]

@dianso docker 暂时没有哦，因为都是脚本性质，而且基本没有难搞的依赖和 runtime ，用的人很多再搞吧。

[codyfeng]

不错不错，感谢 OP 的创造分享👍👍

[xiaoyuesanshui]

@abcdxe2v 的确是 root 相关的问题。
如果通过系统备份，能把这个目录给备出来

备份出来后会有一个
com.tencent.mm.tar
com.tencent.mm.apk

.tar 文件根本解不出来，file 看文件类型就是 ：data

看了些资料发现有人提出会有 tar 打包，但是没说解压的方法

我去搞个 issue

[bkmi]

@lqzhgood 我手机上记录一直留着占那么多空间，主要就是偶尔搜点东西，不然就只保留 PC 上的了

[lqzhgood]

@bkmi 嗯，项目的初衷也是这样，每年导出一次数据冷备，偶尔就去 PC 上搜下，解放手机

[gabkfivyfbst]

咋运行

[etnperlong]

非常感谢，这个界面风格真的好漂亮，觉得回到了十年前那个青葱的岁月
现在跟对象主要用 Telegram 聊天，打算自己适配一下 TG

[lqzhgood]

@etnperlong
感谢支持~ 好做了提个 Issue ，我加到文档的 Get 列表去~

[jwdstefani]

感谢 已经 star ，马上部署起来

[robking]

有没有详细的部署教程呀

[lqzhgood]

@robking #39 第一行的 Github 里面就是文档地址