V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐关注
Meteor
JSLint - a JavaScript code quality tool
jsFiddle
D3.js
WebStorm
推荐书目
JavaScript 权威指南第 5 版
Closure: The Definitive Guide
abcbuzhiming
V2EX  ›  JavaScript

js 是否有专门进行编码检测(charset|encoding detection)的轮子

  •  
  •   abcbuzhiming · 2017-04-26 14:41:15 +08:00 · 2977 次点击
    这是一个创建于 2759 天前的主题,其中的信息可能已经有所发展或是发生改变。
    纯 javascript ,不是 nodejs

    最近一直在研究如何让浏览器直接读取用户提供的文件,就和原生应用一样,发现有个问题很难解决,用户提供的文件使用的编码集你是不知道的,也不是所有文件都有 Bom 头, GBK 和 UTF-8 No bom 头是无法从头部分辨的。导致你读取的时候很容易乱码,你不能默认就是认为 txt 文件一定是 GBK 也不能认为 csv 就一定是 UTF8 ,其它语言都有能进行编码检测的能力, js 有没有相关的轮子实现?
    7 条回复    2017-04-26 16:18:01 +08:00
    denghongcai
        1
    denghongcai  
       2017-04-26 15:05:09 +08:00
    denghongcai
        2
    denghongcai  
       2017-04-26 15:08:06 +08:00
    楼上那个是 decode 的,探测可以看看 https://github.com/aadsm/jschardet
    abcbuzhiming
        3
    abcbuzhiming  
    OP
       2017-04-26 15:54:09 +08:00
    @denghongcai 66666 ,我就说应该有轮子,但是始终找不到
    AdamChrist
        4
    AdamChrist  
       2017-04-26 16:04:33 +08:00
    iconv-lite 需要 node 环境才能使用,里面用了 buffer 和 stream
    orzfly
        5
    orzfly  
       2017-04-26 16:07:30 +08:00
    @AdamChrist #4 https://www.npmjs.com/package/iconv-lite 人家有提到脱离 Node 的方法……
    In-browser usage via Browserify (~180k gzip compressed with Buffer shim included).
    binux
        6
    binux  
       2017-04-26 16:12:32 +08:00
    大部分 nodejs 的 lib 都能 Browserify ,大部分库都不单独发布 Browserify 的版本了
    AdamChrist
        7
    AdamChrist  
       2017-04-26 16:18:01 +08:00
    @orzfly 我之前在 react-native 中使用不行..忘记有 Browserify 的方法了..不过刚才看了一下..最新版也支持了 react-native 了..
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1682 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 16:54 · PVG 00:54 · LAX 08:54 · JFK 11:54
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.