Node.js文本文件BOM头的去除方法
BOM
字节顺序标记（byteordermark），是位于码点U+FEFF的统一码字符的名称。当以UTF-16或UTF-32来将UCS/统一码字符所组成的字符串编码时，这个字符被用来标示其字节序。它常被用来当做标示文件是以UTF-8、UTF-16或UTF-32编码的标记。
不同编码的字节顺序标记的表示：
| 编码 | 表示(十六进制) | 表示(十进制) |
| UTF8 | EFBBBF | 239187191 |
| UTF-16（大端序） | FEFF | 254255 |
| UTF-16（小端序） | FFFE | 255254 |
| UTF-32（大端序） | 0000FEFF | 00254255 |
| UTF-32（小端序） | FFFE0000 | 25525400 |
BOM添加
UTF8编码不需要BOM,但是我们可以手动给UTF8编码文件添加一个BOM头
constfs=require('fs');
fs.writeFile('./bom.js','\ufeffThisisanexamplewithaccents:éèà','utf8',function(err){})
BOM移除
对于UTF8来说，BOM的有无并不是必须的，因为UTF8字节没有顺序，不需要标记，也就是说一个UTF8文件可能有BOM，也可能没有BOM。
根据不同编码的BOM不同，我们可以根据文件头几个字节来判断文件是否包含BOM，以及使用的那种Unicode编码。
BOM字符虽然起到了标记文件编码的作用，其本身却不属于文件内容的一部分，如果读取文本文件时不去掉BOM，在某些使用场景下就会有问题。例如我们把几个JS文件合并成一个文件后，如果文件中间含有BOM字符，就会导致浏览器JS语法错误。因此，使用Node.js读取文本文件时，一般需要去掉BOM。
//对于字符串内容
functionstripBOM(content){
//检测第一个字符是否为BOM
if(content.charCodeAt(0)===0xFEFF){
content=content.slice(1);
}
returncontent;
}
//对于Buffer
functionstripBOMBuffer(buf){
if(buf[0]===0xEF&&buf[1]===0xBB&&buf[2]===0xBF){
buf=buf.slice(3);
}
returnbuf;
}
参考
- 字符编码笔记：ASCII，Unicode和UTF-8
- 字节顺序标记
总结
到此这篇关于Node.js文本文件BOM头去除的文章就介绍到这了,更多相关Node.js文本文件BOM头去除内容请搜索毛票票以前的文章或继续浏览下面的相关文章希望大家以后多多支持毛票票！