开源 企业版 高校版 私有云 模力方舟 AI 队友
代码拉取完成,页面将自动刷新
捐赠
捐赠前请先登录
扫描微信二维码支付
取消
支付完成
支付提示
将跳转至支付宝完成支付
确定
取消
1 Star 8 Fork 3

dwing/sharecode

加入 Gitee
与超过 1400万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
已有帐号? 立即登录
文件
main
分支 (1)
main
main
分支 (1)
main
克隆/下载
克隆/下载
提示
下载代码请复制以下命令到终端执行
为确保你提交的代码身份被 Gitee 正确识别,请执行以下命令完成配置
初次使用 SSH 协议进行代码克隆、推送等操作时,需按下述提示完成 SSH 配置
1 生成 RSA 密钥
2 获取 RSA 公钥内容,并配置到 SSH公钥
在 Gitee 上使用 SVN,请访问 使用指南
使用 HTTPS 协议时,命令行会出现如下账号密码验证步骤。基于安全考虑,Gitee 建议 配置并使用私人令牌 替代登录密码进行克隆、推送等操作
Username for 'https://gitee.com': userName
Password for 'https://userName@gitee.com': # 私人令牌
main
分支 (1)
main
sharecode
/
java
/
src
/
FastCsv.java
sharecode
/
java
/
src
/
FastCsv.java
FastCsv.java 4.18 KB
一键复制 编辑 原始数据 按行查看 历史
dwing 提交于 2026年07月04日 18:10 +08:00 . java: fix FastCsv
import java.lang.invoke.MethodHandles;
import java.lang.invoke.VarHandle;
import java.nio.ByteOrder;
import java.nio.charset.StandardCharsets;
// # CSV编码规则
// - ','间隔列;"\r\n"间隔行(最后一行可能没有换行符结尾)
// - 文本含有','或'\r',或以'"'开头,则整个内容两边加'"'
// - 两边加'"'的情况下,里面的每个'"'改成两个
// # 简单&高性能的实现,需要严格按以上规则编码,需要JDK9以上
public final class FastCsv {
private static final VarHandle longLeVH = MethodHandles.byteArrayViewVarHandle(long[].class, ByteOrder.LITTLE_ENDIAN);
private FastCsv() {
}
public interface Handler {
void onCell(int pos, int len); // len<0: next line
}
public static void parseCsv(final byte[] csv, final Handler handler) { // csv maybe modified
parseCsv(csv, 0, csv.length, handler);
}
public static void parseCsv(final byte[] csv, int pos, final int len, final Handler handler) { // csv maybe modified
final int end = pos + len;
if (len >= 3 && csv[pos] == -17 && csv[pos + 1] == -69 && csv[pos + 2] == -65) // check UTF-8 BOM
pos += 3; // \xef\xbb\xbf
for (; ; ) {
if (pos >= end) {
handler.onCell(end, -1);
return;
}
int b = csv[pos];
if (b == ',') {
handler.onCell(pos++, 0); // ,
if (pos >= end) {
handler.onCell(pos, 0);
handler.onCell(end, -1);
return;
}
} else if (b == '\r') {
handler.onCell(pos, 0);
handler.onCell(pos, -1);
if ((pos += 2) >= end) // \r\n
return;
} else if (b == '"') {
int e = scanQuot(csv, ++pos, end), p = e, q;
while ((q = e + 1) < end && (b = csv[q]) == '"') {
final int n = (e = scanQuot(csv, q + 1, end)) - q;
System.arraycopy(csv, q, csv, p, n);
p += n;
}
handler.onCell(pos, p - pos);
if (b == ',')
pos = e + 2; // ",
else { // '\r' | <EOF>
handler.onCell(e + 1, -1);
if ((pos = e + 3) >= end) // "\r\n | "<EOF>
return;
}
} else {
final int e = scanCellEnd(csv, pos + 1, end);
handler.onCell(pos, e - pos);
if (e < end && csv[e] == ',')
pos = e + 1; // ,
else { // '\r' | <EOF>
handler.onCell(e, -1);
if ((pos = e + 2) >= end) // \r\n
return;
}
}
}
}
private static int scanQuot(final byte[] csv, int pos, final int end) {
for (; pos + 8 <= end; pos += 8) {
long p = (long)longLeVH.get(csv, pos) ^ 0x22222222_22222222L; // '"'
p = (p - 0x01010101_01010101L) & ~p & 0x80808080_80808080L;
if (p != 0)
return pos + (Long.numberOfTrailingZeros(p) >> 3);
}
for (; ; pos++) {
if (pos >= end || csv[pos] == '"')
return pos;
}
}
private static int scanCellEnd(final byte[] csv, int pos, final int end) {
for (; pos + 8 <= end; pos += 8) {
final long b8 = (long)longLeVH.get(csv, pos);
long p0 = b8 ^ 0x2c2c2c2c_2c2c2c2cL; // ','
long p1 = b8 ^ 0x0d0d0d0d_0d0d0d0dL; // '\r'
p0 = (p0 - 0x01010101_01010101L) & ~p0 & 0x80808080_80808080L;
p1 = (p1 - 0x01010101_01010101L) & ~p1 & 0x80808080_80808080L;
if ((p0 |= p1) != 0)
return pos + (Long.numberOfTrailingZeros(p0) >> 3);
}
for (int b; ; pos++) {
if (pos >= end || (b = csv[pos]) == ',' || b == '\r')
return pos;
}
}
static void main() {
/* ----------------------------
|ab|a,b|"ab"|a"b| ab |"a,b"|
----------------------------
|a|
|b|
----------------------------
||||||ab|
----------------------------
|ab"|||||a"b|
----------------------------*/
final byte[] csv = """
ab,"a,b",""\"ab""\",a"b, ab ,""\"a,b""\"\r
"a
b",,,,,\r
,,,,,"ab"\r
ab",,,,,"a""b\"""".getBytes(StandardCharsets.UTF_8);
System.out.println("---");
System.out.println(new String(csv, StandardCharsets.UTF_8));
System.out.println("---");
final StringBuilder sb = new StringBuilder();
parseCsv(csv, (pos, len) -> {
if (len < 0)
sb.append("<EOL>\n");
else
sb.append('[').append(new String(csv, pos, len, StandardCharsets.UTF_8)).append(']');
});
final String out = sb.toString();
System.out.println(out);
System.out.println("===");
System.out.println("check: " + out.equals("""
[ab][a,b]["ab"][a"b][ ab ]["a,b"]<EOL>
[a
b][][][][][]<EOL>
[][][][][][ab]<EOL>
[ab"][][][][][a"b]<EOL>
"""));
}
}
Loading...
举报
举报成功
我们将于2个工作日内通过站内信反馈结果给你!
请认真填写举报原因,尽可能描述详细。
请选择举报类型
取消
发送
误判申诉

此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。

如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。

取消
提交

简介

分享个人编写的各种编程语言的短代码
暂无标签
MIT
使用 MIT 开源许可协议
取消

发行版

暂无发行版

贡献者

全部

近期动态

不能加载更多了
编辑仓库简介
简介内容
主页
马建仓 AI 助手
尝试更多
代码解读
代码找茬
代码优化
其他
1
https://gitee.com/dwing/sharecode.git
git@gitee.com:dwing/sharecode.git
dwing
sharecode
sharecode
main
点此查找更多帮助

搜索帮助

评论
仓库举报
回到顶部
登录提示
该操作需登录 Gitee 帐号,请先登录后再操作。
立即登录
没有帐号,去注册

AltStyle によって変換されたページ (->オリジナル) /