Python 采用 chunk_size 的方式读取 hdfs 数据 - V2EX

首页注册登录

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 2737 天前的主题，其中的信息可能已经有所发展或是发生改变。

读取 hdfs 采用 chunk_size 的方式，其块的切分方式采用的是字节的方式，但这种情况会存在将一行数据分割到两个块里，若遇到这种情况，请问怎么处理？

目前尚无回复

hdfs chunk_size 读取切分

关于 · 帮助文档 · 自助推广系统 · 博客 · API · FAQ · Solana · 991 人在线 最高记录 6679 ·

Select Language

创意工作者们的社区

World is powered by solitude

VERSION: 3.9.8.5 · 24ms · UTC 19:00 · PVG 03:00 · LAX 11:00 · JFK 14:00
♥ Do have faith in what you're doing.