返回介绍

实现

发布于 2025-05-02 18:19:22 字数 583 浏览 0 评论 0 收藏 0

Flink 使用以下文件系统方案直接实现文件系统:

  • file ,表示机器的本地文件系统。

其他文件系统类型由桥接到 Apache Hadoop 支持的文件系统套件的实现访问 。以下是不完整的示例列表:

  • hdfs :Hadoop 分布式文件系统
  • s3s3ns3a :亚马逊 S3 文件系统
  • gcs :Google 云端存储
  • maprfs :MapR 分布式文件系统

如果在类路径中找到 Hadoop 文件系统类并找到有效的 Hadoop 配置,Flink 将透明地加载 Hadoop 的文件系统。默认情况下,它在类路径中查找 Hadoop 配置。或者,可以通过配置条目指定自定义位置 fs.hdfs.hadoopconf

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。