返回介绍

实现

发布于 2025-05-02 18:19:22 字数 583 浏览 0 评论 0 收藏

Flink 使用以下文件系统方案直接实现文件系统:

  • file ,表示机器的本地文件系统。

其他文件系统类型由桥接到 Apache Hadoop 支持的文件系统套件的实现访问 。以下是不完整的示例列表:

  • hdfs :Hadoop 分布式文件系统
  • s3s3ns3a :亚马逊 S3 文件系统
  • gcs :Google 云端存储
  • maprfs :MapR 分布式文件系统

如果在类路径中找到 Hadoop 文件系统类并找到有效的 Hadoop 配置,Flink 将透明地加载 Hadoop 的文件系统。默认情况下,它在类路径中查找 Hadoop 配置。或者,可以通过配置条目指定自定义位置 fs.hdfs.hadoopconf

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。