Flink提交job报错:

Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Could not find a file system

Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/d

最新版本的Flink没有Hadoop集成,因此无法直接操作HDFS,当我将state.backend设置为filesystem时候,state.backend.fs.checkpointdir: hdfs://master:9000/flink-checkpoints。Flink无法无法提交job一直报错,此时下载缺少的jar包,将其导入到lib目录下即可。

https://repo.maven.apache.org/maven2/org/apache/flink/flink-shaded-hadoop-2-uber/2.7.5-7.0/flink-shaded-hadoop-2-uber-2.7.5-7.0.jar

Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Could not find a file syst相关推荐

  1. Flink Caused by:org.apache.flink.streaming.connectors.kafka.internal.Handover$ClosedException

    Flink程序从kafka中读取数据进行计算,FLink程序一启动就报以下错误,看到错误很懵逼.加班到9点没解决,第二天提前来半小时,把如下错误信息又看了一遍.具体错误如下: 错误信息1. 20/12 ...

  2. Apache Flink 课外阅读

    Apache Flink Flink 概述 首先大数据存储和分析引擎Hadoop自2006年诞生.谈及Hadoop大家自然不会对 MapReduce感到陌生,它将计算分为两个阶段,分别为 Map 和 ...

  3. Apache Flink 章节1

    Apache Flink Flink 概述 首先大数据存储和分析引擎Hadoop自2006年诞生.谈及Hadoop大家自然不会对 MapReduce感到陌生,它将计算分为两个阶段,分别为 Map 和 ...

  4. org.apache.flink.client.program.ProgramInvocationException: The main method caused an error

    flink任务开启检查点并设置状态后端后,提交任务运行,出现以上错误,具体错误如下: org.apache.flink.client.program.ProgramInvocationExceptio ...

  5. java.lang.String cannot be cast to org.apache.flink.table.data.StringData

    完整报错: 16:54:56,851 INFO org.apache.hadoop.conf.Configuration.deprecation - io.bytes.per.checksum is ...

  6. Could not find a suitable table factory for ‘org.apache.flink.table.factories.TableSinkFactory‘

    報錯如下: Exception in thread "main" org.apache.flink.table.api.TableException: findAndCreateT ...

  7. org.apache.flink.table.catalog.exceptions.CatalogException: Failed to create Hive Metastore client

    复现: $FLINK_HOME/bin/sql-client.sh embedded -d $FLINK_HOME/conf/flink-hive.yaml 完整报错如下: Exception in ...

  8. Could not find a suitable table factory for ‘org.apache.flink.table.factories.TableSourceFactory‘

    启动FLINK SQL Client的时候 $FLINK_HOME/bin/sql-client.sh embedded -d $FLINK_HOME/conf/sql.my.yaml -l /hom ...

  9. org.apache.flink.client.program.ProgramInvocationException: Job failed

    完整报错信息如下: scala> senv.execute() org.apache.flink.client.program.ProgramInvocationException: Job f ...

最新文章

  1. rocketmq中consumer设计与实现
  2. leetcode算法题--斐波那契数列
  3. 递归函数的理解 (三种类型)
  4. 最新 springBoot整合shiro(10分钟教程)
  5. 数据结构之二分插入排序------java实现
  6. 李宏毅机器学习课程11~~~为何要深?
  7. LeetCode 302. 包含全部黑色像素的最小矩形(BFS)
  8. 国内ip信息库的组建
  9. ES与传统数据库的比较
  10. 中国wms仓储管理系统行业发展状况分析?
  11. UE4保存信息到本地
  12. Win 10 专业版重新激活详细操作步骤
  13. 一劳永逸安装程序无法继续 Microsoft Runtime DLL 安装程序未能完成安装
  14. ps cs6安装教程
  15. 【今日CV 计算机视觉论文速览 第147期】Tue, 23 Jul 2019
  16. APP下载量全面概述,含统计方法
  17. 解密TLS协议全记录之Openssl的使用与Nginx Server的配置
  18. 计算机房图怎么画,任务6掌握机房平面图的绘制方法.ppt
  19. 关于nextInt()、next()和nextLine()的用法
  20. CAS-认证流程详解

热门文章

  1. 【带你玩转主题模型Topic Model】—— 之 利用sklearn 实现Latetnt Dirichlet Allocation(LDA)主题模型
  2. 可视化生信分析利器 Galaxy 之 Docker 开发
  3. Nature Genetics:微生物如何适应植物的?
  4. SCLS:拟南芥二半萜类化合物调控根系微生物组
  5. R语言使用t.test函数计算两组独立数据的t检验(Independent t-test)
  6. R语言ggplot2包和lattice包可视化改变x轴和y轴的显示位置实战
  7. R语言ggplot2可视化:可视化分组的小提琴图(violin plot)并在分组小提琴内部嵌入箱图(box plot)
  8. R语言dplyr包if_else条件判断选择函数实战
  9. R语言二项分布函数Binomial Distribution(dbinom, pbinom, qbinom rbinom)实战
  10. R语言基于glmnet构建Logistic回归模型使用L1正则化并可视化系数及最佳lambda值