1)yarn的启动脚本

exec /bin/bash -c "$JAVA_HOME/bin/java -Xms580m -Xmx580m -XX:MaxDirectMemorySize=320m -Daaa=1 -XX:NativeMemoryTracking=detail -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:CMSInitiatingOccupancyFraction=70 -XX:+UseCompressedClassPointers -XX:CompressedClassSpaceSize=512M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=512m -Dlog.file=/data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.log -Dlog4j.configuration=file:./log4j.properties org.apache.flink.yarn.YarnTaskManager --configDir . 1> /data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.out 2> /data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.err"

2)log4j.properties

log4j.rootLogger=INFO, file

log4j.appender.stdout=org.apache.log4j.ConsoleAppender

log4j.appender.stdout.layout=org.apache.log4j.PatternLayout

log4j.appender.stdout.layout.ConversionPattern=[%d] %p %m (%c) %l %n

log4j.appender.file=org.apache.log4j.DailyRollingFileAppender

log4j.appender.file.DatePattern='.'yyyy-MM-dd-HH

log4j.appender.file.File=${log.file}

log4j.appender.file.layout=org.apache.log4j.PatternLayout

log4j.appender.file.layout.ConversionPattern=[%d] %p %m (%c)%n

3)flink-conf.yaml

env.java.opts.taskmanager: -Daaa=1 -XX:NativeMemoryTracking=detail -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:CMSInitiatingOccupancyFraction=70 -XX:+UseCompressedClassPointers -XX:CompressedClassSpaceSize=512M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=512m -XX:+PrintGCDetails -Xloggc:${LOG_DIRS}/taskmanager.out

就可以了!

flink mysql日志,关于flink的日志文件设置相关推荐

  1. flink mysql sink_聊聊flink的sink

    概述 flink的sink是flink三大逻辑结构之一(source,transform,sink),功能就是负责把flink处理后的数据输出到外部系统中,flink 的sink和source的代码结 ...

  2. flink mysql cdc到kafka

    思路: 1.创建flink mysql cdc表 2.将order join products的结果写入到kafka表中. 这样就相当于完成了,DWD中的事实表构建.写入到kafka中,等待消费构建D ...

  3. 日志服务Flink Connector《支持Exactly Once》

    摘要: Flink log connector是阿里云日志服务推出的,用于对接Flink的工具,包含两块,分别是消费者和生产者,消费者用于从日志服务中读数据,支持exactly once语义,生产者用 ...

  4. mysql数据库用户管理及日志文件

    用户管理 实际应用: MySQL数据库是信息系统中非常重要的一个环节, 默认有个root用户,但是这个用户权限太大,一般只在管理数据库时候才用.所以通常由管理员创建不同的管理账户,分配不同的操作权限, ...

  5. MySQL数据库中常见的日志文件汇总!

    一个优秀的Java后端开发工程师一定要掌握MySQL数据库,而日志文件记录了影响MySQL数据库的各种类型活动,因此也成为其必须要掌握的知识.今天千锋ava培训小编就给大家介绍MySQL数据库中常见的 ...

  6. MySQL日志文件之错误日志和慢查询日志详解

    今天天气又开始变得很热了,虽然很热很浮躁,但是不能不学习,我在北京向各位问好.今天给大家分享一点关于数据库日志方面的东西,因为日志不仅讨厌而且还很重要,在开发中时常免不了与它的亲密接触,就在前几天公司 ...

  7. mysql的告警日志在哪_mysql日志文件在哪

    本篇文章将介绍mysql中的几种日志文件位置,如何能够找到. 推荐课程:MySQL教程. 查找错误日志文件路径 show variables like 'log_error'; 在mysql数据库中, ...

  8. mysql的记录操作的日志文件_MySql 的操作日志 历史记录

    如何查看mysql数据库操作记录日志 1.首先确认你日志是否启用了mysql>show variables like 'log_bin'. 2.如果启用了,即ON,那日志文件就在mysql的安装 ...

  9. MySQL中的几类日志文件介绍

    MySQL中的几类日志文件介绍 关于Mysql日志 splunk内置了两种mysql的日志,分别是mysqld以及mysql_error mysqld_error Standard mysql err ...

  10. mysql 刷新二进制日志_mysql binglog 二进制日志文件

    1.MySQL Server 有四种类型的日志--Error Log.General Query Log.Binary Log 和 Slow Query Log. 1.1.第一个是错误日志,记录 my ...

最新文章

  1. 模板模式(C++) 【转】
  2. 史上第二走心的 iOS11 Drag Drop 教程
  3. RedHat 系列 Linux 安装后,建立嵌入式开发环境
  4. QT的QSignalTransition类的使用
  5. CCPlace,CCFlip*,CCToggleVisibility,CCMoveTo*,CCJumpTo*,CCScale*,CCRotate*,CCSkew*,fade,CCCardinalSp*
  6. eclipse下web开发中缓存问题
  7. SAP Cloud for Customer Cloud(C4C)Application Studio里的代码调试
  8. MYSQL 中 SQL 常用操作
  9. linux之chroot命令
  10. 多说评论如何显示最近访客
  11. MISC图片隐写之foremost
  12. hosts文件位置和修复hosts文件
  13. 程序猿常识--OJ系统和ACM测试考试大全
  14. Failed installing ‘Tomcat8‘ service?
  15. 上海公积金提取办法(外地购房,公积金在上海)
  16. 互联网信息服务ICP业务许可证(仅限互联网信息服务)是什么许可证?
  17. 数组中元素旋转移位的三种实现方法 --By LXW
  18. 期权到底是什么?为什么说期权是有杠杆的?
  19. bp前向传播和反向传播举例
  20. 首先考虑IES参与到碳交易市场,引入阶梯式碳交易机制引导IES控制碳排放;接着细化电转气(P2G)的两阶段运行过程

热门文章

  1. uboot2012(一)分析重定位
  2. SPI配置8通道ADC128S022
  3. Android 4.0 Notification
  4. uclibc和glibc的差别
  5. lua编程简单实用入门教程,用NodeMCU在OLED上显示温湿度
  6. 惠普z640服务器装系统,顾问文档: HP Z440、Z640 和 Z840 工作站 - 在采用 Broadwell 处理器的系统上安装 HP ZTurbo Quad Pro 后,出现黑屏...
  7. 【OFDM】基于simulink的OFDM系统仿真
  8. H∞控制的simulink仿真
  9. C++类的成员变量和成员函数
  10. Linux中expect实现自动登录