flink mysql日志,关于flink的日志文件设置
1)yarn的启动脚本
exec /bin/bash -c "$JAVA_HOME/bin/java -Xms580m -Xmx580m -XX:MaxDirectMemorySize=320m -Daaa=1 -XX:NativeMemoryTracking=detail -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:CMSInitiatingOccupancyFraction=70 -XX:+UseCompressedClassPointers -XX:CompressedClassSpaceSize=512M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=512m -Dlog.file=/data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.log -Dlog4j.configuration=file:./log4j.properties org.apache.flink.yarn.YarnTaskManager --configDir . 1> /data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.out 2> /data/yarn/container-logs/application_1542184485247_0212/container_e17_1542184485247_0212_01_000003/taskmanager.err"
2)log4j.properties
log4j.rootLogger=INFO, file
log4j.appender.stdout=org.apache.log4j.ConsoleAppender
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
log4j.appender.stdout.layout.ConversionPattern=[%d] %p %m (%c) %l %n
log4j.appender.file=org.apache.log4j.DailyRollingFileAppender
log4j.appender.file.DatePattern='.'yyyy-MM-dd-HH
log4j.appender.file.File=${log.file}
log4j.appender.file.layout=org.apache.log4j.PatternLayout
log4j.appender.file.layout.ConversionPattern=[%d] %p %m (%c)%n
3)flink-conf.yaml
env.java.opts.taskmanager: -Daaa=1 -XX:NativeMemoryTracking=detail -XX:+UseParNewGC -XX:+UseConcMarkSweepGC -XX:CMSInitiatingOccupancyFraction=70 -XX:+UseCompressedClassPointers -XX:CompressedClassSpaceSize=512M -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=512m -XX:+PrintGCDetails -Xloggc:${LOG_DIRS}/taskmanager.out
就可以了!
flink mysql日志,关于flink的日志文件设置相关推荐
- flink mysql sink_聊聊flink的sink
概述 flink的sink是flink三大逻辑结构之一(source,transform,sink),功能就是负责把flink处理后的数据输出到外部系统中,flink 的sink和source的代码结 ...
- flink mysql cdc到kafka
思路: 1.创建flink mysql cdc表 2.将order join products的结果写入到kafka表中. 这样就相当于完成了,DWD中的事实表构建.写入到kafka中,等待消费构建D ...
- 日志服务Flink Connector《支持Exactly Once》
摘要: Flink log connector是阿里云日志服务推出的,用于对接Flink的工具,包含两块,分别是消费者和生产者,消费者用于从日志服务中读数据,支持exactly once语义,生产者用 ...
- mysql数据库用户管理及日志文件
用户管理 实际应用: MySQL数据库是信息系统中非常重要的一个环节, 默认有个root用户,但是这个用户权限太大,一般只在管理数据库时候才用.所以通常由管理员创建不同的管理账户,分配不同的操作权限, ...
- MySQL数据库中常见的日志文件汇总!
一个优秀的Java后端开发工程师一定要掌握MySQL数据库,而日志文件记录了影响MySQL数据库的各种类型活动,因此也成为其必须要掌握的知识.今天千锋ava培训小编就给大家介绍MySQL数据库中常见的 ...
- MySQL日志文件之错误日志和慢查询日志详解
今天天气又开始变得很热了,虽然很热很浮躁,但是不能不学习,我在北京向各位问好.今天给大家分享一点关于数据库日志方面的东西,因为日志不仅讨厌而且还很重要,在开发中时常免不了与它的亲密接触,就在前几天公司 ...
- mysql的告警日志在哪_mysql日志文件在哪
本篇文章将介绍mysql中的几种日志文件位置,如何能够找到. 推荐课程:MySQL教程. 查找错误日志文件路径 show variables like 'log_error'; 在mysql数据库中, ...
- mysql的记录操作的日志文件_MySql 的操作日志 历史记录
如何查看mysql数据库操作记录日志 1.首先确认你日志是否启用了mysql>show variables like 'log_bin'. 2.如果启用了,即ON,那日志文件就在mysql的安装 ...
- MySQL中的几类日志文件介绍
MySQL中的几类日志文件介绍 关于Mysql日志 splunk内置了两种mysql的日志,分别是mysqld以及mysql_error mysqld_error Standard mysql err ...
- mysql 刷新二进制日志_mysql binglog 二进制日志文件
1.MySQL Server 有四种类型的日志--Error Log.General Query Log.Binary Log 和 Slow Query Log. 1.1.第一个是错误日志,记录 my ...
最新文章
- 模板模式(C++) 【转】
- 史上第二走心的 iOS11 Drag Drop 教程
- RedHat 系列 Linux 安装后,建立嵌入式开发环境
- QT的QSignalTransition类的使用
- CCPlace,CCFlip*,CCToggleVisibility,CCMoveTo*,CCJumpTo*,CCScale*,CCRotate*,CCSkew*,fade,CCCardinalSp*
- eclipse下web开发中缓存问题
- SAP Cloud for Customer Cloud(C4C)Application Studio里的代码调试
- MYSQL 中 SQL 常用操作
- linux之chroot命令
- 多说评论如何显示最近访客
- MISC图片隐写之foremost
- hosts文件位置和修复hosts文件
- 程序猿常识--OJ系统和ACM测试考试大全
- Failed installing ‘Tomcat8‘ service?
- 上海公积金提取办法(外地购房,公积金在上海)
- 互联网信息服务ICP业务许可证(仅限互联网信息服务)是什么许可证?
- 数组中元素旋转移位的三种实现方法 --By LXW
- 期权到底是什么?为什么说期权是有杠杆的?
- bp前向传播和反向传播举例
- 首先考虑IES参与到碳交易市场,引入阶梯式碳交易机制引导IES控制碳排放;接着细化电转气(P2G)的两阶段运行过程
热门文章
- uboot2012(一)分析重定位
- SPI配置8通道ADC128S022
- Android 4.0 Notification
- uclibc和glibc的差别
- lua编程简单实用入门教程,用NodeMCU在OLED上显示温湿度
- 惠普z640服务器装系统,顾问文档: HP Z440、Z640 和 Z840 工作站 - 在采用 Broadwell 处理器的系统上安装 HP ZTurbo Quad Pro 后,出现黑屏...
- 【OFDM】基于simulink的OFDM系统仿真
- H∞控制的simulink仿真
- C++类的成员变量和成员函数
- Linux中expect实现自动登录