java时间戳动态,是否可以根据窗口元素的时间戳动态生成BigQuery表名？

例如，如果我有一个5分钟窗口的数据流流媒体作业从PubSub读取，我理解如果我将一个超过两天的时间戳分配给一个元素，将会有一个带有此元素的窗口，如果我使用的示例将每日表输出到BigQueryIO.java中描述的BigQuery，该作业将使用实际日期在BigQuery表中写入过去两天的元素 .

我想将过去的元素写入BigQuery表中，并使用窗口元素的时间戳而不是当前窗口的时间，是否可能？

现在我按照DataflowJavaSDK / sdk / src / main / java / com / google / cloud / dataflow / sdk / io / BigQueryIO.java中描述的示例：

PCollection quotes = ...

quotes.apply(Window.info(CalendarWindows.days(1)))

.apply(BigQueryIO.Write

.named("Write")

.withSchema(schema)

.to(new SerializableFunction() {

public String apply(BoundedWindow window) {

String dayString = DateTimeFormat.forPattern("yyyy_MM_dd").parseDateTime(

((DaysWindow) window).getStartDate());

return "my-project:output.output_table_" + dayString;

}

}));

java时间戳动态,是否可以根据窗口元素的时间戳动态生成BigQuery表名？相关推荐

2.27√ 2.25的条件下作两点修改：表AB可能存在值相同的元素，但新生成的表C的元素值各不相同；利用A表空间存放表C
#include<stdio.h> #include<malloc.h> #include <stdlib.h> #define maxsize 10typedef ...
Java动态初始化数组，元素默认值规则
1.动态初始化数组: 定义数组的时候,只确定元素的类型和数组的长度,之后再存入具体数据. 2.动态初始化数组的基本原理: 当你赋值后,数组的默认值0,就会变成你赋的值. 3.数组的动态初始化格式: 格 ...
java list遍历添加元素_【转】：java遍历List时动态添加和删除元素
遍历元素最常见的三种方法: // 1.最普通的一种方式 for(int i = 0;i < size;i++) //2.for each方式 for(BEAN b: BEANLIST) //3. ...
imu与gps之间的时间戳_TCP 窗口缩放、时间戳和 SACK（2） | Linux 中国
导读:有很多文章出于各种"性能调优"或"安全性"原因,建议禁用 TCP 扩展,本文提供了这些扩展功能的背景,为什么会默认启用,它们之间是如何关联的,以及为什么通 ...
【Java高级程序设计学习笔记】深入理解jdk动态代理
java的设计模式中有一项设计模式叫做代理模式,所谓代理模式,就是通过代理方来操作目标对象,而不是自己直接调用.代理又分为静态代理和动态代理,静态代理就是针对每个被代理对象写一个代理类,操作不够优雅: ...
java 动态二维数组_Java数组、动态数组、二维数组的应用
一.认识数组 1.容器的概念用于存储数据的一块内存称为容器,生活中有很多容器,例如水杯,衣柜,以及存放"东西" 存放在容器中的数据,称为"元素" 2.为什 ...
mybatis动态sql，常用元素介绍
mybatis动态sql,常用元素介绍 if元素 choose.when.otherwise foreach元素 bing元素 if元素 <select id="findRole1&q ...
Java List 更换指定位置的元素
Java List 更换指定位置的元素使用的方法是list.set() 方法下面写一个list 说下具体的使用 List<String> list = new ArrayList< ...
php控件不显示,解决控件遮挡问题：关于有窗口元素和无窗口元素
解决控件遮挡问题:关于有窗口元素和无窗口元素更新时间:2007年01月28日 00:00:00 作者: 不知道朋友们有没有碰到过控件的遮挡问题,最典型的就是DropdownList和Active ...

java时间戳动态,是否可以根据窗口元素的时间戳动态生成BigQuery表名？

java时间戳动态,是否可以根据窗口元素的时间戳动态生成BigQuery表名？相关推荐

最新文章

热门文章