import argparse
import logging
import sys
from pyflink.common import WatermarkStrategy, Encoder, Types
from pyflink.datastream import StreamExecutionEnvironment, RuntimeExecutionMode
from pyflink.datastream.connectors.file_system import FileSource, StreamFormat, FileSink, OutputFileConfig, RollingPolicy
env = StreamExecutionEnvironment.get_execution_environment()
env.set_runtime_mode(RuntimeExecutionMode.BATCH)
# write all the data to one file
env.set_parallelism(1)
ds = env.from_source(
source=FileSource.for_record_stream_format(StreamFormat.text_line_format(),
'./test.csv')
.process_static_file_set().build(),
watermark_strategy=WatermarkStrategy.for_monotonous_timestamps(),
source_name="aaaa"
)
ds.print()
env.execute()
pyflink 读取excel
scan7242024-05-01 13:07
相关推荐
孟健6 小时前
Karpathy 用 200 行纯 Python 从零实现 GPT:代码逐行解析码路飞8 小时前
写了个 AI 聊天页面,被 5 种流式格式折腾了一整天 😭曲幽10 小时前
FastAPI压力测试实战:Locust模拟真实用户并发及优化建议敏编程15 小时前
一天一个Python库:jsonschema - JSON 数据验证利器前端付豪15 小时前
LangChain记忆:通过Memory记住上次的对话细节databook15 小时前
ManimCE v0.20.1 发布:LaTeX 渲染修复与动画稳定性提升花酒锄作田1 天前
使用 pkgutil 实现动态插件系统前端付豪1 天前
LangChain链 写一篇完美推文?用SequencialChain链接不同的组件曲幽1 天前
FastAPI实战:打造本地文生图接口,ollama+diffusers让AI绘画更听话老赵全栈实战1 天前
Pydantic配置管理最佳实践(一)