会员中心
搜索
登录
注册

解决方案

数字化转型通用方案行业方案安全方案大数据人工智能物联网行业展望自动控制其他

产品|技术

白皮书产品介绍技术介绍技术创新模型算法

政策|规范

政策规范行动计划

电子书

电子书课件

报告|论文

报告模板论文

2.唐云-阿里巴巴在Flink大规模持久化存储的实践之道

化大为小 Make big things smaller ●有些问题不是bug或者使用不当，就是达到了大数据的系统瓶颈 Some problems just would hit the bottleneck of big-data system ●分布式处理的核心就是将大数据量的问题化为-个个小问题。 Make big things smaller is the key to distributed environment.

  • 2021-06-29
  • 阅读137
  • 下载0
  • 34页
  • pdf

3.将Apache Flink用作一体化的数据处理平台-崔星灿

Q1.如何对流数据采样? How to sample streaming data? Q2.如何提供类型信息（表模式） ? How to provide the type information （schema）? Q3.如何展示数据中错误? How to show errors in data? Q4.如何实时获取中间结果? How to fetch the intermediate results in real time? Q5.如何避免重复计算? How to avoid duplicated computation? Q6.如何反复提交作业? How to submit jobs iteratively?

  • 2021-06-29
  • 阅读169
  • 下载0
  • 27页
  • pdf

4.李劲松[终稿][云邪-之信] 深入探索 Flink SQL 流批统一的查询引擎与最佳实践

.容错- Batch shuffle mode .资源模型一提高资源利用率 . Hive集成- Meta/Format/UDF 兼容 . SQL优化-丰富完善的Rules . SQL支持-完善的SQL支持，包括TPC-DS等测试集 .算子一高性能优化

  • 2021-06-29
  • 阅读130
  • 下载0
  • 44页
  • pdf

5.徐帅宋辛童-细粒度资源管理及调度

01流批一体的资源管理 Resource Management for StreamingandBatch Processing 02流批一体的任务调度 Task Scheduling for StreamingandBatch Processing a如何“完美”地调度流批作业? How to schedule batchandstreaming job perfectly? b基于Concurrent-Group的调度 Scheduling based on concurrent group 测试效果与未来发展

  • 2021-06-29
  • 阅读159
  • 下载0
  • 35页
  • pdf

5Deep dive into Pyflink & integration with Zeppelin

01 Zeppelin对PyFlink的支持 Support of PyFink in Zeppelin 02 PyFlink社区 状态 The Community Status of PyFlink 03 PyFlink核心技术剖析 Analysis of PyFlink core technology 04 PyFlink经典 案例 The classic use case of PyFlink

  • 2021-06-29
  • 阅读137
  • 下载0
  • 40页
  • pdf

1李锐&王刚-Apache Flink与Apache Hive的集成

统一的Catalog接口 Unified Catalog API 提供基于内存的和可持久和的Catalog实现 Provide both in- memoryandpersistent catalog implementations 支持与Hive的互操作: Inter opera bility with Hive: 访问Hive元数据 Access to Hive metadata 读写Hive表 Re ad/write Hive ta bles 支持Flink作为Hive的引擎（长期目标） Add Flink as a Hive execution engine （long- term plan）

  • 2021-06-29
  • 阅读148
  • 下载0
  • 19页
  • pdf

2王金海-3-.pptx趣头条基于Flink+ClickHouse构建实时数据平台

业务场景与现状分析 Flink-to-Hive小时级场景 Flink-to- ClickHouse秒级场景 未来发展与思考

  • 2021-06-29
  • 阅读143
  • 下载0
  • 28页
  • pdf

3袁尤军-3-FFA2019分论坛开源大数据-袁尤军291020_对外终稿

1,处理时间，事件事件，Watermark Process ingTime, EventTime, Watermark 2,固定\滑动\会话窗口，Row\Range Over Tumble, Hop, Ses sion, Row\Range Over Windows 3,支持File, MQTT, Kafka数据源和目的地 Support File, MOTT, Kafka as sourceandsink 4,检查点、故障恢复. Checkpointingandrecovering

  • 2021-06-29
  • 阅读141
  • 下载0
  • 12页
  • pdf