当前位置: 首页 > news >正文

大数据Flink(一百零七):阿里云Flink的应用场景

文章目录

阿里云Flink的应用场景

一、​​​​​​​背景信息

二、​​​​​​​​​​​​​​部门场景

三、​​​​​​​​​​​​​​技术领域

1、​​​​​​​​​​​​​​实时ETL和数据流

2、​​​​​​​​​​​​​​实时数据分析

3、​​​​​​​事件驱动应用

4、​​​​​​​​​​​​​​风控监测系统


阿里云Flink的应用场景

这里将以部门场景和技术领域场景为例,为我们介绍实时计算Flink版的大数据是实时化场景。

一、​​​​​​​​​​​​​​背景信息

作为流式计算引擎,Flink可以广泛应用于实时数据处理领域,例如ECS在线服务日志,IoT场景下传感器数据等。同时Flink还能订阅云上数据库RDS、PolarDB等关系型数据库中Binlog的更新,并利用DataHub、SLS、Kafka等产品将实时数据收集到实时计算产品中进行分析和处理。最终,分析结果可写入不同的数据服务中,例如MaxCompute、MaxCompute-Hologres交互式分析、PAI机器学习、Elasticsearch等,以提高数据利用率,满足业务需求。

 

二、​​​​​​​​​​​​​​部门场景

从企业部门职能的角度,可以将实时计算Flink版划分为以下场景:

  • 业务部门:实时风控、实时推荐、搜索引擎的实时索引构建等。
  • 数据部门:实时数仓、实时报表、实时大屏等。
  • 运维部门:实时监控、实时异常检测和预警、全链路Debug等。

 

三、​​​​​​​​​​​​​​技术领域

从技术领域的角度,实时计算Flink版主要用于以下场景:

1、​​​​​​​​​​​​​​实时ETL和数据流

实时ETL和数据流的目的是实时地把数据从A点投递到B点。在投递的过程中可能添加数据清洗和集成的工作,例如实时构建搜索系统的索引、实时数仓中的ETL过程等。

 

2、​​​​​​​​​​​​​​实时数据分析

数据分析指的是根据业务目标,从原始数据中抽取对应信息并整合的过程。例如,查看每天销量前10的商品、仓库平均周转时间、文档平均单击率、推送打开率等。实时数据分析则是上述过程的实时化,通常在终端体现为实时报表或实时大屏。

3、​​​​​​​事件驱动应用

事件驱动应用是对一系列订阅事件进行处理或作出响应的系统。事件驱动应用通常需要依赖内部状态,例如欺诈检测、风控系统、运维异常检测系统等。当用户行为触发某些风险控制点时,系统会捕获这个事件,并根据用户当前和之前的行为进行分析,决定是否对用户进行风险控制。

4、​​​​​​​​​​​​​​风控监测系统

实时计算Flink版可以处理复杂的流处理和批处理任务,也提供了强大的API,执行复杂的数学计算并执行复杂事件处理规则,帮助企业对实时数据进行实时分析,提高企业的风控能力。例如检测APP中的点击行为、识别loT数据流不规则变化等。


  • 📢博客主页:https://lansonli.blog.csdn.net
  • 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
  • 📢本文由 Lansonli 原创,首发于 CSDN博客🙉
  • 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨

相关文章:

  • 北京网站建设多少钱?
  • 辽宁网页制作哪家好_网站建设
  • 高端品牌网站建设_汉中网站制作
  • npm ERR! missing script: serve
  • 基于MPC在线优化的有效集法位置控制器simulink建模与仿真
  • 免杀笔记 ---> 函数踩踏 PEB寻址
  • 获取UTC时间计算时间
  • POE服务机器人-快速开始
  • <Rust>使用rust实现crc16_modbus校验码生成?
  • 使用Cython调用CUDA Kernel函数
  • 【Rust光年纪】探索Rust语言中的WebSocket库和框架:优劣一览
  • 探索Python为何成爬虫开发首选
  • C++的STL简介(三)
  • css实现文字根据条件渐变
  • 黑神话:悟空
  • 如何构建AI产品:OpenAI与前Shopify产品负责人Miqdad Jaffer的经验分享
  • TDEngine(taos) 涛思数据库-java写入数据
  • [Git][分支管理][上]详细讲解
  • 【Leetcode】101. 对称二叉树
  • [数据结构]链表的实现在PHP中
  • 【RocksDB】TransactionDB源码分析
  • 【翻译】Mashape是如何管理15000个API和微服务的(三)
  • 2017前端实习生面试总结
  • iOS帅气加载动画、通知视图、红包助手、引导页、导航栏、朋友圈、小游戏等效果源码...
  • java架构面试锦集:开源框架+并发+数据结构+大企必备面试题
  • mongo索引构建
  • Python语法速览与机器学习开发环境搭建
  • Vue.js 移动端适配之 vw 解决方案
  • Vue全家桶实现一个Web App
  • Zepto.js源码学习之二
  • 从零开始的无人驾驶 1
  • 技术攻略】php设计模式(一):简介及创建型模式
  • 离散点最小(凸)包围边界查找
  • 聊聊redis的数据结构的应用
  • 微信公众号开发小记——5.python微信红包
  • 06-01 点餐小程序前台界面搭建
  • Nginx实现动静分离
  • ​比特币大跌的 2 个原因
  • # linux 中使用 visudo 命令,怎么保存退出?
  • #在线报价接单​再坚持一下 明天是真的周六.出现货 实单来谈
  • (2022 CVPR) Unbiased Teacher v2
  • (27)4.8 习题课
  • (4)事件处理——(7)简单事件(Simple events)
  • (C#)Windows Shell 外壳编程系列9 - QueryInfo 扩展提示
  • (java版)排序算法----【冒泡,选择,插入,希尔,快速排序,归并排序,基数排序】超详细~~
  • (二)windows配置JDK环境
  • (附源码)springboot工单管理系统 毕业设计 964158
  • (面试必看!)锁策略
  • (南京观海微电子)——I3C协议介绍
  • (转)视频码率,帧率和分辨率的联系与区别
  • (转载)VS2010/MFC编程入门之三十四(菜单:VS2010菜单资源详解)
  • *p++,*(p++),*++p,(*p)++区别?
  • .htaccess 强制https 单独排除某个目录
  • .NET 8.0 发布到 IIS
  • .NET C# 使用 SetWindowsHookEx 监听鼠标或键盘消息以及此方法的坑
  • .Net Core 中间件验签
  • .net dataexcel 脚本公式 函数源码
  • .net 简单实现MD5