1.廖晓格-大数据AI助力金融智能化转型

播放视频

视频文档

1.廖晓格-大数据AI助力金融智能化转型

下载 8

示说网官方

发布于

268

人观看

#未分类

展开查看详情

1 .

2 .大数据AI助力金融智能化转型廖晓格 2022.9

3 . 个人介绍泰为信息科技有限公司廖晓格大数据数据计算平台研发长期大数据平台、AI平台建设经验聚力传媒有限公司PPTV 大数据平台建设平安银行大数据研发部门 ebay 负责大数据基础平台、数据中台、大用户数据平台建设数据风险及AI中台能力的建设携程大数据平台建设华为数据中台

4 .目录 01 银行智能化转型历程 02 AI中台架构设计 03 AI在银行应用场景 04 未来展望

5 . 智能化转型历程基于转型前两个阶段打下的基础，平安银行启动智能化银行3.0建设，建立科学的客群划分机制及由总部”AI大脑“决策引擎驱动的智慧经营体系，全面提升客户的获得感和幸福感。阶段三 2020年 — 至今千人千面/一人千面阶段二 2018年Q4 — 2019年 • 五位一体新模式千人八面 • 全面智能化引领商业模式革新阶段一实现极致客户适当性管理 2016年末 — 2018年Q4 智能化全生命周期经营 • AI Bank开放银行千人一面 • 开启全面数字化的进程基于产品的个性化经营探索 • 3 大互联网产品 • 奠定全面数字化的基础统一客户体验，建立品牌认知

6 . 五位一体新模式 2022年“五位一体”新模式落地，在AI驱动、数据驱动下，做到“比客户还懂客户”。 “五位一体”新模式 5 开放银行场流量池景场景联营，高质量、低成本批量获客客户洞察更深入服 2 AI 银行 3 远程银行 4 线下银行客户经营无断点务模经营链与服务网式智慧经营，覆盖全量客户全生命周期客户体验更满意 1 综合化银行客户价值最大化能力驱动器中台赋能，数据驱动能力支撑数据能力 AI技术能力产品能力运营服务能力风险能力

8 .目录 01 银行智能转型历程 02 AI中台架构设计 03 AI在银行应用场景 04 未来展望

9 . 大数据AI业务架构口袋A、行员A、网银进线、线下、微信/支付宝、智慧财务、智慧经分、赢家APP、PB展业、智数银行、IOT、VR 网金私钻消金信用卡汽融综拓运营业务应用线智 1 智能营销 2 智能风控 3 智能体验 4 经营分析 5 金融服务索推数据产品客户旅程聚客风险聚类侦测营销风控智能搜索 AI机器人经分平台智能财务贷款投资保险数据中台 AI中台中台共享统一数据底层统一知识库数据治理内部数据外部数据集团数据银行统一知识库元数据数据质量主数据管理数据安全数据资产大数据平台 AI基础平台数据研发平台基础平台 FLink ES Hadoop Spark Kylin、Presto Docker K8S 实时计算F+ 离线计算Z+

10 .AI中台总体架构核心能力 ➢ 基于Kubernetes构建AI推理服务云原生应用管理平台，使用istio、 knative、KFServing等Serverless 框架以云服务的形式提供AI能力 ➢ 统一模型全生命周期管理，实现模型开发、模型验证、模型评估、模型上线、模型监控一体化管理 ➢ 统一AI数据能力，沉淀核心高价值可复用特征 ➢ 使用Kubernetes + Docker构建基于容器的AI训练云平台，实现资源隔离、弹性计算，多租户、自动化部署 ➢ 全行GPU资源的统一管理，利用 GPU并行运算能力为深度学习加速

11 . A.AI底座底层平台搭建业务应用监控管理 OCR 智能客服智能推荐广告系统 NLP … 计算框架任务管理 Tensorflow Spark 申请资源 Caffe Pytorch R Python 日志管理容器集群 Kubernetes + Docker 存储基础设施权限管理 CPU GPU FPGA 网络块存储对象存储文件系统 AI与云计算的结合以云服务的形式提供AI的能力 GPU资源的统一管理利用GPU并行运算能力为深度学习加速模型训练使用Kubernetes + Docker基于构资源隔离与资源限制；基于镜像发布；弹性计算（秒级动态扩容）；HA；多租户；自建基于容器的云平台动化部署支持主流深度学习与机器学习框架 TF、Caffe、Pytorch、Spark、xgboot、sklearn 分布式存储块存储、对象存储、分布式文件系统，支持海量训练数据 FPGA加速支持利用FPGA卡对深度学习算法加速（正在调研评估）推理服务

12 .B.AI数据样本中心服务模型效果图片标注模型跑测模型优化模型测试标注系统场评估景视频标注标数据配置组合，生成标准化服务注系图片样本语音样本文本样本视频样本统文本标注样 • 模型识别样本 • 语音搜索 • 意图识别样本 • 资讯视频本集 • 标注回流数据 • 机器人语音对话 • 对话样本 • 活动视频 • 测试平台语音标注数据对接机器人模型识别标注回流测试平台 ASR 特征中心 NLP中台对话

13 . B.AI数据特征中心特征中心产品架构图主要应用场景在线模型训练模型训练模型推理推荐服务向量服务服务特征服务特征检索特征存储任务调度样本输出公共特征 + 私有特征模型训练特征生产配监特征置特征元信息相似特征特征搜索特征组合控模型推理中心管告理离线/实时特征预处理特征分析特征共享警离线特征年龄、性别、学历特征接入 …… 特征注册特征分类离线特征实时特征模型服务实时特征客户请求基础当日累计浏览贷款 Hive Spark ES E+ Flink 设施 PV ……

14 . B.AI数据特征中心-批流一体为了让实时特征能够友好的支持模型训练，并且保证特征实时离线口径一致，基于Flink+数据湖Iceberg的 Kappa架构，建设批流一体的特征平台，支持算法工程师全流程自动上线模型。特征探索模型训练特征推理特征中心数据源实时数仓在线存储 Oracle DIM（Elasticsearch、Mysql、Hbase） Elasticsearch Mysql Flink Flink Mongodb ODS Flink DWD Flink DWS (Iceberg) (Iceberg) (Iceberg) Hbase Kafka Mysql RocketMQ HDFS离线数仓

15 . B.AI数据数据安全金融数据极其敏感，数据安全是大数据高效分析洞察前的“1”。因此在AI平台里分了两套环境（即镜像）： ①沙箱环境：固定范围的表不用申请权限即可分析（脱敏），但不能输出到生产库； ②生产环境：分事前、事中、事后全方面管控安全。无需申请权限输出 1 算法平台（沙箱环境）沙箱库分析用户提供数据脱敏判断判断执行大数据SQL引擎算法平台权限脱敏 SQL （生产环境）权限管理脱敏引擎用户日志是否命中获取数仓层异步发送阻断规则脱敏字段 2 KAFKA 血缘分析消息队列添加安全决策引擎元数据管理标注脱敏字段敏感字段原始层采集报警团队

16 .C.AI平台可视化建模平台系统截图

17 . C.AI平台 AI云原生推理服务推理服务平台是基于Kubernetes 构建的 AI 推理服务云原生应用管理平台，帮助用户AI业务快速上线，提高AI 计算资源的利用效率，实现AI产业的快速落地。发布测试模型中心测试评估模型测试平台 API 模型模型申请发布版本号 AI Cloud ITSM SDK 申请appid 服务 Orchid http 发布模型API SFE Serving Kong API A/B Test CAT Catlog Kubernetes 在线模型API服务 ECS Helm Tiller 模型SDK应用 K8S APIServer SFE Scheduler 自定义模型标准模型 Istiod KF Serving SFE Device plugin Controller Controller A/B A/B App Proxy Proxy App App App App (SDK) (v1) (v2) (v1) (v2)

18 . C.AI平台模型中心基于EPG及模型管理规范，标准化模型研发全生命周期管理，提升模型质量管控，降低模型风险问题，提升模型研发效率模型全生命周期管理数据获取特征探索特征工程模型训练模型管理模型验证模型部署模型监控模型更新模型推理特征中心 AICloud 模型中心模型应用离线、实时 OCR 特征存储算力平台 GPU池化模型管理模型验证部署测试 AB实验模型监控特征接入特征血缘特征加工资源分配租户管理性能测试安全测试灰度发布模拟沙箱模型更新管理逻辑管理 NLP 特征搜索特征复用数据接入任务调度推荐模型监控特征加工特征分析数据回写 AI框架管理模型更新数据更新搜索向量化模型自动更新流程评分卡特征监控分布式训练镜像服务特征模型验证特征更新特征服务特征仿真训练可视化算法池决策模型模型训练

19 .目录 01 银行智能化转型历程 02 AI中台架构设计 03 AI在银行应用场景 04 未来展望

20 . D.AI应用 NLP中台基于AI底座，提升NLP中台能力，对客精确识别用户意图，重构用户体验；对内，标准化服务流程与话术，辅助队伍提升服务能力。智能辅助场景举例智能客服智能辅助智能营销业务场景 AI客户经理借记卡机器人意图识别剧本推荐引导（结合智能银行3.0）辅助信用卡机器人企微机器人知识推荐质检分析远程顾问 AI机器人优化闭环 Oasis AI外呼小安机器人数字人机器人智能质检与分析使用中无感标注 (玲珑心) （玲珑心）以解决问题为导向，提供语音和行员智媲美真人的多模态低成本精准电话触通话质检和知识挖产品矩阵在线多渠道的咨询能辅助的一站式交互机器人达用户的外呼掘（意图、KYC）机器人工作台机器人统一知识库 Oasis组件语音知识库意图实体情绪知识智能语义文本中台能力 FAQ挖掘识别识别识别推荐搜索相似度聚类技术底座 NLP 对话引擎知识图谱 ASR/TTS 大数据

21 . D.AI应用面向业务的NLP自动化训练平台—Metabot 服务渠道 Oasis工作台 AIPM 知识库 AI陪练 UMS平台企业微信接口服务接口服务自动上线服务监控挖掘模型识别模型模型能力热问挖掘 UMS词云文本聚类 FAQ挖掘意图识别情绪识别 KYC识别话术挖掘三元组抽取话术扩写意图挖掘项目管理体系管理标注管理模型管理项目管理模型监控体系管理匹配绑定可视化展示任务创建组合标注模型预标自动训练模型测试基础管理数据回显服务监控冲突识别实体关联通用体系统一质检样本筛选数据回流测试集展示混淆分析话术扩写一键发布 A\B测试 Metabot +AI平台台能力形成一个业务可用的NLP自定义能力平台知识挖掘知识审核智能标注一键训练自动跑测模型更新在线监控

22 .D.AI应用 NLP中台-Oasis 业务办理专员陪练知识运营在专员为客户办理业务过程中，为专员针对特定的业务场景，专员可以通过与将现在真实的聊天记录回流，通过质检、业务场景提供业务流程指引、话术指引，通过对机器人的攻防演练，练习特定业务场景标注、挖掘等流程，沉淀高质量的业务客户意图和实体的识别，为专员推荐场下的服务流程。机器人会给专员作答情知识库。景和组件，提升专员服务效率，已服务况打分，帮助专员发现自己待不足的能 40+场景力和知识。业务场景服务前服务中服务后意图 s 业务运营场景 AI场景话术场景组件实体商机质检意图挖掘测试陪练扩写推荐推荐识别数据标注模型创建模型训练/测试意图/ASR模模型效果标注推荐组合标注标注管理意图模型 ASR模型 KYC图谱模型运营型训练测试意图语料图谱/KYC 实体场景流程组件卡片标签词库数据管理

23 . D.AI应用机器人中台 50+ 机器人 400W+ 知识信用卡机器人借记卡机器人 AI客户经理企业微信机器人中控对话管理内容渲染最优结果领域识别引擎混排引擎参数模版多引擎结果意图上下文 FAQ引擎卡片/组件用户语义理解用户槽位情绪图谱引擎 Query 图片 Answer 用户/行为特征多轮引擎音视频业务/入口属性搜索引擎在线、多引擎训练知识工程知识知识管理日志回流知识定义知识泛化自动化 FAQ知识图谱知识知识聚类知识挖掘任务剧本词槽管理

24 .D.AI应用智能推荐线上请求组件化应用层分期商品积分商品大牌场景馆瀑布流商品详情页将召回算法和排序算法组件化实现品类多样性召回渠道多样性长短期兴趣新鲜度重排层单层打散多层打散专家经验业务规则强插通用化单模型模型融合排序层将普遍使用的算法整合在一 LR GBDT XGBOOST GBDT&LR XGBOOST&LR 起，可以对所有商品推荐场景使用，无需个性化开发协同过滤矩阵分解 ALS 三级类目召回层热度新鲜度 LBS 实时行为关联规则特征工程归一化离散化特征组合降维自动化用户画像物品画像上下文实时特征 Auto-Training自动化训练，无需人工调参和变量筛选数据层业务数据日志数据 24

25 .目录 01 银行智能化转型历程 02 AI中台架构设计 03 AI在银行应用场景 04 未来展望

26 . 未来展望智能银行模式推广AI应用基于客户需求推荐最优产品服务方案 ➢ 全方面推广综合推荐能力，为客户提供全方面的金融产品服务 “多维度分析客户需求，需求比客户更懂客户“ ➢ 深入NLP，OCR等领域，精准识别洞察客户需求验证调优客户需求地图夯实AI平台更懂您的智能银行 ➢ 丰富AI算力，支持大规模模型 “匹配更丰富更准的场景，促成交易“ 精准智能训练及参数调优触达推荐 “基于关键需求，提供 ➢ 标准化AI研发流程，降低AI门更全更适合的产品服务“ 槛，提升效率客户产品服务策略

27 . 欢迎加入愿景欢迎加入技术专业创业心态产品专业热爱产品开放流程专业主动让数据改变无处不在对员工有爱对家庭有爱有爱对团队有爱

28 .

0点赞

1收藏

8下载