112_业务数仓_业务数仓项目总结
| 课时名称 | 课时知识点 |
|---|---|
| 112_业务数仓_业务数仓项目总结 | 112_业务数仓_业务数仓项目总结 |
相关推荐
数据工程落地全解析:从采集到数仓的架构设计与实践指南
数据工程作为连接业务与分析的桥梁,核心在于构建稳定、高效、可信的数据管道。从数据采集、存储选型到任务调度,每一步都需权衡一致性、时效性与成本。随着ETL向ELT演进,以及实时数仓、湖仓一体等架构的普及,现代数据平台正从单一离线处理转向流批一体。Flink、Kafka、Spark等工具在具体场景中如何协同,如何解决数据重复、倾斜与质量保障问题,是工程实践中的关键挑战。本文基于真实项目经验,系统梳理数据工程从0到1的完整链路,帮助读者建立全局认知,并为优化已有系统提供参考。
实时舆情治理_1项目话术
面试官您好,我叫高鹏博。我主要负责社区舆情业务,主要做的是社区不良舆情治理数据支持。我们在做数据支持的时候,发现了三个问题 1)在节日促销时候,一些商家故意把价格抬高,薅平台补贴的羊毛,同时2)一些用户发现在节日促销的优惠活动,通过某种手段实现0元购的方法,并发布在第三方站点上(小红书,快手等)薅平台羊毛,造成资产损失。同时3)会有一些用户会对平台进行诋毁,对一系列服务问题(商品、门店、配送、售后)过度的诋毁,造成平台声誉受损。
【信息科学与工程学】【数据中心】 第三篇 智算中心全业务场景矩阵
技术:MPI/OpenMP优化、InfiniBand/RoCE网络、Lustre/GPFS并行文件系统。技术:NVLink/NVSwitch高速互联、RDMA网络、检查点存储、混合精度训练。技术:Kubernetes运营商、服务网格、Serverless框架。技术:VXLAN/EVPN、SRv6、智能网卡、DPDK/智能网卡。运营:AI框架优化、显存优化、容错训练、多租户GPU隔离。技术:KVM/ESXi虚拟化、SR-IOV、智能网卡、快速发放。
后端开发 Docker4.99.0 AppleSilicon 苹果芯片 Mac 安装包
本资源为 Docker Desktop 4.99.0 苹果芯片(Apple Silicon)专用安装包,原生适配 M 系列 Mac,可快速搭建本地容器开发环境,支持镜像拉取、容器编排、项目打包部署。适合后端开发、运维、全栈开发者,用于本地微服务、测试环境、项目容器化开发。
triton-inference-server-ge-backend
新版本特性 v2.3.0 支持对全局、session、graph 的options进行添加,从而进一步调优模型,相关案例请参考 性能调优方法论。 支持采用分档模式将符合条件模型转化为静态图,提高吞吐性能。 补充如何采用分档模式+锁核+调整精度,进一步提高性能。 在AscendHub下载镜像时需确认好版本,若使用旧版本镜像,需要手工下载源码编译生成新的backend后才能支持新特性。 版本特性 v2.2.0 支持从onnx文件读取模型输入输出信息, config中若无指定input,output,将会自动从文件中读取; 调整动态图在多实例下使用多Session方式,提高并发吞吐(显存占用会增高); 支持动态batch场景小batch动态合并特性,配合多Session,提高吞吐; 补充调优方法论以及cnclip模型的最佳实践; 支持多模型特性,可支持同时拉起多个模型,提高显存利用率; 支持非0轴动态shape场景; 支持TensorFlow的pb文件。



