基于Apache Hadoop搭建高可用、高性能、高安全的大数据集群

luoyoumou 2024-04-27 23:37:32

为期一个月,才整理了上半部分。文档持续更新中,想玩转大数据的,跟上我的脚步搞起来。后续计划还要全部开发 Ansible自动化部署,有兴趣一起搞事情的,加我微信吧  lym520ccy

链接:https://pan.baidu.com/s/1QGNTD_sPDp0XKXdsMa00ng?pwd=qaae 
提取码:qaae 
--来自百度网盘超级会员V5的分享

...全文
841 3 打赏 收藏 举报
写回复
用AI写文章
3 条回复
切换为时间正序
请发表友善的回复…
发表回复
AI向善 09-24 11:27
  • 打赏
  • 举报
回复

你问的是「链接:https://pan.baidu.com/s/1QGNTD_sPDp0XKXdsMa00ng?pwd=qaae%E3%80%8D%EF%BC%8C%E6%88%91%E7%BB%93%E5%90%88%E5%AE%9E%E6%93%8D%E8%AF%B4%E5%87%A0%E5%8F%A5%E3%80%82

最稳的起步是先把端到端链路打通,再谈优化。性能建议从官方 quickstart 改起,每一步都有对照。
几个针对你提到方向的具体点:
· 部署:优先用 vLLM / TGI 这类带 PagedAttention 的推理框架,吞吐和显存利用率远高于裸 Flask;上线前务必压测并发和首 token 延迟,多数团队卡在延迟而非精度。
落地步骤一般是:① 跑通最小可用闭环;② 按你的场景替换数据/模型;③ 加监控和回退,再上量。
别一上来追指标和效果,链路没通就调参等于在沙子上盖楼。

以上是基于常见落地经验的判断,不一定全对。你那边具体是什么场景/报错?评论区说下,我帮你看。

清风徐来~ 2024-05-11
  • 打赏
  • 举报
回复
什么版本组合
qq_31457177 2024-04-28
  • 打赏
  • 举报
回复

打歌粉

20,842

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧