[フレーム]
yuezhilangniao
Aray1234
星汉灿烂星河
离线数仓开发基础,开发语言(Hive SQL,Shell、Python),开发环境隔离,完整开发流程(面试高频追问)
在数据仓库开发中,HiveSQL是核心开发语言,占比达70%以上,主要用于数据清洗、转换和汇总。Shell脚本(15%)用于调度任务封装,Python(10%)处理复杂业务逻辑和质量校验。数仓表数据存储在HDFS上,表结构元数据存放在MySQL等关系型数据库中,通过Hive进行管理。开发与生产环境严格隔离,通常分为开发、测试和生产三层,通过数据库名、HDFS目录和权限控制实现隔离。开发人员在生产环境仅需只读权限(SELECT),数据修复通过调度系统或DBA执行,确保安全可追溯。
运维老郭
【Istio实战】Istio 服务网格生产级指南:核心架构、流量管理、安全策略与多集群部署
本文从SRE实战视角,系统梳理了Istio服务网格的核心工作机制。文章首先解析了Istiod控制平面与Envoy Sidecar数据平面的架构职责,随后深入讲解VirtualService和DestinationRule两个核心CRD的配置要点——重点剖析了权重路由的常见误区,避免金丝雀发布策略失效。在安全方面,详细说明了mTLS的PERMISSIVE到STRICT的平滑过渡策略,以及AuthorizationPolicy的配置实践。针对多集群场景,本文特别强调了信任域别名(trustDomainAlias
kishu_iOS&AI
Harness DeepAgent 实战:长任务 Agent 的任务编排、中间件与 Demo 落地
DeepAgent:面向长任务的Agent增强架构 DeepAgent是基于LangChain的增强型Agent架构,专为处理长任务、多步骤、复杂上下文场景设计。它通过预装中间件提供文件工作区、任务列表、子代理、上下文压缩等能力,解决了普通Agent在长任务中的局限性。核心组件包括:文件系统中间件(大结果分页处理)、任务列表中间件(多步骤规划)、子代理中间件(任务分解执行)、上下文压缩中间件(管理长历史)。相比普通Agent,DeepAgent更适合代码分析、多文件处理等复杂自动化任务,但执行链路更复杂。该
作者推荐
- 范桂飓
- AWS Global Community Hero,EdgeGallery 开源社区架构组副主席及秘书处成员,跑步与自行车运动爱好者。 - 2016 年度十大博客之星得主 - 2021 年度十大博客之星得主 - 2022 年度博客新星评委 - 2023 年度博客之星评委 - 2024 年度博客之星评委
关注
- 韩曙亮
- 中国人民大学硕士 , 专注于 移动开发 领域 , 博客专家 , 2023 年博客之星 TOP1 , 2021 年博客之星 TOP9 , 华为云 云享专家 , 阿里云社区 专家博主 , 51CTO 专家博主 ;
关注
- 谷哥的小弟
- 历任研发工程师,技术组长,项目经理;曾于2016年、2020年两度荣获CSDN年度十大博客之星。出版《MyBatis核心技术全解与项目实战》、《大模型应用开发实践 基于Spring AI+DeepSeek实现》以及《Spring AI大模型应用开发》等多部技术图书。 十载寒冰,难凉热血;多年过去,历经变迁,物是人非。 然而,对于技术的探索和追求从未停歇。 坚持原创,热衷分享,初心未改,继往开来!
关注
- 李发展
- 《iOS移动开发从入门到精通》、《神奇的Photoshop脚本自动化与插件开发》、《幻灯之美-PPT设计艺术》图书作者,苹果商店热门应用《互动教程》作者,互动教程网创始人。拥有20多年的IT行业工作和教学经验,曾就职于知名外企,主要负责iOS高级开发、Java开发,服务过中国电信,宾利,古琦,香格里拉,杜蕾斯等行业标杆品牌。拥有丰富的实战和教学经验,授课形式不拘一格。熟悉iOS、Swift、Java、UI设计、Javascript开发等技术。
关注