项目名称:	20数据湖项目-大数据平台系统
项目概况：	采购内容和范围： 1、应用服务优化： 开发功能优化：实现在线脚本编辑、程序开发、数据加工；支持通过自定义在线脚本编辑方式进行数据查询和开发加工，支持的脚本包括但不限于python，perl，SQL脚本，存储过程等；自动同步调度，通过数据的输入输出关系自动生成调度依赖关系，同时具备扩展性，支持对开发的程序脚本进行调度参数的设置，一站式完成开发，支持字段级别血缘关系分析，支持小文件合并；数据供应，支持对于数据配置自动加载至目标库，并支持生成的数据文件可指定字符集、分隔符、行分隔符等。 调度及监控运维优化：支持根据集群机器资源进行任务并发分配、并发控制和负载均衡；支持调度作业的总体监控数据展示，支持集群节点的状态监控；可视化监控作业运行，支持调度出错后多种手工干预手段；支持作业前后依赖的血缘分析功能，支持血缘图形化展示；支持作业启动、中断、重做、暂停、断点、续作、强制成功，忽略依赖等多种人工干预操作；支持作业日志在线查看和下载；支持调度功能相关API；支持未来因作业量增大，进行相关调度节点的快速、平滑新增管理。 查询服务组件优化：支持多种数据源类型的开发及数据查询，包括但不限于HIVE、Hbase、ES、Hudi、clickhouse等组件；支持在线图形化的开发方式，以HTTP+json的方式提供在线数据查询的接口能力；支持数据查询的ES+Hbase二级索引查询功能；支持在线测试。 2、实现存算分离，新集群部署，结构化集群及非结构化集群部署、旧集群拆除。 3、数据仓库历史数据迁移：将数据仓库系统历史数据转移到数据湖中存储，降低数据仓库系统数据存储压力，数据仓库更专注于行内业务系统数据的整合加工，保障数据加工的效率，提升数据仓库系统的稳定性。 4、新接数据入湖：将大数据风控平台、新ECIF系统数据按应入尽入原则接入数据湖管理。 5、大数据平台数据迁移：完成结构化、非结构化集群数据迁移到新集群。 6、ELT程序迁移：3000多个ETL程序迁移，包括归档程序、加工程序、实时计算程序、供应程序等。 费用类项目，列支于 2025 年度 信息系统维护 费用。
项目单位：	昆仑银行
项目类别：	服务类
项目分类：	三类
供应商资格要求：	详见采购邀请书
采购文件的获取：	直接采购公示：2025年4月3-2025年5月

本招标项目仅供正式会员查阅，您的权限不能浏览详细信息,请点击注册/登录，联系工作人员办理入网升级。
联系人：刘欣
电话：010-68809590
手机：13522553206（欢迎拨打手机/微信同号）
邮箱：kefu@bidnews.cn

请注册或升级以上会员，查看投标方式

用户名:
密   码:

• 升  会员升级
• 款  付款指导
• 咨询   刘欣: 135 2255 3206

微信扫码

实时联系