广州农村商业银行数据处理平台流批一体及数据开发模块项目招标公告

N
（略）流批一体及数据开发模块项目进行公开招标，选定供应商。
一、项目名称：（略）
（略）流批一体及数据开发模块项目
二、招标单位：（略）
（略）。
三、项目概况（具体详见招标文件）
（一）采购内容
（略）（略）开发服务。
（二）业务/功能需求
本项目的业务/功能主要需求详见下表：
（略）
模块
功能点
业务需求描述
1
流批一体引擎模块基础引擎
分布式消息中间件
支持消息接收、中转和推送服务，并可弹性扩展
2
分布式实时计算引擎
流处理组件支持在流上执行类SQL任务，SQL能力，包括：过滤、转换、基于窗口的计算能力、提供窗口数据的统计能力、关联能力、流数据的拆分与合并
3
（略）
支持高吞吐量、高度容错性，适合运行在通用硬件上
4
分布式批量计算引擎
能够满足大数据量的离线分析和运算
5
资源调度引擎
提供统一的资源管理和调度能力，提供高并发任务调度和资源管理，实现集群资源共享，可伸缩性和可靠性。
6
流批一体引擎模块安全管理
加密算法
支持标准加密算法，如AES等，支持国密加密算法如SM4等
7
权限控制
支持Kerberos认证、LDAP认证，能够基于基于策略和角色的权限控制，支持细粒度的权限控制，可以针对行、时间等进行权限控制
8
操作审计
非查询类操作应记录审计日志，审计对象应包括管理操作和业务操作，包括：HDFS的文件创建/读取；HBase的创建表/删除表；管理员创建集群/（略）/授权。审计日志内容应详细完整，至少包括：用户名、客户端IP、开始时间、结束时间、操作名称：（略）
9
流批一体引擎模块运维管理
健康检查
提供图形化的集群健康巡检工具，能够检查集群相关节点、服务的健康状态，提前发现集群中潜在的问题，并生成健康检查报告,（略）的健康状况
10
滚动升级
支持滚动升级能力，业务不中断，一次升级少量节点，循环滚动，直至集群所有节点完成升级
11
组件管理
支持界面化管控集群中各个组件的配置，并且修改配置后，支持滚动重启组件生效，对业务无影响
12
高可用
包括运维管理在内的所有业务组件的管理节点均需实现高可用，避免单点故障
13
（略）管理
集群管理
能够基于主流hadoop（略），（略）等进行对接开发，并可在数据开发模块中管理、配置和维护集群信息，如增删改查等。
14
租户管理
支持在数据开发模块中管理、配置和维护租户信息，供相关开发任务调用。
15
组件管理
支持将常用的数据开发过程封装为标准开发组件，可对组件的状态，如上线、下线、版本等进行管理。
16
模板管理
支持将各类组件组合成为各类开发流程，形成标准开发模板，供开发人员使用。
17
数据开发模块数据管理
数据字典
具备数据字典功能，（略）的数据库表对应数据字典信息进行手工维护，（略）的数据字典信息，（略）的数据库表对应数据字典信息进行自动识别和维护，（略）的数据字典信息。
18
数据血缘
具备数据血缘功能，（略）的数据血缘信息进行手工维护，（略）的数据血缘信息，（略）的数据库表对应数据血缘信息进行自动识别和维护，（略）的数据血缘信息。
19
生命周期
具备数据生命周期功能，（略）的数据库表进行生命周期管理，可根据生命周期自动对超过数据库表进行清理。
20
脚本解析
具备对SQL、perl等脚本的解析功能，支持批量/单个导入脚本，能够自动识别和登记数据字典和数据血缘信息。
21
数据开发模块开发管理
数据标准
具备数据标准规则功能，可根据需要手工维护、（略）的数据标准规则，支持根据规则对数据开发过程进行约束，在开发过程中，对不符合数据标准规则的开发流程作出相关提示。
22
数据规范
具备数据规范规则功能，可根据需要手工维护、（略）的数据规范规则，支持根据规则对数据开发过程进行约束，在开发过程中，对不符合数据规范规则的开发流程作出相关提示。
23
数据质量
具备数据质量检核功能，可根据需要手工设置数据质量检核规则，如空值等，（略）的数据库表数据进行检核，并生成质量异常信息。
24
过程管理
（略）对接，获取：（略）
25
代码管理
支持与我行Gitlab进行对接，自动提交开发任务对应代码至Gitlab进行集中管理
26
部署管理
支持与我行DevOps平台对接，提供调用接口，DevOps平台可通过接口在数据开发模块实现程序包部署
27
数据开发模块实时数据开发
SQL开发
支持FlinkSQL开发，可通过SQL语法快速高效创建流计算应用
28
JAR开发
支持通过上传自定义JAR包开发，支持DatastreamAPI及DatasetAPI
29
自定义函数管理
支持内置函数以及用户自定义函数，包括SCALAR(标量函数)，AGGREGATE(聚合函数)，TABLE(表函数)三种类型，创建好的自定义函数可直接在画布或SQL两种应用模式下使用
30
智能调试
支持随机生成测试数据或上传自定义数据，模拟运行计算，自助检查计算结果，提前验证业务逻辑的正确性
31
版本管理
支持用户将当前作业的信息保存为多版本
32
数据开发模块批量数据开发
画布开发
支持画布式开发，通过拖拽、点选、配置参数的方式：（略）
33
SQL开发
支持SQL自动补全。代码编辑器支持语法高亮和表名自动补全功能；
支持多个工作窗口。可以同时打开多个代码编辑窗口，同时编写多个查询；
保存常用语句。组织和保存常用的查询语句，方便重复运行；
34
数据脚本开发
支持将SQL封装成可执行的数据脚本。
35
数据接口开发
可以通过可视化配置快速构建数据API，也可以通过代码开发的方式：（略）
36
版本管理
支持用户将当前作业的信息保存为多版本。
37
数据开发模块运行交付
作业发布
支持可视化方式：（略）
38
接口发布
支持可视化方式：（略）
39
监控运维
支持对作业、接口状态进行实施监控，如执行情况、运行状态等
40
补数追数
支持补数追数功能，可根据需要通过设置补追数的日期等参数，重跑/补跑对应作业，完成补数追数。
41
分发执行
可基于作业重要级别及等待时长，实现了作业优先级计算及优先调度，并通过任务队列、多线程并发等技术，实现作业分发及执行的解耦与高效调度。
42
试点实施
迁移存量作业
（略），采用数据开发模块迁移存量30个加工作业和30个卸数作业
43
新增实时指标
基于流批一体模块，采用数据开发模块新增10个实时指标，包括实时指标涉及的实时采集和加工作业实施工作
44
开发规范
制定数据开发规范
根据数据开发模块的功能和特性，（略）使用及数据开发方面的相关规范文档
45
非功能性需求
业务可连续性要求）
恢复时间目标（RTO）要求：
≤24小时；
恢复点目标（RPO）要求：
≤12小时；
46
客户体验需求（选填）
数据开发模块主要用户为数据开发人员，可支持至少100个用户并发使用，各页面响应时间不超过3秒。
四、资金来源
本项目预算金额为345万元，资金来源为企业自筹。
五、供应商资格审查合格条件
（一）供应商依法注册成立并具有独立承担民事责任的能力。
（二）（略）（IDC）（略）公有云服务或私有化（略）场份额排名前四（含）的产品。
（三）（略）产品原厂（原厂指“（略）、亚马逊通技术服务（北京）（略）、（略）、腾讯云计算（北京）（略）、星环信息科技（上海）（略）、（略）”）的授权。
（四）自2020年1月1日后（以合同生效时间或中标通知书落款时间为准），供应商需具备至少2个（含）（略）项目实施案例。
注：案例评判标准与评分细则一致。
（五）供应商未被列入“信用中国”网站中“失信被执行人”、“政府采购严重违法失信行为记录名单”及“重大税收违法失信主体”三个名单内且供应商不处于“（略）”中“政府采购严重违法失信行为信息记录”的禁止参加政府采购活动期间（（略）站查询结果为准，（略）站查询结果均显示无相关记录，视为无上述不良信用记录）
（注：1.“信用中国”（略）径：（略）（https://（略）.cn/）->信用服务->重点领域严重失信主体名单查询->失信被执行人/政府采购严重违法失信行为记录名单/重大税收违法失信主体，该网站需查询上述3个截图；2.“（略）”（略）径：（略）（（略）.cn/）->政府采购严重违法失信行为记录名单，该网站需查询上述1个截图）
（六）单位：（略）
六、关于联合体投标
本项目不接受联合体投标
七、招标文件发布及获取：（略）
（一）招标文件发布日期：2024年1月30日至2024年2月6日9时00分（北京时间）。
（二）报名截止时间：2024年2月6日9时00分（北京时间）。
（三）（略）站：（略）站（（略））、（略）（（略））、（略）（（略））、（略）（（略））媒体发布，本公告的修改、补充，（略）站（https://（略）-esp/）发布。
（四）招标文件获取：（略）
1.完成供应商门户注册
（略）站（网址:https://（略）-esp/或（略）->关于我行->（略））提交注册申请，经我行审核通过后即完成注册（已完成注册的意向供应商，（略）站下载）。
2.进入招标公告页面
完成注册后，（略）站，点击我的工作台->采购公告->更多，进入公告列表页面。在该页面找到本项目招标公告，点击该公告标题即可进入公告详情页面。
3.获取：（略）
点击页面底部领取文件按钮，进入报名申请页面即可下载招标文件。供应商在页面下载文件后，需在领取采购文件截止时间前，确认是否参加。
八、报名登记
（一）报名材料：提供报名意向书原件、营业执照复印件及授权函原件（格式详见附件，需加盖公章）。
（二）递交时间：同报名截止时间。
（三）递交地点：（略）
（四）递交方式：（略）
报名截止时间前专人送达,（略）。
九、POC测试
本项目设置POC测试环节。意向供应商按我行要求及时递交报名材料后，我行将统一组织意向供应商进行POC测试，具体测试时间、测试内容及测试要求详见测试文件，测试文件的获取：（略）
十、投标人的确定
1.本项目采用资格后审方式：（略）
2.按照本公告要求和本项目招标文件要求递交投标文件的投标人不足3名时为招标失败。招标人：（略）
十一、供应商需提交的资格审查资料（按照投标文件的编制要求，壹式陆份（壹份正本伍份副本,若正本与副本有不一致，以正本为准）、装订成册、编制页码并进行密封，作为投标文件的一部分，在投递投标文件的截止时间前，按招标文件要求递交至指定地点：（略）
（一）提供有效的营业执照复印件。（略），（略）的授权函，具体格式自拟；
（二）（略）（IDC）（略）私有化（略）场份额报告。
（三）（略）产品原厂（原厂指“（略）、亚马逊通技术服务（北京）（略）、（略）、腾讯云计算（北京）（略）、星环信息科技（上海）（略）、（略）”）出具的产品授权书。
（四）提供自2020年1月1日后（以合同生效时间或中标通知书落款时间为准），供应商具备的至少2个（含）（略）项目实施案例的证明材料。证明材料需提供体现上述要素要求的项目合同关键页或中标通知书。
注：案例评判标准与评分细则一致。
（五）项目评审前，（略）径进行查询，如查询到相关失信记录，但记录已失效，供应商须提供相关证明资料。（（略）站查询结果为准，（略）站查询结果均显示无相关记录，视为无上述不良信用记录）。
十二、投标文件的递交
（一）递交投标文件截止时间：同开标会议召开时间。
（二）递交地点：（略）
（三）递交方式：（略）
1.递交投标文件截止时间前快递送达，（略），收件人陈女士，电话（略）。为保证投标文件能够按要求送达我行，建议寄出时间不晚于2024年3月4日（北京时间）。
2.递交投标文件截止时间前专人送达,送达地（略）。
供应商门户操作：建议在递交投标文件截止时间前2个工作日(即：2024年3月5日)在我行供应商门户（登录供应商门户后，点击参审应标菜单找到对应的项目，进入项目后在【投标】版块进行操作）（略）响应文件的递交方式：（略）
十三、开标会议
（一）开标会议召开时间：2024年3月7日9时00分（北京时间）。
（二）开标会议召开地点：（略）
十四、联系方式：（略）
（一）联系人：（略）
（二）联系电话：（略）
（三）电子邮箱：（略）
十五、潜在投标人或利害关系人对本招标公告及招标内容有异议的，向招标人：（略）
异议受理部门：（略）
异议受理电话：（略）。
地址：（略）
异议受理邮箱：（略）
附件：（略）流批一体及数据开发模块项目报名意向书等格式文本.doc
（略）
2024年1月30日