数据仓库软件清采比选号采购公告

数据仓库软件清采比选号采购公告

采购项目名称:数据仓库软件
采购单位:北京市清华大学
付款方式:合同签订后50%,验收合格后50%
签约时间要求:成交后5个工作日内
交货时间要求:签订合同后3个工作日内
交货地址:北京市清华大学
技术参数及配置要求:128核,校内私有化部署,具备优异性能的数据分析、复杂场景数据查询能力,能够支持极速实时数据分析和多场景复杂查询能力。支持海量数据,多种数据源,多样查询需求,交互式分析,成本可控等场景。数据分析引擎应具备以下功能: 1. 库表管理-库表增删改查:支持新建数据库/表;支持删除数据库/表;支持修改更新数据库/表结构;支持分区管理/删除;△支持克隆建表配置 (需提供系统截图) 2. 库表管理-信息展示:支持Schema 展示 / DDL 展示;支持表分区信息展示;支持数据预览能力;支持表列信息展示;△支持底层表节点分布展示 (需提供系统截图) 3. 库表管理-底层表自动同步:支持以下表自动同步到控制台:1、支持高可用表引擎、高可用去重表引擎家族表; 2、支持外表(如 MySQL,HDFS,S3等) 4. 数据导入-【实时导入】数据源:※?支持 Kafka 实时数据写入能力,并支持 exactly-once 语义去重写入,写入后可稳定、秒级查到数据,无需数据准备时间;支持导入性能≥ 20MB/s/节点 5. 数据导入-【实时导入】数据格式:△支持JSON数据源数据导入 (需提供系统截图) 6. 数据导入-【实时导入】解析 Schema:支持Kafka 抽样,JSON数据解析,引擎通过订阅 Kafka 上的 topic,拉取并解析 topic 中的消息数据,自动解析映射表schema;△支持传入建表 SQL 解析 (需提供系统截图) 7. 数据导入-【离线导入】数据源:△支持外表查询和导入 MySQL,ClickHouse,Hive,HDFS,对象存储(兼容 S3 协议)等数据的能力(需提供系统截图) 8. 数据导入-【离线导入】数据格式:△支持CSV、JSON、Parquet格式离线数据导入 (需提供系统截图) 9. 数据导入-【离线导入】解析 Schema:支持通过文件解析; - 传入 JSON 解析; - 传入建表 SQL 解析 10. 数据导入-其他任务操作:建表支持配置字段默认值;支持自定义函数表达式;支持修改任务名称以及备注;△ 支持任务克隆创建(需提供系统截图) 11. 查询管理-SQL语法:※同时支持 ANSI SQL 与 ClickHouse SQL语法;支持基于SQL-99常用的标准SQL语法;支持常用数据类型,包括字符、整数、浮点数、定点数;支持常用分析函数,包括求和、计数、非重复计数、最大值、最小值。 12. 查询管理-Worksheet: 支持查询编辑器;支持可视化展现;△支持在线存储SQL脚本(需提供系统截图) 13. 查询管理-SQL历史:△提供查询SQL运行历史展示及耗时 (需提供系统截图) 14. 查询管理-SQL诊断:△支持查看SQL运行历史,分析诊断慢SQL的相关信息,提供查询摘要、诊断结果、查询负载、执行计划的可视化展示 (需提供系统截图) 15. 查询管理-浏览器下载查询结果:支持导出数据至本地(CSV) 16. 安全与权限管理-用户权限模型:△支持RBAC:用户,角色,权限,对象的四元组。(需提供系统截图) 17. 安全与权限管理-权限粒度:控制面支持:库级,表级,列级;△引擎支持:行级 (需提供系统截图) 18. 安全与权限管理-双因子认证登录:支持双因子认证登录 19. 安全与权限管理-加密:支持 SSL 传输加密和数据库透明加密;支持国密3、国密4的加密函数 20. 运维管理-集群管理:△支持管控多个集群,一个管控面管理多个业务集群,简化集群运维管理难度,同时可展示集群对应产品/组件版本(需提供系统截图) 21. 运维管理-集群操作:支持重启集群以及重启节点;△支持修改配置参数,一键下发(需提供系统截图) 22. 运维管理-集群扩容:△支持垂直扩容,支持扩容副本数 (需提供系统截图) 23. 运维管理-运维任务:支持建库、建表、用户修改等分布式 SQL 的状态查询与管理。 24. 运维管理-修改配置:△支持可视化修改系统配置/用户配置,并一键下发。支持高并发模式和大查询模式2个配置模板 (需提供系统截图) 25. 运维管理-定时任务:支持为SQL/导入任务设置定时任务 26. 运维管理-监控告警:支持通过 Grafana 进行操作系统指标、ClickHouse 指标、查询指标三个维度的数据监控,以及邮件、飞书、Webhook 的告警功能。 27. 运维管理-集群健康度:△支持通过操作系统指标、ClickHouse 指标、查询指标三个维度进行健康度评分。(需提供系统截图) 28. 运维管理-资源组管理:△支持通过资源组限制用户的 CPU 与内存使用。(需提供系统截图) 29. 运维管理-备份恢复:支持表级别的备份与恢复 30. 接入方式-客户端接入:支持ClickHouse Client、DBeaver、DataGrip客户端接入 31. 接入方式-API 接入:支持数据管理、数据导入等常用的API 32. 接入方式-网关接入:支持网关接入并与管理面深度整合,用于引擎层 ClickHouse 数据库的 HTTP/TCP 代理及负载均衡器 33. 接入方式-Driver接入:支持JDBC、Python Driver、Golang Driver接入 34. 接入方式-BI接入:支持Tabluea、Superset、FineBI、Datawind接入 35. 接入方式-高可用表引擎:高可用表引擎支持主备insert数据原子性, 支持多副本数据存储策略。 36. 接入方式-高可用Kafka表引擎:支持写入容灾,可自动切换主备写入内置缓冲层,高效支持Kafka数据落盘,避免文件落地太碎引发merge放大。 37. 接入方式-去重表引擎:支持去重表引擎异步去重的,支持数据同步插入即去重;支持表级唯一键,分区级唯一键;支持部分列更新;支持版本字段;支持 GDPR Delete;全面兼容 Alter 语法 38. 接入方式-外表引擎支持:支持 MySQL,Hive,S3,HDFS 等外表引擎。 39. 接入方式-视图支持:支持普通视图;支持单表实时物化视图;支持多表异步物化视图; 40. 接入方式-库引擎支持:支持 Atomic,MaterializeMySQL 等库引擎。其中 MaterializeMySQL 支持集群模式,通过创建 MaterializedMySQL数据库引擎,将MySQL中的表映射到引擎中。;支持引擎服务作为MySQL副本,读取Binlog并执行DDL和DML请求,实现基于MySQL Binlog机制的业务数据库实时同步功能 41. 接入方式-SQL语法:完全兼容 ClickHouse SQL 21.8 与 ANSI SQL;基本兼容 ClickHouse SQL 23.3 的语法;部分兼容 MySQL 42. 接入方式-数据类型:※? 支持常用的简单数据类型,如Int,UInt,Date,DateTime,String,FixedString,Decimal;支持复合类型:Array,Map;支持 ClickHouse 新增包含23.3 的 JSON,Int128,Date64;支持 Bitmap 数据类型,支持交集、并集、差集等比特计算函数,便于人群圈选业务开发;GIS 相关数据类型(Point) 43. 接入方式-优化器支持:支持多表JOIN等复杂查询,提供基于规则优化(RBO)、代价优化(CBO)、数据依赖优化(DBO)、查询反馈优化(HBO)能力;引擎计算层支持向量化执行,充分利用CPU并行处理能力,使其性能发挥到极致。 44. 接入方式-二级索引:支持多种二级索引,包Skip Index、Bitmap Index(针对数组类型的二级索引,可以提升数组查询性能)、HNSW 索引、R-Tree 45. 接入方式-列投影:支持列投影 46. 接入方式-标准函数:支持聚合函数,算数函数,数组函数,MAP函数,Bitmap函数,比较函数,条件函数,日期和时间函数,编码函数,哈希函数,逻辑函数,类型转换函数,URL函数,窗口函数,行为分析函数 47. 接入方式-自定义函数:※支持 SQL/Python/Golang UDF自定义函数;※?支持通过行为分析函数直接进行留存分析,漏斗分析,路径分析,便于行为分析业务开发 48. 接入方式-多级存储:高可用表引擎,去重高可用表引擎支持冷存储。可通过移动因子、TTL 设定冷热分层策略,支持冷热数据分级存储,从而节省本地存储空间,减低存储成本 49. 接入方式-GIS时空分析:※?GIS地理函数提供高性能的地理空间分析能力,具有易于使用、实时分析等特点 50. 接入方式-Vector向量检索:※?向量检索函数提供向量数据的管理与近似度查询功能,同时通过支持多种常见近近似最近邻搜索算法(Approximate Nearest Neighbor,ANN)算法来提升检索性能,以提供对非结构化数据的处理能力 51. 接入方式-全文检索:※? 支持结构化数据快速检索的基础上,增加了全文检索功能;;※? 支持将文本数据分词后,构建倒排索引,并进行关键词检索。用户可以基于分析引擎构建包含结构化数据、半结构化数据、非结构化数据的数据存储和检索服务。 52. 兼容与服务-开放性:支持X86架构CPU(包含海光);支持主流Linux操作系统,如Redhat 7.X、Centos 7.X(>=7.6)、Debian 9、Kylin v10等;开源产品兼容:与同类开源产品SQL语法基本一致;信创支持:可支持国产芯片、国产操作系统;支持在同类开源产品集群间进行数据迁移 53. 兼容与服务-服务:支持提供安装、部署交付服务及相关指导;支持提供技术支持服务,包括但不限于运维、节假日重保等;支持提供产品咨询服务
质保期:36个月
供应商报名地址:点击进入


联系人:郝工
电话:010-68960698
邮箱:1049263697@qq.com

标签: 数据仓库 软件

0人觉得有用

招标
业主

-

关注我们可获得更多采购需求

关注
相关推荐
 
查看详情 免费咨询

最近搜索

热门搜索