持续写入

斯普大数据存储平台(SP-DS)支持数据持续写入集群,提供接口API供用户直接调用写入事件数据,再通过SP-ETL写入到HDFS当中,集群等管理界面实时更新数据,确保事件数据写入的实时性和一致性。

高吞吐量

SP-DS拥有高并发写入的能力,支持单节点平均20,000次并发写入,每秒可处理一亿条记录。例如,网站浏览高峰期时应能满足所有用户行为数据的并发写入,确保数据不丢失。

支持各种类型的事件数据

支持多种类型数据,包括结构化数据、半结构化数据和非结构化数据,如:CSV文件、日志数据、JSON格式数据、图片和视频等;事件数据结构定义更加灵活,写入数据时无需预先定义表结构,保证事件数据写入的灵活性和完整性。同时,还提供JDBC和JAVA SDK。

事件数据永久保存

SP-DS拥有大规模存储容量,支持任意横向扩充节点数目,无需清理历史数据,满足指数级增长的事件数据的存储。