spark redis:Spark的连接器允许从Redis集群读写 源码

上传:butt40862 浏览: 29 推荐: 0 文件:ZIP 大小:161.08KB 上传时间:2021-02-10 01:13:32 版权申诉
Spark-Redis 一个使用在读写数据的库。 Spark-Redis可从Spark作为RDD访问Redis的所有数据结构-字符串,哈希,列表,集合和排序集合。 它还支持使用DataFrames和Spark SQL语法进行读写。 该库可以与Redis独立数据库以及集群数据库一起使用。 与Redis群集一起使用时,Spark-Redis会意识到其分区方案,并会根据重新分片和节点故障事件进行调整。 Spark-Redis还支持Spark流(DStream)和结构化流。 版本兼容性和分支 该库具有多个分支,每个分支对应于一个受支持的不同Spark版本。 例如,“ branch-2.3”可与
上传资源
用户评论
相关推荐
spark_redis connector
spark对Redis原生的支持,可支持对Redis的各种操作 eg:sc.toRedisKV(saveRedisRDD), 配置如下 conf.set("redis.host","localhos
JAR
0B
2018-12-25 07:07
mongo spark MongoDB Spark连接器源码
MongoDB Spark连接器 官方的MongoDB Spark连接器。 文献资料 参见: : 正在下载 该连接器发布在上, 软件包是第三方软件包的社区索引。 Maven,SBT,Ivy和其他代码的
ZIP
265KB
2021-02-07 04:27
0开始搭建Spark集群
CentOS集群搭建、Hadoop集群搭建配置免密连接外网,Hive安装Zookeeper搭建Kafkascalaflume安装Spark搭建及启动
DOCX
0B
2019-05-02 20:34
redis集群教程redis集群
redis集群redis集群redis集群redis集群redis集群redis集群redis集群redis集群redis集群redis集群redis集群redis集群
DOC
343KB
2020-10-14 12:27
spark cassandra connector DataStax Spark Cassandra连接器源码
Spark Cassandra连接器 快速链接 什么 哪里 社区 在与我们聊天 Scala文档 最新版本(3.0.0): , 最新生产版本 产品特点 借助Apache Spark:trade_mark
ZIP
774KB
2021-02-16 14:56
spark集群安装
3.2.2.在spark shell中编写WordCount程序 1.首先启动hdfs 2.向hdfs上传一个文件到hdfs://hdp-01:9000/wordcount/input/a.txt 3
DOCX
0B
2019-01-22 07:47
spark集群搭建
基于hadoop2.4的spark1.1.0集群部署
PDF
0B
2019-05-13 22:56
spark集群部署
spark部署
DOCX
0B
2019-09-19 07:03
vagrant spark playground使用VagrantApache Spark集群模拟源码
vagrant-spark-playground:使用Vagrant的Apache Spark集群模拟
ZIP
6KB
2021-02-09 13:59
操作redis集群连接插入读写
java连接redis集群进行操作的类,直接就可以使用,获取连接之后自己进行扩展即可
ZIP
1KB
2020-08-21 06:33
redis集群
redis单机+3主3从redis集群+ruby安装包+Redis-x64-3.0.500.zip+redis-3.0.5.gem+redis-trib.rb+windows集群搭建(网上资源很多,不
ZIP
0B
2019-05-03 05:07
redis集群脚本redis trib
redis-trib.rb 是采用 Ruby 实现的 Redis 集群管理工具。内部通过 Cluster 相关命令帮我们简化集群创建、检查、槽迁移和均衡等常见运维操作,使用之前需要安装 Ruby 依赖
RB
59KB
2020-10-03 14:31
redis集群redis.rar
Redis-x64-3.2.100.zip Redis-x64-3.2.100.msi redis-3.2.2.gem linux版本文件下载(含教程)
RAR
10.61MB
2020-08-18 21:39
Linux安装Spark集群
Linux安装Spark集群Spark可以在只安装了JDK、scala的机器上直接单机安装,但是这样的话只能使用单机模式运行不涉及分布式运算和分布式存储的代码,例如可以单机安装Spark,单机运行计算
doc
0B
2019-05-03 11:34
docker redis cluster用于Redis集群Dockerfile redis3.0加源码
docker-redis-cluster:用于Redis集群的Dockerfile(redis 3.0+)
ZIP
13KB
2021-02-08 09:22