百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

分布式常用工具组件 distributed-tool

cac55 2024-10-20 04:21 14 浏览 0 评论

distributed-tool

项目介绍

这是一个分布式常用工具组件。其中包括但不限于:

分布式List、分布式Set、分布式Long、分布式信号量、分布式缓存、分布式锁、分布式序列号生成器、分布式订阅发布模式等常用工具类

目前微服务开发的系统很多,这个就涉及到分布式集群问题。像以前如果是单机,那么这些解决方案都可以使用JVM的API来实现

但在分布式环境下,这些API都不可用,所以急需一套分布式的API来支持这种常用操作,那么我来提供了,后面持续添加各种分布式常用工具类

注意:所有组件目前都是线程不安全,如果多线程请使用多实例,或者自己加同步锁

软件架构

目前项目分两个module,distributed-tool和distributed-tool-test。前者是核心源码。后者是测试代码。

distributed-tool主要分如下模块:分布式List、分布式Set、分布式Long、分布式信号量等

  1. core 提供基本分布式组件。(V1.3支持)
  2. cache 简单的分布式缓存模块。(V1.3支持)
  3. lock 分布式锁。(V1.3支持)
  4. pubsub 分布式订阅发布组件。(V1.3支持)
  5. sequence 分布式序列号生成器。(V1.3支持)

Maven引用

<dependency>
 <groupId>com.xuanner</groupId>
 <artifactId>distributed-tool</artifactId>
 <version>1.3</version>
</dependency>

使用教程

初始化(目前底层使用了Redis来实现,所以使用Redis方式初始化)

Dt.getInstance().initJedis("xxx", 8380, "xxx");

销毁(注意,在应用的结束生命周期上加上销毁代码,例如Spring的destroy周期)

Dt.getInstance().getDefaultJedisFactory().destroy();

一个分布式List使用例子

DtList list = Dt.newDtList("listName");
list.pushLeft(new String[] { "a", "b" });
list.popLeft();
list.close();//使用完毕记得close

一个分布式缓存锁使用例子

DtLock lock = Dt.newDtLock("lockName");
String kId = lock.tryLock();
//你的临界资源操作逻辑
lock.unLock(kId);
lock.close();//使用完毕记得close

核心分布式集合使用

原理说明

很多有用的组件,都基于核心的分布式集合来实现。例如:分布式List、分布式Queue、分布式Set等等。我这里也实现了一些基本的分布式合集和原子类。

分布式DtList

支持基本的push、pop操作

DtList list = Dt.newDtList("listName");
list.pushLeft(new String[] { "a", "b" });//从列表的左边push一个元素
String element = list.pushPop();//从列表的右边pop一个元素,这里element==a
//使用完后记得close
list.close();

分布式DtLong

支持分布式自增和自减去

DtLong dtLong = Dt.newDtLong("longName");
long l = dtLong.incr(1);
l = dtLong.decr(1L);
l = dtLong.getValue();
//使用完后记得close
dtLong.close();

分布式DeQueue

支持尾部push,头部pop,很容易就可以基于整个Queue实现一个简单的分布式队列(生产者消费者模式)

DtQueue queue = Dt.newDtQueue("queueName");
queue.push("eeee");
String eeee = queue.pop();
//使用完后记得close
queue.close();

下面是一个简单的生产者消费者实现案例

//消费者
final DefaultDtQueue consumer = new DefaultDtQueue("testName3");
consumer.setClientFactory(clientFactory);
new Thread(() -> {
 while (true) {
 String e = consumer.pop();
 sleep(1);
 System.out.println(e);
 }
}).start();
//生产者
final DefaultDtQueue provider = new DefaultDtQueue("testName3");
provider.setClientFactory(clientFactory);
new Thread(() -> {
 while (true) {
 provider.push("来一个时间戳:" + System.currentTimeMillis());
 sleep(3);
 }
}).start();

分布式DtSemaphore(信号量)

JDK自带的信号量大家都熟悉吧,整个是分布式的信号量,可以很方便的基于整个组件来做分布式控资源访问。 里面使用了Lua实现,绝对高校可靠。

DtSemaphore semaphore = Dt.newDtSemaphore("semaphoreName", 3);//这里限制同时只能访问3个资源
String sId1 = semaphore.acquire();
String sId2 = semaphore.acquire();
String sId3 = semaphore.acquire();
String sId4 = semaphore.acquire();//第四个就返回null表示拿不到信号量
semaphore.release(sId1);
String sId5 = semaphore.acquire();//因为上面释放了一个信号量,所以这里又可以拿到了
//这里注意,为了防止系统拿到信号量当机后无法释放信号量,每个背获取的信号量都有默认30S的超时时间
//如果过了30S你还没有释放,那么这个信号量就会默认背释放,如果要自己设定这个超时时间,你可以这样新建
//这里被设置成了60S,注意单位是:秒
DtSemaphore semaphore = Dt.newDtSemaphore("semaphoreName", 3, 60);
//使用完后记得close
semaphore.close();

分布式DtSortedSet(可排序Set)

首先他是一个Set集合,且他支持设置score进行排序

DtSortedSet set = Dt.newDtSortedSet("setName");
set.add(1, "a1");
set.add(20, "a20");
set.add(99, "a99");
//获取指定值的排位
long rank = set.rank("a20");//这里rank==1
//可以根据score的范围进行批量删除
set.removeByScoreRange(1, 98);//这里值"a1"和"a20"会被删除 
//使用完后记得close
set.close();

更多使用教程: https://gitee.com/xuan698400/distributed-tool/wikis/

相关推荐

MIRIX重塑AI记忆:超Gemini 410%,节省99.9%内存,APP同步上线

MIRIX,一个由UCSD和NYU团队主导的新系统,正在重新定义AI的记忆格局。在过去的十年里,我们见证了大型语言模型席卷全球,从写作助手到代码生成器,无所不能。然而,即使最强大的模型依...

硬盘坏了怎么把数据弄出来对比10种硬盘数据恢复软件

机械硬盘或固态硬盘损坏导致数据丢失时,应立即停止对硬盘的读写操作,并根据损坏类型选择逻辑层恢复工具或专业物理恢复服务。紧急处置措施立即停止通电使用:发现硬盘异响、无法识别或数据异常时,需立即断开连接,...

蓝宝石B850A WIFI主板新玩法:内存小参调节体验

蓝宝石前段时间发布了一款性价比极高的主板:NITRO氮动B850AWIFI主板。这款主板的售价只要1349元,相比普遍1500元以上的B850主板,确实极具竞争力。虽然价格实惠,蓝宝石NITR...

内存卡损坏读不出怎么修复?这5个数据恢复工具汇总,3秒挽回!

在数字化生活的浪潮中,内存卡凭借小巧便携与大容量存储的特性,成为相机、手机、行车记录仪等设备存储数据的得力助手,承载着无数珍贵回忆与重要文件。然而,当内存卡突然损坏无法读取,无论是误删、格式化、病毒入...

内存卡修复不再难,2025年必学的6款软件工具

内存卡出现问题时,通常是因为文件系统损坏、物理损坏或病毒感染。通过专业的修复工具,我们可以尝试恢复数据并修复内存卡。内存卡修复利器:万兴恢复专家万兴恢复专家是一款功能强大的数据恢复软件,支持多种设备和...

有5款内存卡修复工具汇总,内存卡数据轻松找回!

在如今的数字时代,内存卡作为不可或缺的存储介质,广泛应用于相机、手机、行车记录仪等各类设备中,承载着我们珍贵的照片、视频以及重要文件。然而,数据丢失的风险却如影随形,误删、格式化、病毒入侵、硬件故障等...

揭秘:如何通过多种方式精准查询内存条型号及规避风险?

以下是内存条型号查询的常用方法及注意事项,综合了物理查看、软件检测、编码解析等多种方式:一、物理标签查看法1.拆机查看标签打开电脑主机/笔记本后盖找到内存条,观察标签上的型号标识。例如内存标签通常标...

内存卡数据恢复5个工具汇总推荐,轻松找回珍贵记忆!

在这个数字化时代,内存卡作为我们存储珍贵照片、重要文件的常用载体,广泛应用于手机、相机、平板电脑等设备。但数据丢失的意外却常常不期而至,误删除、格式化、病毒攻击,甚至内存卡的物理损坏,都可能让辛苦保存...

电脑内存智能监控清理,优化性能的实用软件

软件介绍Memorycleaner是一款内存清理软件。功能很强,效果很不错。Memorycleaner会在内存用量超出80%时,自动执行“裁剪进程工作集”“清理系统缓存”以及“用全部可能的方法清理...

TechPowerUp MemTest64:内存稳定性测试利器

TechPowerUpMemTest64:内存稳定性测试利器一、软件简介TechPowerUpMemTest64,由知名硬件信息工具GPU-Z的出品公司TechPowerUp发布,是一款专为64位...

微软推出AI恶意软件检测智能体Project Ire,精确度高达98%

IT之家8月6日消息,当地时间周二,微软宣布推出可自主分析恶意软件的AI检测系统原型——ProjectIre。该项目由微软研究院、Defender研究团队及Discovery&a...

农村老木匠常用的20种老工具,手艺人靠它养活一家人,你认识几种

生活中的手艺老匠人是非常受到尊敬和崇拜的,特别是在农村曾经的老匠人都是家里的“座上宾”。对于民间传统的手艺人,有一种说法就是传统的八大匠:木匠、泥匠、篾匠、铁匠、船匠、石匠、油匠和剃头匠。木匠的祖始爷...

恶意木马新变种伪装成聊天工具诱人点击

国家计算机病毒应急处理中心通过对互联网监测发现,近期出现一种恶意木马程序变种Trojan_FakeQQ.CTU。该变种通过伪装成即时聊天工具,诱使计算机用户点击运行。该变种运行后,将其自身复制到受感染...

学习网络安全 这些工具你知道吗?

工欲善其事必先利其器,在新入门网络安全的小伙伴而言。这些工具你必须要有所了解。本文我们简单说说这些网络安全工具吧!Web安全类web类工具主要是通过各种扫描工具,发现web站点存在的各种漏洞...

5分钟盗走你的隐私照片,这个全球性漏洞到底有多可怕?

这个时代,大家对电脑出现漏洞,可能已经习以为常。但如果机哥告诉大家,这个漏洞能够在5分钟内,破解并盗取你所有加密文件,而且还无法通过软件和补丁修复...这可就有点吓人啦。事情是酱婶的。来自荷兰埃因...

取消回复欢迎 发表评论: