357029540的博客
357029540 · 共 173 篇文章
如何保证在Java多线程中的原子性操作?
在单线程的模式下,我们针对某个变量的修改是不会产生数据的脏读和脏写的,因为它只有一个操作来对变量进行读写操作,但是在多线程模式下就不一样了,如果多个线程对一个变量进行修改操作,那么到底哪一个线程修改的值才是最后的值呢?同时是不是我们需要的值呢?那么我们如何来保证多个线程修改变量值的时候保证变量的原子操作?简单说明下原子操作就是一个步骤要么操作全部成功,要么失败。我们看下i++这个操作,对于不了解这个i++操作生成的二进制文件的具体同学来说,可能会认为它是只有一个操作步骤的运算操作,但是实际情况肯定不是的,它首先会去获取字段i,然后在获取i的值,然后在进行加1操作,最后对i进行赋值,这里就进行…
2019-08-27 18:46 · JAVA · 评论(0)
Java内存模型简单介绍
说到Java内存模型可能一开始就会让人想到Java虚拟机里面的数据区的概念,但是这里的Java内存模型(JMM,Java memory model)是指用Java语言规范定义的内存模型,它是用在线程间数据的可见性上的定义,在Java中数据会存在所见非所得的情况,也就是说你在程序上面看上去会得到想要的结果,但是现实是运行出来的结果往往并不是自己想要的,如下的一个例子(直接敲的代码可能不正确,大概意思是这样) public class TestSee{ boolean canSee = true; public static void main(String [] args){ TestSee …
2019-08-19 19:52 · JAVA · 评论(0)
java中线程挂起的几种方式
在Java中使用线程的时候肯定会有线程挂起的这种情况出现,在Java中提供了3种方式:suspend/resume、wait/notify,notifyAll、park/unpark。 1.suspend/resume 这种方式已经在Java中被弃用,因为它容易引起死锁。在使用关键字synchronized的时候如 synchronized (this) { Thread.currentThread().suspend(); } 这个时候使用resume方法是无法唤醒线程的,还有一种情况是如果在resume方法之后才进行suspend方法的调用,这个也是无法进行suspend方法的唤醒的,因…
2019-08-16 18:43 · JAVA · 评论(0)
自定义线程池简单介绍
线程池的相关概念就不在这里说明了,百度一下有很多,这里简单表述一下如何实现一个自定义的线程池就行线程管理,我们如果要实现一个线程池对线程的管理,那么需要实现一下几点的思路: 1.如何管理线程 2.如何定义工作线程以及工作线程如何持续的保持运行状态 3.如何定义线程池大小及队列大小 4.如何提供接口给调用者使用 5.如何关闭线程池中的线程 接下来我们就一一的实现这几个问题。 1.我们需要定义一个队列来来管理线程,这里使用了LinkedBlockingQueue // 1.定义一个存储线程队列 private LinkedBlockingQueue<Runnable> queue; 2.因为是一…
2019-08-16 11:37 · JAVA · 评论(0)
dubbo学习总结
对应dubbo来说,相信很多人都听说过,也有很多人都使用过,我们也可以通过官网文档( http://dubbo.apache.org/zh-cn/docs/user/quick-start.html )进行学习,目前官方文档介绍的是2.6.4的版本,跟目前2.7.x的版本相差也有点远了,很多代码都进行了重构,比如说DefaultFuture,在2.6.4版本中它实现了ResponseFuture接口,在接收到服务端返回的消息后通过doReceived(Response res)的done.signal()方法来将线程唤醒告知其消息已经正常返回,但是在2.7.x的版本中它却继承了java.ut…
2019-08-14 11:35 · dubbo · 评论(0)
使用NiFi简单的从网站获取数据写入到mysql数据库
最近稍微研究了下etl工具nifi,它是Apache下面的一个项目,是用作数据流处理的,具体的就不多做介绍了,网上也有很多介绍,官网是 https://nifi.apache.org/docs.html ,我在这里做了一个从中移物联网onenet平台抽取数据到mysql的功能,没有做数据过滤以及中文转码乱码的情况处理,这2个地方还不清楚怎么做,如果会的同学也帮忙指导我一下,我们接下来看看整个的设计过程。 首先我们在官网上面下载nifi,我这里使用的版本是1.9.2,解压nifi后,我们就可以进入该文件夹下面的bin目录,点击run-nifi.bat启动nifi,可能nifi启动毕竟慢的原因,…
2019-07-30 17:57 · nifi · 评论(0)
vmware安装Centos ping不通百度彻底解决
转自 https://blog.csdn.net/lk142500/article/details/88386651 1简介 在职场过程中,有一个重要的内容就是熟练使用Linux操作系统,操作命令,而安装虚拟机,配置虚拟机环境则是开发的首要步骤。本文主要是对在VMWare中配置网络,使得通过虚拟机可以访问外部网络,ping通www.baidu.com而写。 2安装步骤 2.1 安装VMware VMWare下载 2.2 安装Centos 2.2.1 安装Centos 其他的参数不再赘述。 如果在安装时提示Intel-VTx未启用,则重启,并在BIOS中开启Intel-VTx. 在安装Cent…
2019-07-14 15:48 · Centos · 评论(0)
zookeeper客户端比较(三)
在上面一篇文章主要总结了zookeeper的服务端数据的同步机制算法的了解,这里自己总结下客户端和服务端是如何进行数据交互的。 我们都知道zookeeper可以用作分布式引用程序管理配置信息,那么我们是如何保证配置信息在zookeeper服务器上面发生变化后客户端怎么去感知?这里就需要说到zookeeper的watch机制了,在代码中我们需要去订阅指定路径下面的数据发生改变时我们应该如何处理,这里的数据变化包括子节点数据的新增和节点数据的增删改,zookeeper官方提供了一个客户端API,但是它的一些实现机制并不完善,如下: 1).Zookeeper的Watcher是一次性的,每次触发之后…
2019-05-13 14:03 · ZOOKEEPER · 评论(0)
zookeeper集群选举机制(二)
在上面我们总结了简单的zookeeper集群的配置,也提到了集群中的leader和follower,那么我们是如何选举出leader的呢?这里需要先了解下paxos算法,它是一种基于消息传递且具有高度容错性的一致性算法,是分布式一致算法中的经典算法,它也是两阶段提交算法,但是与平时所说的两阶段算法不一样,在paxos算法中有提议者(proposer)、接收者(acceptor)和学习者(leaner)三种节点角色。 提议者负责提出需要达成一致的value值,而接收者则负责接收提议者发送过来的value,对该提议进行投票,以决定是否接收提议者发送过来的value,学习者不参与投票,只接收投票结…
2019-05-11 18:39 · ZOOKEEPER · 评论(0)
zookeeper简单介绍及配置属性(一)
zookeeper是一个集中服务的开源框架,现在的版本是3.4.14,它可用于管理配置信息、命名空间、分布式同步以及提供分组服务。它的数据存在于内存中,结构类似于树结构,具有高吞吐量低延迟的特性,集群可靠性也比较高。 在zookeeper中只有绝对路径的概念,没有相对路径,它是以"/"左斜线作为开始的根节点的,每一个节点叫做znode节点,每一个节点都必须有个value值,节点的类型可以是持久节点、持久有序节点、临时节点、临时有序节点,持久有序是指数据不会随着应用程序的存在而存在,只有zookeeper没有退出运行,那么数据会一直存在,有序是指不同客户端在争抢创建同一个节点时将会在该节点下生…
2019-05-09 16:59 · ZOOKEEPER · 评论(0)
大规模使用 Apache Kafka 的20个最佳实践
Apache Kafka是一款流行的分布式数据流平台,它已经广泛地被诸如New Relic(数据智能平台)、Uber、Square(移动支付公司)等大型公司用来构建可扩展的、高吞吐量的、且高可靠的实时数据流系统。例如,在New Relic的生产环境中,Kafka群集每秒能够处理超过1500万条消息,而且其数据聚合率接近1 Tbps。 可见,Kafka大幅简化了对于数据流的处理,因此它也获得了众多应用开发人员和数据管理专家的青睐。然而,在大型系统中Kafka的应用会比较复杂。如果您的consumers无法跟上数据流的话,各种消息往往在未被查看之前就已经消失掉了。同时,它在自动化数据保留方面的限…
2019-05-06 16:25 · KAFKA · 评论(0)
Rabbit MQ简单介绍
一. 什么是MQ MQ 是message queue 消息队列的简称,也叫消息中间件,遵守JMS(java message service)规范的一种软件。它是一种跨进程的通信机制,用于上下游传递消息。在互联网架构中,MQ是一种非常常见的上下游“逻辑解耦+物理解耦”的消息通信服务。 二. MQ对比 在业界我们熟悉的MQ主要有RabbitMQ、ActiveMQ、Kafka、RocketMQ等主要消息中间件,我们下面对比下它们: 特性 ActiveMQ RabbitMQ RocketMQ Kafka PRODUCER-CONSUMER 支持 支持 支持 支持 PUBLISH-SUBSCRIBE …
spring cloud eureka源码分析(七)
在上篇文章中我们介绍了EurekaServerContext Bean的注入,我们接下来看下PeerAwareInstanceRegistry类,这个类主要是用作服务实例对象的注册,在EurekaServerAutoConfiguration类代码的定义中它首先通过客户端获取所有的application对象,这些对象是已经注册到服务端的实例对象,这里就不多做介绍了,可以自己去看实现类,这里我们主要了解下InstanceRegistry代码的实现,进入到InstanceRegistry类,可以看到有如下方法 1.我们首先看下register()方法,它有2个不同参数的方法,从参数名称上理解分别…
2019-04-26 17:01 · spring cloud · spring cloud eureka · 评论(0)
spring cloud eureka源码分析(六)
前面我们了解完了eureka client的源码,我们接下来了解下server端的源码,server端主要是用于服务的发现,高可用,客户端异常如何实现自我保护机制,我们还是首先通过META-INFO下的spring.factories了解到入口类是EurekaServerAutoConfiguration,通过下图可以看到该类的结构如下 在类中实现了很多bean的初始化,下面我们看下它是如何实现高可用的。 进入到EurekaServerContext对应的bean方法中,它返回了一个默认的DefaultEurekaServerContext类,进入到该类可以立即看到它实现了一个initial…
2019-04-24 17:57 · spring cloud · spring cloud eureka · 评论(0)
spring cloud eureka源码分析(五)
在前面文章介绍eureka client的时候忘记了还有一个需要注意的是在当前分析的这个版本中@EnableEurekaClient注解已经发生了变化 @Target(ElementType.TYPE) @Retention(RetentionPolicy.RUNTIME) @Documented @Inherited public @interface EnableEurekaClient { } 现在只有基本的4个注解,没有了以前的@EnableDiscoveryClient等注解,默认在EurekaDiscoveryClientConfiguration是实现了eureka.clien…
2019-04-16 15:38 · spring cloud · spring cloud eureka · 评论(0)