首页 > 其他

mongodb集群如何使用客户端链接 powerjob优缺点?

powerjob优缺点?

powerjob的功能:

易用性:提供前端web界面,让开发者可视化完成调度任务管理(添加、删除、修改、检查)、任务运行状态监控、运行日志查看等功能。

完善的定时策略:支持cron表达式、固定频率、固定延迟和api四种定时调度策略。

mongodb集群如何使用客户端链接 powerjob优缺点?

有多种执行支持单机、广播、map和mapreduce,其中map/mapreduce处理器使开发者只需几行代码就能获得集群分布式计算的能力。

dag工作流支持:支持在线配置任务依赖关系,可视化安排任务,还支持上下游任务之间的数据传输。

执行器支持多种处理器,如springbean、内置/外部java类、shell、python等。,并且有着广泛的应用。

运维方便:支持在线日志功能,执行器生成的日志可以实时显示在前台页面,降低了调试成本,大大提高了开发效率。

依赖减少:最小的依赖只有关系数据库(mysql/oracle/mssqlserver...),扩展的依赖项是mongodb(用来存储巨大的在线日志)。

高可用高性能:经过精心设计,调度服务器改变了其他基于数据库锁的调度框架的策略,实现了无锁调度。部署多个调度服务器可以同时实现高可用性和性能提升(支持无限水平扩展)。

故障转移和恢复:任务失败后,可以根据配置的重试策略重试。只要executor集群中有足够多的计算节点,任务就可以成功完成。

适用于分布式唯一标识码的生成算法有哪些?

谢谢邀请~

关于这个问题,有几个方案和大家分享一下。

最笨的方法就是用数据库生成,用数据库的自增长序列生成,在数据库中是唯一的。

优点:最容易理解和使用。

缺点:也很明显每个数据库的实现都不一样,如果需要迁移数据库就比较麻烦;最大的问题是性能,不容易扩展。如果并发量很大,数据库很可能会不堪重负。

使用redis/mongodb/zookeeper生成redis的单线程,使用incr和increby;objectidmongodb的;zk通过了znode的数据版;可以生成全球唯一的识别码。

优点:性能高于数据库;可以使用集群部署。

缺点:需要引入相应的组件,增加了系统的复杂度。

uuid这是分布式架构中生成唯一标识码最常用的算法。

uuid基于mac地址、时间和时钟序列、伪随机数和加密散列。

优点:本地生成,不需要第三方组件,生成简单,性能高。好的。

缺点:长度较长,不利于收纳,没有整理。它是一个字符串,不利于查询。要解决无序问题,参考comb算法(组合guid/timestamp)。

snowflaketwitter是开源的,基于zk,41位时间戳(毫秒),10位机器id,毫秒内12位序列号,1位符号(始终为0)。

优点:性能好,单机增加。

缺点:依赖zk;取决于机器时钟,在分布式环境中它可能不会全局增加。

uidgenerator百度开源,基于雪花算法。

叶美团是开源的。

优点:全球唯一性、高可用性、递增趋势(不安全,如泄露公司订单数量)、单调递增等。

缺点:还是会依赖第三方组件,zk或者数据库。

我会继续分享我对java开发、架构设计、程序员职业发展等方面的看法,希望得到大家的关注。

任务数据库算法性能

原文标题:mongodb集群如何使用客户端链接 powerjob优缺点?,如若转载,请注明出处:https://www.lrccn.com/tag/20035.html
免责声明:此资讯系转载自合作媒体或互联网其它网站,「歌词网」登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述,文章内容仅供参考。