wmyue Goto Github PK

activemq-notes

active-mq源码阅读

anima

anmia 是基于java游戏服务器框架，它是高可伸缩、分布式多进程的游戏服务器框架。

azkaban

Azkaban是一个在LinkedIn开发用来跑Hadoop作业的一款批处理作业调度框架，Azkaban通过作业的依赖关系解决了作业顺序和提供了更加方便的Web用户界面来维持和跟踪你的作业，根据Azkaban官网官方文档翻译而来。Azkaban是由LinkedIn实现的为了解决hadoop作业依赖问题一个批处理调度平台。如果需要我们的作业按照顺序执行，从作业中ETL（抽取extract、转换transform、加载load）数据来分析产品，那么Azkaban将是一个很好的选择。 随着hadoop用户数量的增长，从最初的单个服务器的解决方案，Azkaban已经演变成更加健壮的解决方案。

bankinterface

bank interface：针对**电子商务和第三方支付，提供一致的支付接口

boot

clover

clover 1、开发server和client端 定时向zk集群发送心跳数据包，利用Java自带的timer程序实现该功能 2、开发整天的monitor程序，用来定时向zk中获取server和client端的心跳数据信息，如果超过指定时间没有收到最新的数据包，那么任务server端或者client端死掉了，此时要删除该server或client端节点，发邮件通知相关人员，记录异常日志到系统日志文件和MongoDB中 3、client端接受创建job请求，将job信息创建到client服务端，并根据job时间规则运行，并将任务信息存储到MongoDB中 4、当client端job运行时候，封装执行任务信息,发送到指定客户端机器，更新client端job执行时间和状态，如不在需要继续运行，那删除job并从MongoDB中删除相关任务信息 5、client端接受删除job请求，client服务端，立即执行删除job并将任务信息从MongoDB中删除 6、client端接受更新job请求，client服务端，立即执行删除job并创建新job,并将任务信息从MongoDB中删除,然后再存储新job信息 7、第一版 使用Netty做消息通讯中间件，存储消息放入Redis中，服务器开启Http请求，客户端 通过 发送Http请求到服务器来处理请求，由于任务太多 redis处理能力不行，放弃该方案 第二版 使用Netty RPC框架，自己开发一个Server端和Client，各种启动指定端口，由于 必须要求Server端和Client必须启动才能进行消息发送，所以感觉非常不灵活，因为放弃该方案 第三版 使用架构组推荐的rocketmq,通过使用发现，很严重问题，消息会重复发送，经常会收到重复的消息，在测试的时候发现，经常发生消息异常和报错，跟架构组刘婷峰沟通说，可能是机器性能不行了，他也不知道具体原因，感觉非常不靠谱，果断放弃 第四版 使用 zeromq,通过在网上查资料，对比各种mq后，发现zeromq是最轻量级，出现消息是最快的，经过测试完全能满足业务，果断使用 8、由于项目中使用zk,自己开发zk使用工具类，定制server端增删改查zk消息以及定制client端增删改查zk消息,功能测试zk,目前打算增加zk watch功能 9、开发server和client端 定时向zk集群发送心跳数据包，利用Java自带的timer程序实现该功能 10、开发整天的monitor程序，用来定时向zk中获取server和client端的心跳数据信息，如果超过指定时间没有收到最新的数据包，那么任务server端或者client端死掉了，此时要删除该server或client端节点，发邮件通知相关人员，记录异常日志到系统日志文件和MongoDB中 11、开发console控制台管理，可以查看任务动态运行状态和次数信息 12、zk管理页面，查看server和client端节点信息，更新和删除节点信息 13、job管理页面，查看job详细信息 14、联系人管理页面，增删改查联系人信息 15、log日志管理页面，根据系统报错记录的日志信息，在页面中可以详细查看

dhtcrawler

python 编写的DHT Crawler 网络爬虫，抓取磁力链接

dhtcrawler-1

一个简单的dht爬虫，用于搜集infohash

dhtsearchfromjava

dhtsearchweb

DhtSearchWeb

dhtspider

DHT网络的一个小爬虫

distributed-kit

Distributed lock implementation using Redis and Zookeeper.基于redis和zookeeper分布式工具集-包括:分布式锁实现,分布式速率限制器,分布式序列等

domt

这是一个高校宿舍综合管理系统

dubbo-demo

自己整理一套demo的多项目架构-dubbo+zk+ssm系统架构

dubbo-spring-boot-mybatis-redis

通过dubbo+spring boot+mybatis+redis等主流技术搭建成一套分布式服务框架

dubbo-zookeeper-netty-springmvc

使用dubbo注册服务，netty做服务器，springmvc提供restful接口

dubboss

整合dubbo+netty+spring mvc+nginx，作为一个分布式RESTful服务发布

easydarwin

OPEN：高性能开源流媒体服务器，支持RTSP、HLS、HTTP直播

elasticsearch

Baidu Elasticsearch

elasticsearch-1

Elasticsearch是一个实时的分布式搜索和分析引擎,

facerecognition_javacv

使用javacv1.2 进行基于视频的人脸识别系统的设计

fightlandlords

这是一个游戏服务器引擎，一个斗地主游戏服务器程序，主要采用netty进行长连接出来，支持redis，支持远程RPC调用，支持分布式服务zookeeper统一session管理和数据同步，

fmj

FMJ (FFMpeg for Java)。通过Java调用FFMpeg命令的方式来对音视频进行处理（获取信息、截图等等）。

forest

基于netty轻量的高性能分布式RPC服务框架

future-listener

jdk中广泛使用的java线程监听器.java中的future-listener机制，当一个线程执行结束的时候，通知注册的所有listener同步执行回调功能

game-executor

采用Reactor模式，注册readycreate, readyfinish事件到更新服务UpdateService，通过处理后进行模型缓存，然后将消息转化为 dispatchThread消息分配模型需要的create, update, finish的事件进行单线程循环调度 。调度过程使用了系统预置锁模型，来进行多线程唤醒机制，将所有的update循环检测进行多 线程调度，多线程更新服务使用future-listener机制，在完成调度后，根据模型状态，如果模型存活重新将消息转化为update 事件注册到dispatchThread消息分配模型进行循环处理。如果模型死亡将消息转化为readyfinish事件注册到更新服务UpdateServic进行销毁 。这个系统实现了模型自动缓存，多线程异步循环调度模型更新，自动处理模型死亡事件进行销毁。 支持将多个updater绑定到同一个更新线程上，减少线程调度。

game-server

分布式java游戏服务器，包括服务器注册中心，网关服务器，大厅服务器，游戏逻辑服务器、后台监控服务器及一个可运行的网页版捕鱼

gameshardingdb

基于spring-sharding-mybaits集成redis缓存的游戏分布式存储框架.支持将对象序列化到队列里，异步存储。 使用spring集成mybatis3垂直和水平分库mysql.使用模版编程，采用代理模式,采集变化的字段，自动完成拼写sql,降低数据库落地难度 集成Mybatis-PageHelper分页,大数据量可以分批查询。提升查询速度

goshop

分布式多店铺电商系统，使用技术：spring 、springmvc、mybatis、maven、html5、jquery、freemarker、Redis（缓存服务器）、Solr（搜索引擎）、Dubbo（调用系统服务）、Nginx（web服务器）、FastDFS（文件服务器）、Shiro（权限框架）、Zookeeper（分布式应用程序协调服务）

goshop2

在goshop的基础上进行重构，将逐步完善分布式、高可用、多店铺电商系统