tianqing (tianqing525)

tianqing525

Geek Repo

Company:ksyun

Location:BeiJing

Github PK Tool:Github PK Tool

tianqing's repositories

clover

架构介绍:http://blog.csdn.net/stark_summer/article/details/43449621 clover 1、开发server和client端 定时向zk集群发送心跳数据包,利用Java自带的timer程序实现该功能 2、开发整天的monitor程序,用来定时向zk中获取server和client端的心跳数据信息,如果超过指定时间没有收到最新的数据包,那么任务server端或者client端死掉了,此时要删除该server或client端节点,发邮件通知相关人员,记录异常日志到系统日志文件和MongoDB中 3、client端接受创建job请求,将job信息创建到client服务端,并根据job时间规则运行,并将任务信息存储到MongoDB中 4、当client端job运行时候,封装执行任务信息,发送到指定客户端机器,更新client端job执行时间和状态,如不在需要继续运行,那删除job并从MongoDB中删除相关任务信息 5、client端接受删除job请求,client服务端,立即执行删除job并将任务信息从MongoDB中删除 6、client端接受更新job请求,client服务端,立即执行删除job并创建新job,并将任务信息从MongoDB中删除,然后再存储新job信息 7、第一版 使用Netty做消息通讯中间件,存储消息放入Redis中,服务器开启Http请求,客户端 通过 发送Http请求到服务器来处理请求,由于任务太多 redis处理能力不行,放弃该方案 第二版 使用Netty RPC框架,自己开发一个Server端和Client,各种启动指定端口,由于 必须要求Server端和Client必须启动才能进行消息发送,所以感觉非常不灵活,因为放弃该方案 第三版 使用架构组推荐的rocketmq,通过使用发现,很严重问题,消息会重复发送,经常会收到重复的消息,在测试的时候发现,经常发生消息异常和报错,跟架构组刘婷峰沟通说,可能是机器性能不行了,他也不知道具体原因,感觉非常不靠谱,果断放弃 第四版 使用 zeromq,通过在网上查资料,对比各种mq后,发现zeromq是最轻量级,出现消息是最快的,经过测试完全能满足业务,果断使用 8、由于项目中使用zk,自己开发zk使用工具类,定制server端增删改查zk消息以及定制client端增删改查zk消息,功能测试zk,目前打算增加zk watch功能 9、开发server和client端 定时向zk集群发送心跳数据包,利用Java自带的timer程序实现该功能 10、开发整天的monitor程序,用来定时向zk中获取server和client端的心跳数据信息,如果超过指定时间没有收到最新的数据包,那么任务server端或者client端死掉了,此时要删除该server或client端节点,发邮件通知相关人员,记录异常日志到系统日志文件和MongoDB中 11、开发console控制台管理,可以查看任务动态运行状态和次数信息 12、zk管理页面,查看server和client端节点信息,更新和删除节点信息 13、job管理页面,查看job详细信息 14、联系人管理页面,增删改查联系人信息 15、log日志管理页面,根据系统报错记录的日志信息,在页面中可以详细查看

Language:JavaStargazers:1Issues:2Issues:0

aho-corasick

Aho-Corasick的Java实现,针对Ascii优化,支持Unicode。

Language:JavaStargazers:0Issues:2Issues:0

blog

从零开始

Language:JavaScriptStargazers:0Issues:2Issues:0

cloud-rest-service

cloud-rest-service

Language:JavaStargazers:0Issues:2Issues:0

configcenter

百度运营产品统一配置管理服务

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

configcenter-client

配置中心客户端

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

databus

Source-agnostic distributed change data capture system

License:Apache-2.0Stargazers:0Issues:0Issues:0

DISchedule

对TBSchedule分布式任务调度进行了简单改造

Language:JavaStargazers:0Issues:2Issues:0

Disruptor-example

Disruptor-example

Language:JavaStargazers:0Issues:2Issues:0

dubbo-remoting-netty4

The netty remoting module of dubbo project

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

dubbox

Dubbox now means Dubbo eXtensions, and it adds features like RESTful remoting, Kyro/FST serialization, etc to the Dubbo service framework.

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

dustjs

Asynchronous templates for the browser and node.js

Language:JavaScriptLicense:MITStargazers:0Issues:2Issues:0

excelExport

excel 公用导出组件

Language:JavaStargazers:0Issues:2Issues:0

fastser-dal-all

基于mybatis、spring jdbc、hibernate的通用数据该问层,支持基于datasource的读写分离和主备自动切换

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

Gaea

58.com跨平台高性能高可用中间层服务框架

Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

HtmlExtractor

HtmlExtractor是一个Java实现的基于模板的网页结构化信息精准抽取组件。

License:GPL-3.0Stargazers:0Issues:0Issues:0

moco

Easy Setup Stub Server

License:MITStargazers:0Issues:0Issues:0
Language:JavaLicense:Apache-2.0Stargazers:0Issues:2Issues:0

react

A declarative, efficient, and flexible JavaScript library for building user interfaces.

Language:JavaScriptLicense:NOASSERTIONStargazers:0Issues:2Issues:0

redis-shard

Redis sharding client library

Language:PythonLicense:BSD-2-ClauseStargazers:0Issues:2Issues:0

skynet

A lightweight online game framework

Language:CLicense:MITStargazers:0Issues:0Issues:0

ssdb-docs

SSDB documentation source code

Stargazers:0Issues:0Issues:0

sugarcrm_dev

SugarCRM CE Source Code

Language:PHPLicense:AGPL-3.0Stargazers:0Issues:0Issues:0

super-diamond

配置管理系统

Language:JavaStargazers:0Issues:2Issues:0

tuer.me

兔耳日记2.0测试版 http://www.tuer.me

Language:JavaScriptLicense:BSD-3-ClauseStargazers:0Issues:2Issues:0

twemproxy

A fast, light-weight proxy for memcached and redis

Language:CLicense:Apache-2.0Stargazers:0Issues:2Issues:0

vert-x.github.io

The Vert.x 2.x website

Language:HTMLLicense:NOASSERTIONStargazers:0Issues:2Issues:0
Language:CSSLicense:NOASSERTIONStargazers:0Issues:2Issues:0

webscalesql-5.6

WebScaleSQL, Version 5.6, based upon the MySQL-5.6 community releases.

Language:C++License:GPL-2.0Stargazers:0Issues:2Issues:0

xtemplate

eXtensible Template Engine lib for node and the browser

Language:JavaScriptStargazers:0Issues:2Issues:0