小幺鸡在线接口管理系统,支持在线测试,支持json,txt,xml,html,js,流,和 WebSocket
Full features javascript color parser module, perfect work with vue.js; support RGB, HSL, HSV/HSB, HSL255, HSL240, HWB, XYZ, LAB, LUV, LHCab, xyY...
牛咖-neocrawler nodejs 的爬虫系统。 特点: 支持web界面方式的摘取规则配置(css selector & regex); 包含无界面的浏览器引擎(phantomjs),支持js产生内容的抓取; 用http代理路由的方式防止抓取并发量过大的情况下被对方屏蔽; nodejs none-block 异步环境下的抓取性能比较高; 中央调度器负责网址的调度(同一时间片内一定数量的抓取任务中根据网站的权重来决定派发任务量; 支持多种抓取实例并存,定制摘取引擎和存储方式。
麒麟堡垒机由资深软件开发人员发起,开发开始于2009年9月,开发主要成员共计有5个人,开发地点位于北京。系统经过现场严格的压力、性能、功能测试,使用稳定,功能齐全,系统透明登录功能可以让运维人员完全感觉不到堡垒机存在,系统模块齐全。 主要包含:堡垒机运维模块(支持RDP/SSH/SFTP/FTP/TELNET)、动态口令模块、网管监控模块、日志分析模块、3A模块等,堡垒机整体完全可以满足中型企业的整体运维及安全需要。。麒麟堡垒机可以免费下载,免费使用。麒麟堡垒机QQ群::452104868 软件项目官方网站 http://www.tosec.com.cn
1.1.uniauth干什么的 它是一个统一登录+鉴权+权限管理的综合系统;它适用于各系统需要通过统一认证/授权,并能根据既定的角色和权限来规范业务操作的多子系统环境。 1.2.uniauth技术选型 基于jdk7,使用spring mvc4.2+mybatis3+spring security4+cas+cxf作为基础框架,数据库为mysql5.7,配置管理使用zookeeper3.4,redis 作为可选项用于保存ticket和session信息,前端使用angularJS 1.x;
mutouren-datapush是一个高性能数据推送服务模块,支持纯本地、单中心、多中心、混合等多种运行场景,具备缓存数据持久化,可以配置失败重试、并发等策略, 服务端目前支持普通web、netty、kafka等多种通讯运行版本。除数据推送外,也可以应用在数据采集分析等场合。
clover 1、开发server和client端 定时向zk集群发送心跳数据包,利用Java自带的timer程序实现该功能 2、开发整天的monitor程序,用来定时向zk中获取server和client端的心跳数据信息,如果超过指定时间没有收到最新的数据包,那么任务server端或者client端死掉了,此时要删除该server或client端节点,发邮件通知相关人员,记录异常日志到系统日志文件和MongoDB中 3、client端接受创建job请求,将job信息创建到client服务端,并根据job时间规则运行,并将任务信息存储到MongoDB中 4、当client端job运行时候,封装执行任务信息,发送到指定客户端机器,更新client端job执行时间和状态,如不在需要继续运行,那删除job并从MongoDB中删除相关任务信息 5、client端接受删除job请求,client服务端,立即执行删除job并将任务信息从MongoDB中删除 6、client端接受更新job请求,client服务端,立即执行删除job并创建新job,并将任务信息从MongoDB中删除,然后再存储新job信息 7、第一版 使用Netty做消息通讯中间件,存储消息放入Redis中,服务器开启Http请求,客户端 通过 发送Http请求到服务器来处理请求,由于任务太多 redis处理能力不行,放弃该方案 第二版 使用Netty RPC框架,自己开发一个Server端和Client,各种启动指定端口,由于 必须要求Server端和Client必须启动才能进行消息发送,所以感觉非常不灵活,因为放弃该方案 第三版 使用架构组推荐的rocketmq,通过使用发现,很严重问题,消息会重复发送,经常会收到重复的消息,在测试的时候发现,经常发生消息异常和报错,跟架构组刘婷峰沟通说,可能是机器性能不行了,他也不知道具体原因,感觉非常不靠谱,果断放弃 第四版 使用 zeromq,通过在网上查资料,对比各种mq后,发现zeromq是最轻量级,出现消息是最快的,经过测试完全能满足业务,果断使用 8、由于项目中使用zk,自己开发zk使用工具类,定制server端增删改查zk消息以及定制client端增删改查zk消息,功能测试zk,目前打算增加zk watch功能 9、开发server和client端 定时向zk集群发送心跳数据包,利用Java自带的timer程序实现该功能 10、开发整天的monitor程序,用来定时向zk中获取server和client端的心跳数据信息,如果超过指定时间没有收到最新的数据包,那么任务server端或者client端死掉了,此时要删除该server或client端节点,发邮件通知相关人员,记录异常日志到系统日志文件和MongoDB中 11、开发console控制台管理,可以查看任务动态运行状态和次数信息 12、zk管理页面,查看server和client端节点信息,更新和删除节点信息 13、job管理页面,查看job详细信息 14、联系人管理页面,增删改查联系人信息 15、log日志管理页面,根据系统报错记录的日志信息,在页面中可以详细查看
项目分两个部分: 一个是基于webmagic爬虫框架开发的定向爬虫,用于爬天猫的数据。rails4写的website用于查询天猫商品统计后的数据。以后会增加数据分析模块。
使用redis作为shiro实现集群会话管理
Java EE(J2EE)快速开发框架,集结最新主流时尚开源技术:Spring、Spring MVC、Apache Shiro、MyBatis、Bootstrap UI等。支持应用集群,满足互联网应用开放,快速开发的原则,是学习和二次开发的首选框架。(项目持续更新中.....)
R3 Query商业智能产品为快速交付应用、简化报表设计,提供了通用的开发环境,整合了企业报表领域各个周期的支持,其中包括报表设计、报表发布、报表生成、报表管理、订阅发布和报表监控等报表的整个生命周期的步骤。 R3 Query分析展现平台是新型平台化,搜索化,业务模型化,以及快速构建报表系统、企业级搜索系统的业务平台。 R3 Query分析展现平台是集企业多系统数据整合数据采集、报表中心、分析中心、控制中心于一体的全方位企业级搜索解决方案。 R3 Query分析展现平台是集报表,仪表盘,在线分析,即时查询,数据分析,数据挖掘,高性能数据支撑引擎,数据抽取转换,地图分析等为一体. 为企业提供综合性的企业级报表平台。
springmvc spring mybatis motan分布式框架开源分布式框架zaCat 演示地址 http://www.zscat.top/front
7天学会,spring cloud系列