Vip_title

GVP (Gitee Most Valuable Projects) - 码云最有价值开源项目计划

是码云综合评定出的优秀开源项目的展示平台

加入GVP计划

微信小程序商城 (后台开源) 。快速搭建一个属于自己的微信小程序商城。QQ交流群:66502035欢迎大家进群交流技术。
分布式任务调度,只依赖redis的实现版本

gf

Go
模块化、松耦合、轻量级、高性能的Go语言Web开发框架。支持热重启、热更新、多域名、多端口、多服务、HTTP/HTTPS、动态路由等特性,并提供了Web服务开发的系列核心组件,如:MVC、Cookie、Session、服务注册、配置管理、模板引擎、数据校验、分页管理、数据库ORM等等等等,并且提供了数十个实用开发模块集,如:缓存、日志、命令行、二进制、文件锁、数据编码、进程管理、进程通信、并发安全容器、Goroutine池等等等等等等。
仿百度能力开放平台的spring cloud 微服务框架 ,历经1年生产考验 1.用户权限 基于spring security jwt 的无session后台管理框架 2.注册中心 基于eureka的服务注册中心 提供动态上线下线功能 3 配置中心 集成携程网阿波罗配置中心 管理整个微服务框架配置 4 应用管理 提供申请应用ID,应用密钥功能 为第三方厂家接入提供token ,利用oauth 保护企业核心接口 5.基于kafka es链路存储的zipkin框架,为核心接口提供完整的调用链核查机制 6 集成xxl job 为企业提供分布式定时任务解决方案 7 api网关 利用应用管理申请的应用ID密钥申请token访问企业核心接口,技术交流群:483725710

bootshiro

Java
基于springboot+ shiro+jwt的真正rest api资源无状态认证权限管理框架,开发人员无需关注权限问题,后端开发完api,前端页面配置即可(前后端分离也可作为企业基本框架)(线上注册用户为体验给了最大权限,请不要随意删除)

kkFileView

Java
使用spring boot打造文件文档在线预览项目解决方案,支持doc、docx、ppt、pptx、xls、xlsx、zip、rar、mp4、mp3以及众多类文本如txt、html、xml、java、properties、sql、js、md、json、conf、ini、vue、php、py、bat、gitignore等文件在线预览
查看全部GVP项目
117_l-weiwei
强力 Java 爬虫,列表分页、详细页分页、ajax、微内核高扩展、配置灵活
Java Web爬虫
2年前
471_flashsword20

黄亿华/webmagic

GVP
webmagic 是一个无须配置、便于二次开发的爬虫框架,它提供简单灵活的API,只需少量代码即可实现一个爬虫。
329436_xiyoumc
全球最大成人网站PornHub爬虫 (Scrapy、MongoDB) 一天500w的数据
Python Web爬虫 MIT
4个月前
666978_xtuhcy

xtuhcy/Gecco

GVP
Gecco 是一款用java语言开发的轻量化的易用的网络爬虫,整合了jsoup、httpclient、fastjson、spring、htmlunit、redission等优秀框架。
Java Web爬虫 MIT
7个月前
分布式爬虫系统,简单使用,高级配置。可扩展,减轻开发量,能docker化,适应各种急切需求核心框架:WebMagic, Spring Boot ,MongoDB, ActiveMQ ,Spring + Quartz,Spring Jpa , Druid,Redis, Ehcache ,SLF4J、Log4j2, Bootstrap + Jquery 等,不详细列举了
Java Web爬虫 LGPL-3.0
6个月前
117_l-weiwei
二代蜘蛛侠,此版本完全重新开发,比上一代更加强大(性能,易用,架构,分布式,简洁,成熟)
429922_mail_osc
扒网站工具,看好哪个网站,指定好URL,自动扒下来做成模版。所见网站,皆可为我所用!
13016_dreamidea
牛咖-neocrawler nodejs 的爬虫系统。 特点: 支持web界面方式的摘取规则配置(css selector & regex); 包含无界面的浏览器引擎(phantomjs),支持js产生内容的抓取; 用http代理路由的方式防止抓取并发量过大的情况下被对方屏蔽; nodejs none-block 异步环境下的抓取性能比较高; 中央调度器负责网址的调度(同一时间片内一定数量的抓取任务中根据网站的权重来决定派发任务量; 支持多种抓取实例并存,定制摘取引擎和存储方式。
357525_zongtui
基于hadoop思维的分布式网络爬虫。
Java Web爬虫 MIT
2年前
502076_tigerxue
专门用来解决爬虫采集相关网站数据时模拟自动登录,验证码自动识别的问题;欢迎加入一起开发完善。
Java Web爬虫
1个月前
365569_jiangwl
多线程知乎用户爬虫,基于python3
Python Web爬虫
5个月前
Go语言实现的高性能爬虫,基于go_spider开发。实现了单机并发采集,深度遍历,自定义深度层级等特性。
Go Web爬虫 MPL-2.0
3年前
zhihu-crawler是一个基于Java的爬虫实战项目,主要功能是抓取知乎用户的基本资料。
通过一个实际的项目,来学习如何使用scrapy爬取网络上的信息。这里以豆瓣小组为例,对组内的图片进行爬取,相关信息保存数据到MongoDB,图片下载到本地。
Python Web爬虫 MIT
3个月前
550473_ecitlm
基于nodejs 的爬虫 API接口项目,包括前端开发日报、知乎日报、前端top框架排行、妹纸福利、搞笑视频、各类视频新闻资讯 热点详情接口数据
NodeJS Web爬虫 GPL-2.0
1个月前
A java crawler for infomation collection.
1643058_zhazhapan_admin
用JavaFX开发基于crawler4j的图形化的网络爬虫
Java Web爬虫 MIT
11天前
21346_smiledog
一个基于Spring+SpringMVC+Mybatis+webmagic+extjs开发的段子图片抓取平台
一款分布式爬虫平台,帮助你更好的管理和开发爬虫。 内置一套爬虫定义规则(模版),可使用模版快速定义爬虫,也可当作框架手动开发爬虫
Go Web爬虫
6个月前
92024_kidd_yu
Beanbun 是用 PHP 编写的多进程网络爬虫框架,支持分布式,具有良好的开放性、高可扩展性,基于 Workerman。
PHP Web爬虫 MIT
7个月前
454392_virjar
适合抓取封堵的爬虫框架
1033170_resolvewang
分布式微博爬虫。抓取内容包括微博用户资料、微博信息、评论信息和转发信息。目前专注于微博数据抓取本身,正在快速迭代。如果觉得有帮助,不妨到github上给我点个star,osc上可能不会再继续更新了
Python Web爬虫 MIT
9个月前
基于bootstrap的php小说采集系统
PHP Web爬虫
1年多前

zscat/wemall分布式商城

springmvc mybatis -plus dubbo redis 的商城

李鹏军/platform-wechat-mall

微信小程序商城 (后台开源) 。快速搭建一个属于自己的微信小程序商城。QQ交流群:66502035欢迎大家进群交流技术。

程序猿DD/SpringBoot-Learning

Spring Boot教程与Spring Cloud教程,Spring Boot 2.0新特性讲解连载中!!!

冷冷/pig

基于Spring Cloud、oAuth2.0开发基于Vue前后分离的开发平台,支持账号、短信、SSO等多种登录,提供配套视...

ppmoon/gbt2260

golang实现的中华人民共和国县以上行政区划代码包

李鹏军/platform-wechat-mall

微信小程序商城 (后台开源) 。快速搭建一个属于自己的微信小程序商城。QQ交流群:66502035欢迎大家进群交流技术。

ThinkGem/JeeSite 4.0

Java EE 企业级快速开发平台,基于经典技术组合(Spring Boot、Spring MVC、Apache Shiro...

六月/quick-alarm

通用报警框架,支持报警方式自定义,报警配置自定义

程序猿DD/SpringBoot-Learning

Spring Boot教程与Spring Cloud教程,Spring Boot 2.0新特性讲解连载中!!!

shuzheng/zheng

基于Spring+SpringMVC+Mybatis分布式敏捷开发系统架构,提供整套公共微服务服务模块:集中权限管理(单点登...
10_float_left_people 10_float_left_close