Giter Club home page Giter Club logo

vector4wang / spring-boot-quick Goto Github PK

View Code? Open in Web Editor NEW
2.4K 123.0 895.0 5.28 MB

:herb: 基于springboot的快速学习示例,整合自己遇到的开源框架,如:rabbitmq(延迟队列)、Kafka、jpa、redies、oauth2、swagger、jsp、docker、k3s、k3d、k8s、mybatis加解密插件、异常处理、日志输出、多模块开发、多环境打包、缓存cache、爬虫、jwt、GraphQL、dubbo、zookeeper和Async等等:pushpin:

Home Page: http://blog.wangxc.club

Java 98.16% Shell 0.94% FreeMarker 0.41% HTML 0.47% CSS 0.01% Dockerfile 0.02%
maven modules mybatis swagger druid elasticsearch spark spring-boot assembly dubbo

spring-boot-quick's Introduction

欢迎大家留言和PR~

Tip: 技术更新换代太快,本仓库仅做参考,自己的项目具体使用哪个版本还需谨慎思考~(不推荐使用最新的版本,推荐使用(最新-1|2)的版本,会比较稳定)

spring-boot-quick

LICENSE 知识共享协议(CC协议) Build Status Average time to resolve an issue Percentage of issues still open GitHub stars GitHub forks

前言

  自己很早就想搞一个总的仓库就是将自己平时遇到的和学习到的东西整合在一起,方便后面用的时候快速的查找与使用,之前是通过branch 的方式去整理,感觉不直观,一咬牙就花了点时间将所有的分支整合在一起(之前使用branch方式的兄dei,这里对不住了,你们可以将之前的干掉,重新克隆总的),方便自己也方便大家参考,以下是我的相关博客,有兴趣的 可以去浏览浏览,觉得对自己有点启发或者解决了一些问题,可以点个赞~

.
├── README.md
├── pom.xml
├── quick-activemq
├── quick-activemq2
├── quick-async
├── quick-batch
├── quick-cache
├── quick-config-encrypt
├── quick-docker
├── quick-dubbo
├── quick-dynamic-bean
├── quick-exception
├── quick-feign
├── quick-hbase
├── quick-img2txt
├── quick-jdbc
├── quick-jpa
├── quick-jsp
├── quick-jwt
├── quick-kafka
├── quick-log
├── quick-logback
├── quick-lombok
├── quick-modules
├── quick-monitor-thread
├── quick-multi-data
├── quick-multi-rabbitmq
├── quick-mybatis-druid
├── quick-oauth2
├── quick-okhttp
├── quick-oss
├── quick-package-assembly
├── quick-package-assembly-multi-env
├── quick-rabbitmq
├── quick-redies
├── quick-rest-template
├── quick-rocketmq
├── quick-starter
├── quick-starter-demo
├── quick-swagger
├── quick-vue
├── quick-vw-crawler
└── quick-wx-public

spring-boot-quick

基于springboot的快速学习示例

所有分支介绍

quick-idea

  • 自己用idea的配置
  • ignore的模板

quick-crawler 平时的爬虫

  • 领英爬虫
  • 百度搜索领英种子url爬虫和"随机应变"的处理方式 (没想到现在对领英爬虫的需求这么大,最近给一个客户开了自动抓取领英数据的系统,处于安全,就把代码删掉了)
  • 一键导出CSDN某用户的所有博客内容并转换为MD格式到本地

已经将爬虫模块迁移到crawlers

quick-swagger

  • web接口的规范化示例
  • 添加了当传递参数为对象时,如何使用swagger注解

注意:如果接受参数是已@RequestBody方式并且参数中包含日期类型的参数,可在对应模型的日期属性上面添加@JsonFormat(pattern = "yyyy-MM-dd HH:mm:ss")注解

    @JsonFormat(pattern = "yyyy-MM-dd HH:mm:ss",locale = "zh" , timezone="GMT+8") // 注意时区的设置
    private Date birthday; // 出生日期

swagger升级到2.7版本,添加了使用swagger验证功能,注意这里不是auth2鉴权

quick-thread

java线程池Executor的示例 点我

quick-modules  

springboot 模块化开发示例

quick-mybatis-druid

springboot整合mybatis和阿里云的druid监控功能,日志可以控制sql的输出 添加springboot的health监控,链接如下

HTTP方法 路径 描述 鉴权
GET /autoconfig 查看自动配置的使用情况,该报告展示所有auto-configuration候选者及它们被应用或未被应用的原因 true
GET /configprops 显示一个所有@ConfigurationProperties的整理列表 true
GET /beans 显示一个应用中所有Spring Beans的完整列表 true
GET /dump 打印线程栈 true
GET /env 查看所有环境变量 true
GET /env/{name} 查看具体变量值 true
GET /health 查看应用健康指标 false
GET /info 查看应用信息 false
GET /mappings 查看所有url映射 true
GET /metrics 查看应用基本指标 true
GET /metrics/{name} 查看具体指标 true
POST /shutdown 允许应用以优雅的方式关闭(默认情况下不启用) true
GET /trace 查看基本追踪信息 true

quick-multi-data

  • springboot mybatis 多数据源配置,别忘了为多数据源的连接池配置
  • 改为druid多数据源,方便监控数据库查询和性能

quick-spark

springboot整合spark示例 已抽离 点我

quick-package-assembly

  • maven打包示例包含jar的启动与停止脚本(简单粗暴,慎重考虑再使用)
  • 使用assembly打包mybatis产生的xml时,可将对应mapperxml文件放在resources文件,然后再application.properties里配置对应路径,如 mybatis.mapperLocations=classpath:mapper/*.xml 这里需要注意一下

quick-package-assembly-multi-env

程序 依赖包 分开化的多环境部署

quick-tika

apache的文本抽取开源框架,整合到springboot中

quick-ElasticSearch

关于es搜索的相关内容     现在在学习Elasticsearch+Logstash+Kibana 后续会有相关博文、和代码示例~

注意:想要用好es,搜索是关键 移步这里

quick-img2txt 图片与文字转换的程序示例

  • 文字转换成图片
  • 图片转换为txt,可作为一些程序启动的注释,如佛祖注释,spring启动注释,等等,可以根据你输入的图片制作(背景一定要为白色),如

前方预警!!!!

转换前 转换后

  • 验证码识别 使用easyocr(项目地址)提供的api接口,可以识别验证码,这简直是小虫子的福利,就问你怕不怕!(现在收费了。。。)

quick-batch

spring下的批量处理大数据模块,这里是从mysql里读取然后再写入mysql中,可以借鉴下,来源https://github.com/geekyjaat/spring-batch

quick-rabbit

rabbit模块 做了个接口服务

ui

应网友@Android-BRUCE 的要求,添加了延迟队列的处理方式,包括针对消息和针对队列的处理方式

WX20180613-233153@2x.png

一定要把图看懂。。。 友情提示:如果在刚开始queue与exchange绑定错了强烈建议从Rabbit管理页面上删除对应的配置再测试!!!

quick-exception

springboot下统一处理异常方法,即,在请求没到达对应controller报错之后的处理方法,比如404,400和500错误,此处返回的是json字符串,页面的暂时没有

quick-log

  • 使用log4j2作为日志体系。主要实现的功能
  • 控制台输出的是error日志,但是日志文件里存的是info和error日志,并且按年月日生成对应日志文件
  • 控制台颜色输出插件:Grep console
  • 使用AOP输出每个请求的详细日志

quick-wx-api

自己开发的小程序(哇哦窝)使用到的api,非常简单,里面集成了阿里封装的httpclient工具包,挺好用的。

quick-jsp

前段时间一直没有搞定在springboot中使用jsp,今天抽了点时间搞定了,有几点需要注意的地方

  • 创建项目的时候这样选择"spring initializr-->web",ok之后的项目的resource下会有tamplates包,可以删掉
  • 创建webapp/WEB-INF目录(具体根据自己喜好,只要在配置文件写对路径就可以了)
  • 然后在pom文件中添加一下配置,目的是为了让webapp下的jsp文件留在META-INF中,让boot访问到
<plugins>
	<plugin>
		<groupId>org.springframework.boot</groupId>
		<artifactId>spring-boot-maven-plugin</artifactId>
		<executions>
			<execution>
				<goals>
					<goal>repackage</goal>
				</goals>
			</execution>
		</executions>
	</plugin>
	<plugin>
		<groupId>org.apache.maven.plugins</groupId>
		<artifactId>maven-war-plugin</artifactId>
		<configuration>
			<failOnMissingWebXml>false</failOnMissingWebXml>
		</configuration>
	</plugin>
</plugins>
<resources>
	<!-- 打包时将jsp文件拷贝到META-INF目录下-->
	<resource>
		<!-- 指定resources插件处理哪个目录下的资源文件 -->
		<directory>src/main/webapp</directory>
		<!--注意此次必须要放在此目录下才能被访问到-->
		<targetPath>META-INF/resources</targetPath>
		<includes>
			<include>**/**</include>
		</includes>
	</resource>
	<resource>
		<directory>src/main/resources</directory>
		<includes>
			<include>**/**</include>
		</includes>
		<filtering>false</filtering>
	</resource>
</resources>

quick-redis

工作上用到了redis,就添加了redis模块,很简单有key就获取,没有就插入

quick-rocketmq

此处的不是Apache 的Rocketmq,是阿里云服务上的一个消息队列

quick-logback

springboot內置的日志管理模块,使用slf4j

quick-activemq

  • springboot 整合activemq 服务 非常简单,更负责的配置可以自定义containerFactory
  • 添加导出消息队列消息但不消费的方法(慎重使用,不知是否会对mq服务增加压力)

quick-docker

使用docker部署springboot的示例demo,更多内容请见blog

quick-dynamic-bean

根据条件动态的创建bean 用到的场景:有的时候本地测试不想使用mq,可以在将mq对应consumer bean 加上contional注解,并 配置条件

2019年03月14日00:12:54更新 动态创建bean的方式:

  • 动态设置属性;
  • 动态设置属性文件,来改变要生成bean上的注解内容,如@Jmslistener(des="${key}"),我们可以动态改变key来生成不同的bean

quick-dubbo

整合dubbo,用的不是官方的dubbo-stater,用的是这个https://github.com/halober/spring-boot-starter-dubbo 配置很详细 注意dubbo的结构

dubbo admin ui



quick-vw-crawler

结合比较流行的框架SpringBoot抓取CSDN的数据(有关的Spingboot的使用可以参考这里) 有关VW-Cralwer的介绍可以看这里,简单轻便开源的一款Java爬虫框架。

quick-feign

单独使用feign做为请求http接口的客户端工具

(后面会持续更新)

quick-config-encrypt

配置加密功能(待完成)

quick-jwt

参考https://github.com/murraco/spring-boot-jwt 添加的jwt模块,实现网站的简单鉴权

quick-hbase

使用docker搭建hbase环境,springboot集成hbase client,完成基本的CURD;

quick-kafka

使用docker搭建的kafka环境,springboot集成kafka,完成消息的接受和发送

quick-starter

一个开发xxx-starter的示例,帮助你快速开发和部署自己的xxx-starter

温馨提示

  如果您自己想在本地跑一跑,可以将其checkout到本地,直接mvn clean install -U 就ok了,如果您只想运行某个模块,直接复制配置文件和代码就ok了,如果您在测试某个模块但该模块出错,请尽快联系本人,邮箱:[email protected],我会在第一时间将其修复

欢迎star、fork 和 pr

spring-boot-quick's People

Contributors

celebrate-future avatar dependabot[bot] avatar vector4wang avatar vw2019 avatar

Stargazers

 avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar

Watchers

 avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar  avatar

spring-boot-quick's Issues

spring-boot-kafka启动报错,无法自动创建Topic

根据你所述,当项目起来时SpringBoot会自动创建topic1,topic2,topic3三个Topic(例子中),实际上我的Copy下来的项目启动直接报错:
Caused by: java.lang.IllegalStateException: Topic(s) [topic2, topic3] is/are not present and missingTopicsFatal is true at org.springframework.kafka.listener.AbstractMessageListenerContainer.checkTopics(AbstractMessageListenerContainer.java:351) ~[spring-kafka-2.3.0.RC1.jar:2.3.0.RC1] at org.springframework.kafka.listener.ConcurrentMessageListenerContainer.doStart(ConcurrentMessageListenerContainer.java:136) ~[spring-kafka-2.3.0.RC1.jar:2.3.0.RC1] at org.springframework.kafka.listener.AbstractMessageListenerContainer.start(AbstractMessageListenerContainer.java:308) ~[spring-kafka-2.3.0.RC1.jar:2.3.0.RC1] at org.springframework.kafka.config.KafkaListenerEndpointRegistry.startIfNecessary(KafkaListenerEndpointRegistry.java:309) ~[spring-kafka-2.3.0.RC1.jar:2.3.0.RC1] at org.springframework.kafka.config.KafkaListenerEndpointRegistry.start(KafkaListenerEndpointRegistry.java:256) ~[spring-kafka-2.3.0.RC1.jar:2.3.0.RC1] at org.springframework.context.support.DefaultLifecycleProcessor.doStart(DefaultLifecycleProcessor.java:182) ~[spring-context-5.2.0.BUILD-SNAPSHOT.jar:5.2.0.BUILD-SNAPSHOT] ... 14 common frames omitted
我手动创建了topic1事实证明才是可行的;SpringBoot会在何时创建.yml中定义的topic array?i lost something configurations?

build的时候报错了

[ERROR] Failed to execute goal org.springframework.boot:spring-boot-maven-plugin:1.3.2.RELEASE:repackage (default) on project quick-spark: Execution default of goal org.springframework.boot:spring-boot-maven-plugin:1.3.2.RELEASE:repackage failed: Unable to find a single main class from the following candidates [spark.Application, spark.textmatch.SimHash, com.spark.scala.LinearRegression, com.spark.textmatch.TextMatch, spark.test.java.EmailFilter, spark.test.java.Test, spark.test.java.Word2VecTest] -> [Help 1]

quick-docker docker plugin的问题

mvn package docker:build
打包失败,解决方法:

             <plugin>
                <groupId>com.spotify</groupId>
                <artifactId>docker-maven-plugin</artifactId>
                <version>0.4.13</version>
                <configuration>
                    <imageName>${docker.image.prefix}/${project.artifactId}</imageName>
                    <dockerDirectory>src/main/docker</dockerDirectory>
                    <resources>
                        <resource>
                            <targetPath>/</targetPath>
                            <directory>${project.build.directory}</directory>
                            <include>${project.build.finalName}.jar</include>
                        </resource>
                    </resources>
                </configuration>
            </plugin>

docker-maven-plugin 从0.4.3更新到0.4.13

一个小问题

你好! 今天在使用您的代码,在启动时出现了如下问题(spark分支):2017-05-19 20:11:51,986 WARN AnnotationConfigEmbeddedWebApplicationContext:546 - Exception encountered during context initialization - cancelling refresh attempt: org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'applicationConfig': Injection of autowired dependencies failed; nested exception is org.springframework.beans.factory.BeanCreationException: Could not autowire field: private java.lang.String com.spark.config.ApplicationConfig.appName; nested exception is java.lang.IllegalArgumentException: Could not resolve placeholder 'spark.app.name' in string value "${spark.app.name}"
2017-05-19 20:11:51,996 INFO StandardService:180 - Stopping service Tomcat
2017-05-19 20:11:52,020 ERROR SpringApplication:827 - Application startup failed
org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'applicationConfig': Injection of autowired dependencies failed; nested exception is org.springframework.beans.factory.BeanCreationException: Could not autowire field: private java.lang.String com.spark.config.ApplicationConfig.appName; nested exception is java.lang.IllegalArgumentException: Could not resolve placeholder 'spark.app.name' in string value "${spark.app.name}"
at org.springframework.beans.factory.annotation.AutowiredAnnotationBeanPostProcessor.postProcessPropertyValues(AutowiredAnnotationBeanPostProcessor.java:334)
at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.populateBean(AbstractAutowireCapableBeanFactory.java:1214)
at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.doCreateBean(AbstractAutowireCapableBeanFactory.java:543)
at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.createBean(AbstractAutowireCapableBeanFactory.java:482)
at org.springframework.beans.factory.support.AbstractBeanFactory$1.getObject(AbstractBeanFactory.java:306)
at org.springframework.beans.factory.support.DefaultSingletonBeanRegistry.getSingleton(DefaultSingletonBeanRegistry.java:230)
at org.springframework.beans.factory.support.AbstractBeanFactory.doGetBean(AbstractBeanFactory.java:302)
抱歉我对java系的东西不太熟悉 能帮我看下这是什么问题吗

逼死强迫症

image

spring-boot-quick/quick-activemq2/src/main/java/com/active2/config/ActiveMQConfig.java
#56 57行缩进两次tap (手动狗头-_-!)

Consumer和Logkafka 没有可用数据

按照楼主的文档,已经可以正常发送消息和消费消息.
但是在 kafka-manager上看不到以下数据
image

image

请问您这边是否也遇到同样的问题?

提问一个东西

GraphQL的话 数据源使用MySQL 是不是构建较多的SQL
那和restful就没任何变化了

Spark远程调用

嗨,在博客站看到你的springboot和spark示例,
请问如何实现以下需求呢?

在windows环境开发,linux虚拟机装spark, 如何在windows的springboot开发项目中,在一个junit test中远程调用linux中的spark执行任务呢?

欢迎大家提PR

一个人走的很快,但是一群人可以走的很远~~~

大家如果有感兴趣的模块可以在这里提一提,我尽可能的添加进去~~~

Recommend Projects

  • React photo React

    A declarative, efficient, and flexible JavaScript library for building user interfaces.

  • Vue.js photo Vue.js

    🖖 Vue.js is a progressive, incrementally-adoptable JavaScript framework for building UI on the web.

  • Typescript photo Typescript

    TypeScript is a superset of JavaScript that compiles to clean JavaScript output.

  • TensorFlow photo TensorFlow

    An Open Source Machine Learning Framework for Everyone

  • Django photo Django

    The Web framework for perfectionists with deadlines.

  • D3 photo D3

    Bring data to life with SVG, Canvas and HTML. 📊📈🎉

Recommend Topics

  • javascript

    JavaScript (JS) is a lightweight interpreted programming language with first-class functions.

  • web

    Some thing interesting about web. New door for the world.

  • server

    A server is a program made to process requests and deliver data to clients.

  • Machine learning

    Machine learning is a way of modeling and interpreting data that allows a piece of software to respond intelligently.

  • Game

    Some thing interesting about game, make everyone happy.

Recommend Org

  • Facebook photo Facebook

    We are working to build community through open source technology. NB: members must have two-factor auth.

  • Microsoft photo Microsoft

    Open source projects and samples from Microsoft.

  • Google photo Google

    Google ❤️ Open Source for everyone.

  • D3 photo D3

    Data-Driven Documents codes.