mysql强制使用指定索引查询

语法： select * from table_name force index (index_name) where conditions; 使用关键字 force

#########mysql强制使用指定索引查询

SELECT * FROM `yrd_pay_flow` FORCE INDEX(`idx_trxn_date`)

WHERE trxn_date > '2017-08-12 59:59:59' AND trxn_date < '2016-06-23 00:00:00';

from:https://www.cnblogs.com/pc-boke/articles/9916986.html

spring boot服务docker镜像优化之旅

缘由我们在使用spring boot开发的服务中，一般会选择打包成单体的fatjar来发布服务，这在传统的部署方式下是非常方便的，但是当我们选择使用docker这种容器化的方式来部署应用的时候，却有一点点的不便之处，因为这个单体的jar一般都比较大，每次镜像push到仓库和从仓库拉取都需要比较长的时间。原因是什么了？ docker的一大特色就是镜像的存储是分层的，参考下面这张官图我们在Dockerfile中的每一个指令会对应到镜像的每一层，docker在更新镜像时，只会推送变更过的层，当它计算出来这一层的摘要和之前的版本一致时，会复用上一次打包镜像时的缓存，会极大的提高打包镜像以及镜像push/pull操作的速度。那么问题来了，当我们springboot打包出来的单体jar的时候，每次编译这个jar都会发生变化，对应的存储层也会发生变化，push和pull操作时都需要重新推送，而且这个jar一般都不小，一个典型的应用会在100M左右，对应用部署和发布的速度会有比较大的影响。稍作思考，很容易就能发现这个肥大的jar文件里面，大部分其实都是固定不变的各种依赖库，我们真正每次编译会 […]

docker springboot项目镜像优化

遇到的问题：公司java项目按老的方式打包出来一个fat jar，100MB, 推送到腾讯云镜像仓库很慢，8分钟。。。走的是公网，专线暂时还没配置好以前是内网harbor，速度还不明显。归根究底，一次推送100MB是个不合理的事情思路：了解spring boot打包，期望将依赖的libs 和业务代码拆分优化dockerfile，充分利用缓存解决问题：先修改spring-boot-maven-plugin，只打包业务代码。网上有些是配置exclude，我试了，恶心到了。。那么多包挨个找

<groupId>org.springframework.boot</groupId>

<artifactId>spring-boot-maven-plugin</artifactId>

<groupId>${project.groupId}</groupId>

<artifactId>${project.artifactId}</artifactId>

</include>

</includes>

</configuration>

</plugin>

新增maven-dependency-plugin，将依赖移到libs目录下

<groupId>org.apache.maven.plugins</groupId>

<artifactId>maven-dependency-plugin</artifactId>

<phase>package</phase>

<goals>

<goal>copy-dependencies</goal>

</goals>

<includeScope>runtime</includeScope>

<outputDirectory>${project.build.directory}/libs</outputDirectory>

</configuration>

</execution>

</executions>

</plugin>

优化dockerfile 参考 https://medium.com/@nieldw/caching-maven-dependencies-in-a-docker-build-dca6ca7ad612 ，牛逼 [crayon-60ccb9f […]

优化 ASP.NET Core Docker 镜像的大小

在这容器化的世界里，我们已经很少直接通过文件发布来运行asp.net core程序了。现在大多数情况下，我们都会使用docker来运行程序。在使用docker之前，我们往往需要打包我们的应用程序。asp.net core程序的镜像打包，网上有很多教程，其中大多数是使用sdk这个镜像来直接打包。打出来的包有好几百MB，3.1 SDK打出来的包甚至超过了1GB。那么有什么办法来缩小我们打出来的镜像吗？最小能缩小到多少呢？这篇文章就来介绍下如何缩小asp.net core 打包出来镜像的大小。新建asp.net core 程序新建一个asp.net core应用程序，用来演示打包。首先我们演示下如果使用dotnet sdk5.0来打包 docker 镜像。 sdk:5.0

FROM mcr.microsoft.com/dotnet/sdk:5.0 AS build

WORKDIR /app

COPY /. /app

RUN dotnet restore -s https://nuget.cdn.azure.cn/v3/index.json

WORKDIR /app/CoreDockerImageSizeTest

RUN dotnet publish -o ./out -c Release

EXPOSE 5000

ENTRYPOINT ["dotnet", "out/CoreDockerImageSizeTest.dll"]

在项目根目录下新建一个Dockerfile文件，文件内容如上。这个Dockerfile比较简单，使用dotnet sdk:5.0最为底层包来构建，这也是最傻瓜的打包方式。那么看看这个镜像打出来有多大吧。 [crayon-60ccb9fc06 […]

MySQL中联合主键的 in 查询

就一句话:

1	SELECT * from PrjOlc WHERE (Prj,SubID) in (SELECT Prj,SubID FROM SP where stage='设计' and 负责人 = 'XXX000')

from:https://www.cnblogs.com/ShengunErshu/p/14239690.html

The table‘xxxx’is full

下午跑程序，在插入mysql时突然报错： ”The table‘xxxx’is full“ 而之前一直没问题的。上网查了一下，都说临时表的问题，需要设置”tmp_table_size“： tmp_table_size 如果内存内的临时表超过该值，MySQL自动将它转换为硬盘上的MyISAM表。如果你执行许多高级GROUP BY查询并且有大量内存，则可以增加tmp_table_size的值。 http://www.2cto.com/database/201106/92968.html 感觉与我们服务器情况不太相符：我们没用到临时表，而且tmp_table_size已经非常大了。再查到： mysql出现"the table is full"的问题,一般有两个原因: 一 .You are using the MEMORY (HEAP) storage engine; in this case you need to increase the value of the max_heap_table_size system variable. […]

mysql json 使用类型查询函数

一,对记录的操作 1.创建有json字段的表

1 2	-- 创建表 CREATE TABLE t_json(id INT PRIMARY KEY, sname VARCHAR(20) , info JSON);

2.插入记录

-- 插入含有json数组的记录

INSERT INTO t_json(id,sname,info) VALUES( 1, 'name1', JSON_ARRAY(1, "abc", NULL, TRUE, CURTIME()));

-- 插入含有json对象的记录

INSERT INTO t_json(id,sname,info) VALUES( 2, 'name2', JSON_OBJECT("age", 20, "time", now()));

INSERT INTO t_json(id,sname,info) VALUES( 3, 'name3', '{"age":20, "time":"2018-07-14 10:52:00"}');

3.查询记录

-- 查询记录

SELECT sname,JSON_EXTRACT(info,'$.age') FROM t_json;

SELECT sname,info->'$.age' FROM t_json;

-- 查询key

SELECT id,json_keys(info) FROM t_json;

4.修改记录

-- 增加键

UPDATE t_json SET info = json_set(info,'$.ip','192.168.1.1') WHERE id = 2;

-- 变更值

UPDATE t_json SET info = json_set(info,'$.ip','192.168.1.2') WHERE id = 2;

-- 删除键

UPDATE t_json SET info = json_remove(info,'$.ip') WHERE id = 2;

二,创建json值函数 1.JSON_ARRAY 生成json数组

-- JSON_ARRAY(val1,val2,val3...)

-- 生成一个包含指定元素的json数组。

SELECT JSON_ARRAY(1, "abc", NULL, TRUE, CURTIME()); -- [1, "abc", null, true, "10:37:08.000000"]

2.JSON_OBJECT 生成json对象

-- JSON_OBJECT(key1,val1,key2,val2...)

-- 生成一个包含指定K-V对的json object。如果有key为NULL或参数个数为奇数，则抛错。

SELECT JSON_OBJECT('age', 20, 'time', now()); -- {"id": 87, "name": "carrot"}

3.JSON_QUOTE 加"号

-- JSON_QUOTE(json_val)

-- 将json_val用"号括起来。

SELECT JSON_QUOTE('[1,2,3]'); -- "[1,2,3]"

三,搜索json值函数 1.JSON_CONTAINS 指定数据是否存在

set @j = '{"a": 1, "b": 2, "c": {"d": 4}}';

-- JSON_CONTAINS(json_doc, val[, path])

-- 查询json文档是否在指定path包含指定的数据，包含则返回1，否则返回0。如果有参数为NULL或path不存在，则返回NULL。

SELECT JSON_CONTAINS(@j, '4', '$.c.d'); -- 1

2.JSON_CONTAINS_PATH […]

mysql字符串拆分实现split功能

【0】需求【0.1】需求描述数据库中 num字段值为：实现的效果：需要将一行数据变成多行【0.2】实现的SQL

SELECT

SUBSTRING_INDEX(SUBSTRING_INDEX('7654,7698,7782,7788',',',help_topic_id+1),',',-1) AS num

FROM

mysql.help_topic

WHERE

help_topic_id < LENGTH('7654,7698,7782,7788')-LENGTH(REPLACE('7654,7698,7782,7788',',',''))+1

涉及的知识点【1】字符串拆分： SUBSTRING_INDEX（str, delim, count）参数解说解释 str 　　　　需要拆分的字符串 delim 　　分隔符，通过某字符进行拆分 count 　　当 count 为正数，取第 n 个分隔符之前的所有字符；当 count 为负数，取倒数第 n 个分隔符之后的所有字符。举例

（1）获取第2个以逗号为分隔符之前的所有字符。

SELECT SUBSTRING_INDEX('7654,7698,7782,7788',',',2);

（2）获取最后一个到倒数第2个以逗号分隔符之后的所有字符

SELECT SUBSTRING_INDEX('7654,7698,7782,7788',',',-2);

所以，我们的核心代码中的 -1 ，就是获取以逗号为分隔符的最后一个值；也就是7788 【2】替换函数：replace( str, from_str, to_str) 参数名　　解释 str 　　　　需要进行替换的字符串 from_str 　　需要被替换的字符串 to_s […]

max_allowed_packet设置问题

最近在运行的项目出现了一个线上事故，有人反映商城的东西下不了单了，到后台看了一下，果然报了一个错 Cause: com.mysql.jdbc.PacketTooBigException: Packet for query is too large (1046 > 1024). You can change this value on the server by setting the max_allowed_packet' variable.; ]; Packet for query is too large (1046 > 1024). You can change this value on the server by setting the max_allowed_packet' variable.; nested exception is com.mysql.jdbc.PacketTooBigException: Packet for query is too large (1046 > 1024). You can change this […]

带你入门consul

consul consul用于微服务下的服务治理，主要特点有：服务发现、服务配置、健康检查、键值存储、安全服务通信、多数据中心等。什么叫服务治理发现？起初我们的服务比较单一，各服务之间通过接口就能访问。后面服务越来越复杂出现了分布式，为了不引起单点问题，必然是多服务部署，如果还用原来的方式直接连接，那么在某个服务挂掉或者修改了信息，就会导致连接失败。如果连接端能够不去关心具体的服务配置，他只要连接到那个服务，后续的工作由其它服务保证，包括负载均衡、健康检查等，保证总有可用的连接那就行了，consul就是做这个的，当然，它的功能远不止这些，这里只是以服务发现为例。与它同类的东西，还有Eureka、zooKeeper、etcd等也能做这些事，说不上谁好谁坏，看场景挑合适的吧，不过Eureka现在已经闭源了，这个还是建议不要去用这个了。 consul下载 consule的安装超级简单，去官方下载地址Download ，找到自已对应系统的压缩包，解压后里面就一个文件consul, 将这个文件放到你的PATH中，就能直接用了。验证下安装成功没有, 看到下面的提示就行了。 [crayon-6 […]

MySQL show processlist说明

show processlist和show full processlist processlist命令的输出结果显示了有哪些线程在运行，不仅可以查看当前所有的连接数，还可以查看当前的连接状态帮助识别出有问题的查询语句等。如果是root帐号，能看到所有用户的当前连接。如果是其他普通帐号，则只能看到自己占用的连接。showprocesslist只能列出当前100条。如果想全部列出，可以使用SHOW FULL PROCESSLIST命令

mysql> show processlist;

+----+------+--------------------+------+---------+-------+-------+------------------+

+----+------+--------------------+------+---------+-------+-------+------------------+

| 2 | root | 192.168.100.1:7437 | test | Sleep | 8035 | | NULL |

| 3 | root | 192.168.100.1:7438 | NULL | Sleep | 24348 | | NULL |

| 5 | root | 192.168.100.1:7443 | NULL | Sleep | 24317 | | NULL |

| 7 | root | 192.168.100.1:7450 | test | Sleep | 24272 | | NULL |

+----+------+--------------------+------+---------+-------+-------+------------------+

6 rows in set

mysql> show full processlist;

+----+------+--------------------+------+---------+-------+-------+-----------------------+

+----+------+--------------------+------+---------+-------+-------+-----------------------+

| 2 | root | 192.168.100.1:7437 | test | Sleep | 8042 | | NULL |

| 3 | root | 192.168.100.1:7438 | NULL | Sleep | 24355 | | NULL |

| 5 | root | 192.168.100.1:7443 | NULL | Sleep | 24324 | | NULL |

| 7 | root | 192.168.100.1:7450 | test | Sleep | 24279 | | NULL |

+----+------+--------------------+------+---------+-------+-------+-----------------------+

6 rows in set

各个列的含义： ①.id列，用户登录mysql时，系统分配的"connection_id"，可以使用函数connection_id()查看 ②.user列，显示当前用户。如果不是root，这个命令就只显示用户权限范围的sql语句 ③.host列，显示这个语句是从哪个ip的哪个端口上发的，可以用来跟踪出现问题语句的用户 ④.db列，显示这个进程目前连接的是哪个数据库 ⑤.command列，显示当前连接的执行的命令，一般取值为休眠（sleep），查询（quer […]

mysql select into的用法

MySQL不支持Select Into语句直接备份表结构和数据,一些种方法可以代替,如下:

#MYSQL不支持:

Select * Into new_table_name from old_table_name; 这是sql server中的用法

#替代方法:

Create table new_table_name (Select * from old_table_name);

from:https://blog.csdn.net/zwldx/article/details/82227533

2021年六月
一	二	三	四	五	六	日
« 5月
	1	2	3	4	5	6
7	8	9	10	11	12	13
14	15	16	17	18	19	20
21	22	23	24	25	26	27
28	29	30