大數(shù)據(jù)技術(shù)及應(yīng)用介紹2

大數(shù)據(jù)技術(shù)內(nèi)涵持續(xù)進行延伸，經(jīng)過十三五的發(fā)展，已從面向海量數(shù)據(jù)的存儲、處理、分析等基礎(chǔ)技術(shù)，延展到面向海量數(shù)據(jù)的管理治理、流通交易等新興關(guān)鍵技術(shù)。大數(shù)據(jù)...

2023-03-29 標簽：存儲MySQL大數(shù)據(jù) 1169 0

優(yōu)化DBLE獨立子查詢教程

前期開發(fā)反饋在使用獨立子查詢時，不論子查詢中結(jié)果集有幾個，語句都會卡死遲遲得不到返回結(jié)果。但是如果去掉子查詢，直接賦值查詢很快得到返回結(jié)果。聽到這個情況...

2023-03-29 標簽：開發(fā)數(shù)據(jù)庫MySQL 841 0

SELECT COUNT(*) 會造成全表掃描？

如圖所示: 發(fā)現(xiàn)確實此條語句在此例中用到的并不是主鍵索引，而是輔助索引，實際上在此例中我試驗了，不管是 COUNT(1)，還是 COUNT(*)，MyS...

2023-03-25 標簽：MySQL索引 747 0

MySQL數(shù)據(jù)如何同步Elasticsearch

大家應(yīng)該都在各種電商網(wǎng)站檢索過商品，檢索商品一般都是通過什么實現(xiàn)呢？搜索引擎Elasticsearch。

2023-03-24 標簽：適配器MySQLMYSQL數(shù)據(jù)庫 1184 0

為什么需要分布式鎖？基于Redis如何實現(xiàn)一個分布式鎖？

與分布式鎖相對應(yīng)的是「單機鎖」，我們在寫多線程程序時，避免同時操作一個共享變量產(chǎn)生數(shù)據(jù)問題，通常會使用一把鎖來「互斥」，以保證共享變量的正確性，其使用范...

2023-03-24 標簽：MySQLDelUUID 1410 0

UUID的弊端以及雪花算法簡析

在復(fù)雜分布式系統(tǒng)中，往往需要對大量的數(shù)據(jù)和消息進行唯一標識

2023-03-23 標簽：URLMySQLQPS 1319 0

MySQL自增主鍵一定是連續(xù)的嗎？

如果你的業(yè)務(wù)設(shè)計依賴于自增主鍵的連續(xù)性，這個設(shè)計假設(shè)自增主鍵是連續(xù)的。但實際上，這樣的假設(shè)是錯的，因為自增主鍵不能保證連續(xù)遞增。

2023-03-21 標簽：AutoMySQLSQL語句 802 0

如何從MySQL數(shù)據(jù)庫里讀取100w數(shù)據(jù)行進行處理呢？

在實際工作中當指定查詢數(shù)據(jù)過大時，我們一般使用分頁查詢的方式一頁一頁的將數(shù)據(jù)放到內(nèi)存處理。

2023-03-17 標簽：JAVAMySQLJVM 1455 0

實現(xiàn)MySQL與elasticsearch數(shù)據(jù)同步的方法

MySQL 自身簡單、高效、可靠，是又拍云內(nèi)部使用最廣泛的數(shù)據(jù)庫。但是當數(shù)據(jù)量達到一定程度的時候，對整個 MySQL 的操作會變得非常遲緩。

2023-03-17 標簽：數(shù)據(jù)庫MySQLMaxwell 1273 0

安全連接 TiDB/Mysql編程案例分析

為了安全起見，Tidb Cloud Serverless Tier 貌似只支持安全連接。

2023-03-17 標簽：MySQLserverless 514 0

SpringBoot實現(xiàn)MySQL百萬級數(shù)據(jù)量導(dǎo)出并避免OOM的解決方案

全量加載不可行，那我們的目標就是如何實現(xiàn)數(shù)據(jù)的分批加載了。實事上，Mysql本身支持Stream查詢，我們可以通過Stream流獲取數(shù)據(jù)，然后將數(shù)據(jù)逐條...

2023-03-16 標簽：框架springMySQL 2813 0

如何保障MySQL和Redis的數(shù)據(jù)一致性

我直接先拋一下結(jié)論：在滿足實時性的條件下，不存在兩者完全保存一致的方案，只有最終一致性方案。根據(jù)網(wǎng)上的眾多解決方案，總結(jié)出 6 種，直接看目錄。

2023-03-14 標簽：數(shù)據(jù)緩存MySQL 1056 0

ES+Redis+MySQL，這個高可用架構(gòu)設(shè)計太頂了！

同程和藝龍兩家公司融合后，全平臺所有體系的會員總量是十多億。在這么大的數(shù)據(jù)體量下，業(yè)務(wù)線的查詢維度也比較復(fù)雜。有的業(yè)務(wù)線基于手機號，有的基于微信unio...

2023-03-13 標簽：數(shù)據(jù)庫MySQL小程序 947 0

為什么不建議在MySQL中使用UTF-8？

Unicode 字符集包含了上百萬個字符。最簡單的編碼是 UTF-32，每個字符使用 32 位。這樣做最簡單，因為一直以來，計算機將 32 位視為數(shù)字，...

2023-03-13 標簽：數(shù)據(jù)庫MySQL 815 0

MyBatis批量插入別再亂用foreach了

在MySql Docs中也提到過這個trick，如果要優(yōu)化插入速度時，可以將許多小型操作組合到一個大型操作中。理想情況下，這樣可以在單個連接中一次性發(fā)送...

2023-03-13 標簽：參數(shù)MySQL 1511 0

MySQL適合運行在Docker中嗎？

不要將數(shù)據(jù)儲存在容器中，這也是 Docker 官方容器使用技巧中的一條。容器隨時可以停止、或者刪除。當容器被rm掉，容器里的數(shù)據(jù)將會丟失。為了避免數(shù)據(jù)丟...

2023-03-08 標簽：數(shù)據(jù)庫容器MySQL 1561 0

SpringBoot+Vue實現(xiàn)網(wǎng)頁版人臉登錄、人臉識別

技術(shù)點：Springboot，Mysql，JWT，VUE 2.X 等等技術(shù)實現(xiàn)，主要功能點：人臉列表CRUD，日志列表CRUD，基于自建人臉庫通過bas...

2023-03-07 標簽：數(shù)據(jù)庫springMySQL 1321 0