聊聊分布式 SQL 數據庫Doris(九)
優化器的作用是優化查詢語句的執行效率，它通過評估不同的執行計劃并選擇最優的執行計劃來實現這一目標。 CBO: 一種基于成本的優化器，它通過評估不同查詢執行計劃的成本來選擇最優的執行計劃。CBO會根據數據庫系統定義的統計信息以及其他因素，對不同的執行計劃進行評估，并選擇成本最低的執行計劃。CBO的目標 ... ?
聊聊分布式 SQL 數據庫Doris(八)
稀疏索引 密集索引：文件中的每個搜索碼值都對應一個索引值，就是葉子節點保存了整行. 稀疏索引：文件只為索引碼的某些值建立索引項. 稀疏索引的創建過程包括將集合中的元素分段，并給每個分段中的最小元素創建索引。在搜索時，先定位到第一個大于搜索值的索引的前一個索引，然后從該索引所在的分段中從前向后順序遍歷 ... ?
聊聊分布式 SQL 數據庫Doris(七)
LSM-Tree Doris的存儲結構是類似LSM-Tree設計的，因此很多方面都是通用的，先閱讀了解LSM相關的知識，再看Doris的底層存儲與讀取流程會清晰透徹很多，如下是幾個關鍵的設計: SSTable: Sorted Strings Table; 一般由一組數據block和一組元數據bloc ... ?
聊聊分布式 SQL 數據庫Doris(六)
負載均衡 此處的負載均衡指的是FE層的負載均衡. 當部署多個 FE 節點時，用戶可以在多個 FE 之上部署負載均衡層來實現 Doris 的高可用。官方文檔描述: 負載均衡 。 實現方式 實現方式有多種，如下列舉。 開發者在應用層自己進行重試與負載均衡。 JDBC Connector 發現一個連接掛掉 ... ?
記錄一次 postgresql 優化案例（ 嵌套循環改HASH JOIN ）
今天同事給我一條5秒的SQL看看能不能優化。 表數據量： select count(1) from AAAA union all select count(1) from XXXXX; count 1000001 998000 (2 rows) 原始SQL： SELECT A1.PK_DEPT, A ... ?
老知識復盤-SQL從提交到執行到底經歷了什么
sql(Structured Query Language: 結構化查詢語言)是高級的費過程化編程語言,允許用戶在高層數據結構上工作, 是一種數據查詢和程序設計語言, 也是(ANSI)的一項標準的計算機語言. but... 目前仍然存在著許多不同版本的sql語言,為了與ANSI標準相兼容, 它們必須... ... ?
聊聊分布式 SQL 數據庫Doris(四)
FE層的架構都能在網上找到說明. 但BE層的架構模式、一致性保障、與FE層之間的請求邏輯，數據傳輸邏輯等，我個人暫時沒有找到相應的博客說明這些的。當然這些是我個人在學習與使用Doris過程中，對內部交互邏輯與實現感興趣才有這些疑問. 還好現在有GPT這類大模型，有了疑問，只要問題描述得當，大多可以解 ... ?
[Flink] Flink(CDC/SQL)Job在啟動時，報“ConnectException: Error reading MySQL variables: Access denied for user 'xxxx '@'xxxx' (using password: YES)”（1個空格引發的"烏龍"）
1 問題描述 1.1 基本信息 所屬環境：CN-PT 問題時間：2023-11-21 所屬程序: Flink Job(XXXPT_dimDeviceLogEventRi) 作業類型： Flink SQL Job 數據流 : 業務MySQL ==> Flink Job( Flink Cdc Conne ... ?
聊聊分布式 SQL 數據庫Doris(三)
詳細內容閱讀: Apache Doris 分區分桶新功能 與 數據劃分. 在此基礎上做總結與延伸. 在 Doris 的存儲引擎規則: 表的數據是以分區為單位存儲的，不指定分區創建時，默認就一個分區. 用戶數據首先被劃分成若干個分區（Partition），劃分的規則通常是按照用戶指定的分區列進行范圍劃 ... ?
聊聊分布式 SQL 數據庫Doris(二)
Doris中，Leader節點與非Leader節點和Observer節點之間的元數據高可用和一致性，是通過bdbje(全稱:Oracle Berkeley DB Java Edition)的一致性和高可用實現的。 元數據與同步流程 元數據主要存儲四類數據： 用戶數據信息. 包括數據庫, 表的sche ... ?
MySQL安裝、卸載與初始化
一、MySQL簡介 1、MySQL是什么 MySQL 是一款安全、跨平臺、高效的，并與 PHP、Java等主流編程語言緊密結合的關系型數據庫管理系統。MySQL 的象征符號是一只名為 Sakila 的海豚，代表著 MySQL 數據庫的速度、能力、精確和優秀本質。 圖片: MySQL已成為當今主流且最 ... ?
SQL INSERT INTO 語句詳解：插入新記錄、多行插入和自增字段
SQL INSERT INTO 語句用于在表中插入新記錄。 INSERT INTO 語法 可以以兩種方式編寫INSERT INTO語句： 指定要插入的列名和值： INSERT INTO 表名 (列1, 列2, 列3, ...) VALUES (值1, 值2, 值3, ...); 如果要為表的所有列添 ... ?
實例講解數據庫的定義重載函數
在本文中，我們將介紹GaussDB數據庫中的用戶定義函數重載的概念、用法以及示例。用戶定義函數是 SQL 中常用的“編程工具”，允許我們自定義函數來處理和操作數據。 ... ?
手把手教你如何擴展（破解）mybatisplus的sql生成
眾所周知，mybatisplus提供了強大的代碼生成能力，他默認生成的常用的CRUD方法（例如插入、更新、刪除、查詢等）的定義，能夠幫助我們節省很多體力勞動 ... ?
Python MySQL 數據庫查詢：選擇數據、使用篩選條件、防止 SQL 注入
從表格中選擇數據 要從MySQL中的表格中選擇數據，請使用"SELECT"語句： 示例選擇"customers"表格中的所有記錄，并顯示結果： import mysql.connector mydb = mysql.connector.connect( host="localhost", user= ... ?
實現MyBatisPlus自定義sql注入器
目標:新增mysql下的 插入更新的語法 INSERT INTO %s %s VALUES %s ON DUPLICATE KEY UPDATE %s 新增方法類，新增的方法名稱為insertOrUpdate和insertOrUpdateBatch方法，但其mapper層的方法名為insertOrU ... ?
線上SQL超時場景分析-MySQL超時之間隙鎖
數據庫底層實現博大精深，本文所述，根據線上場景進行了一些研究和探討，希望能為相關場景提供一些啟示。文章中難免會有不足之處，希望讀者能給予寶貴的意見和建議 ... ?
分享一次公司晉級考試的SQL題目，非常有趣的案例（postgresql 標量子查詢 where lie 謂詞過濾條件）
同事今天晉級高級工程師考試，發來一道公司出題目讓我幫忙進行優化，其中場景二的案例非常有意思?。 題目內容如下： 原始SQL： scott=> explain analyze scott-> select scott-> a.id, scott-> a.col2, scott-> (select s ... ?
從 SQL 查詢優化技巧去看 h2 數據庫查詢原理
本文目標是：了解查詢的核心原理，對比 SQL 查詢優化技巧在 h2database 中的落地實現。前提：為了貼近實際應用，本文 Code Insight 基于 BTree 存儲引擎。 ... ?
【慢SQL性能優化】 一條SQL的生命周期
本文采用一張簡單的架構圖說明了MySQL查詢中使用的組件和組件間關系。解析了一條sql語句從客戶端請求mysql服務器到返回給客戶端的整個生命周期流程。 ... ?