三篇論文入選國際頂會SIGMOD,厲害了騰訊雲資料庫

来源:https://www.cnblogs.com/tencentdb/archive/2022/06/14/16372903.html
-Advertisement-
Play Games

好消息!6月13日,騰訊雲資料庫三篇論文再次入選資料庫行業頂會SIGMOD,被SIGMOD 2022 Research Full Paper(研究類長文)收錄。 本次被收錄的研究成果中,新型數據結構設計、AI智能調參優化等均屬於業界首次提出。騰訊雲資料庫多次入選SIGMOD,表明騰訊雲資料庫在存儲、 ...


好消息!6月13日,騰訊雲資料庫三篇論文再次入選資料庫行業頂會SIGMOD,被SIGMOD 2022 Research Full Paper(研究類長文)收錄。

本次被收錄的研究成果中,新型數據結構設計、AI智能調參優化等均屬於業界首次提出。騰訊雲資料庫多次入選SIGMOD,表明騰訊雲資料庫在存儲、智能管控等方面的積累與前沿創新獲得了國際權威認可。

file

SIGMOD,全稱數據管理國際會議(Special Interest Group on Management Of Data),是由美國電腦協會(ACM)數據管理專業委員會(SIGMOD)發起、在資料庫領域具有最高學術地位的國際性學術會議。

第一篇入選論文題目為HUNTER: An Online Cloud Database Hybrid Tuning System for Personalized Requirements,由騰訊雲資料庫團隊和華中科技大學合作完成,在AI智能調參優化上取得進一步突破。

通俗理解,資料庫的參數設置多達幾百個,這些參數控制著資料庫的性能表現。專業運維人員會花大量時間,根據經驗來調優資料庫的參數,以匹配不同硬體、需求和業務場景。如何利用 AI 技術解決資料庫系統性能問題變得越來越重要和緊迫。

在此篇論文中,騰訊雲資料庫TDSQL-C團隊提出了混合調優系統Hunter,主要解決瞭如何在保證調優效果的前提下顯著減少調優時間的問題。實驗表明:隨著併發度提升實現調優時間準線性降低,在單併發度場景下調優時間只需17小時,在20併發度場景下調優時間縮短至2小時。

第二篇入選論文由中國人民大學和騰訊雲資料庫團隊合作完成,題為CompressDB: Enabling Efficient Compressed Data Direct Processing for Various Databases,論文針對壓縮數據的直接操作與處理,提出一項新型資料庫處理技術——CompressDB。

面對當下指數級增長的數據量,行業普遍使用數據壓縮來減少存儲空間。在大數據管理系統中,直接在壓縮數據上進行操作,可以獲得存儲空間的節約和處理性能的提升。但是,當前的此類系統只關註數據查詢,而一個完整的大數據管理系統必須支持數據查詢和數據操作。

本研究提出並實現了新型資料庫技術,利用上下文無關文法來壓縮數據,通過新的數據結構和演算法設計實現對語法規則進行解析,CompressDB支持直接對壓縮後的數據進行數據查詢和操作,並且支持各種資料庫系統。實驗表明,CompressDB 平均達到40%的吞吐量提升和44%的延遲縮短,並實現1.81倍的壓縮率。

第三篇入選論文由騰訊和北京大學合作完成,題為 BlindFL: Vertical Federated Machine Learning without Peeking into Your Data。針對數據隱私安全問題,該論文提出了一個新的縱向聯邦學習範式BlindFL,可支持多種特征數據類型,且可以在半誠實安全假設下證明其安全性。實驗結果表明,BlindFL可有效保護參與方的隱私數據,並具有更高的運行效率。

騰訊歷來重視資料庫領域的研發,通過校企聯合實驗室共建,面向青年學者的CCF-騰訊犀牛鳥基金,騰訊犀牛鳥科研專項等與高校、科研機構構建“產學研”一體的長期合作,將技術研究成果轉換為應用落地,校企聯合持續輸出前沿技術創新與示範性應用。

此前,騰訊雲資料庫TDSQL曾多次亮相資料庫三大頂會SIGMOD、ICDE、VLDB,以及數據科學領域的頂級期刊IEEE TKDE等。騰訊雲資料庫TDSQL將繼續加大對資料庫基礎研究創新、資料庫產學研合作生態的建設投入,充分釋放領先技術的紅利,助力國產資料庫學術人才培養和技術創新生態建設發展。

為幫助廣大資料庫愛好者更加詳細地瞭解論文內容,我們邀請到了中國人民大學副教授、博士生導師、騰訊犀牛鳥基金獲得者張峰老師,華中科技大學副研究員、互聯網+國賽金獎項目“資料庫智能管家的創新與探索”指導老師劉渝及騰訊 TEG 機器學習平臺部 Angel Graph 團隊應用研究員、北京大學電腦系在讀博士生張文濤老師來到直播間解讀。6 月 21 日 15:00,不見不散!

掃描海報二維碼或點擊閱讀原文,即刻報名參會!

file


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 線上問題年年有,今年特別多。記幾次線上慘痛的踩坑記錄,希望大家以史為鑒。 1. 包裝類型自動解箱導致空指針異常 public int getId() { Integer id = null; return id; } 如果調用上面的方法會發生什麼?id是Integer類型,而方法的返回值int類型, ...
  • 排版雖然只是繪圖中的輔助功能,但是好的排版能夠提高圖形的表現力。 讓人一眼看出圖形要表達的內容和數據,而不用去費力的睜大眼睛去圖中查找。 如果說 matplotlib的坐標系統,各種基礎元素,包括柱狀圖,折線圖,散點圖等它的硬實力, 那麼,排版就是 matplotlib 的軟實力,結合排版,能讓分析 ...
  • 本文是clickhouse專欄第五篇,更多內容請關註本號歷史文章! 一、數據類型表 clickhouse內置了很多的column數據類型,可以通過查詢system.data_type_families這張表獲取版本的所有支持的數據類型。下文中第一列是欄位類型,第二列表示該類型的欄位類型是否區分大小寫 ...
  • #region 輸入數字判斷是否是數字 #region 方法實現 /*不管是實參或形參,都在類型中開闢了空間的; 方法的功能一定要單一; 如GetMax(int n1,int n2); 方法中最忌諱的就是提示用戶輸入的字眼。 ///PS:最新版的沒有namespace這些,目前我想到的調用方法和類就 ...
  • #region 調用 /* 我們在main函數中調用Test()函數,我們管main函數稱為調用者, Test函數稱為被調用者. 如果被調用者想要得到調用者的值: 1) 傳遞參數; 2) 使用靜態欄位來模擬全局變數; 如果調用者想要得到被調用者的值: 1) 返回值; */ #endregion na ...
  • #region 複習 /* 常量:一旦賦值,不能被重新賦值; 枚舉:規範開發; 結構:為了一次性聲明多個不同類型的變數(實際為欄位); 數組:為了一次性聲明多個相同類型的變數 通過下標或索引訪問數組中元素 數組的取值和賦值 冒泡排序:兩個for迴圈 Array.Sort(nums);Array.Re ...
  • 鏡像下載、功能變數名稱解析、時間同步請點擊 阿裡雲開源鏡像站 1.先查看本機的系統信息 [[email protected] h0436 zlong]# cat /etc/redhat-release 2.進入yum.repos.d [[email protected] zlong]# cd /etc/yum.repos.d 3.查看 ...
  • 鏡像下載、功能變數名稱解析、時間同步請點擊 阿裡雲開源鏡像站 ifconfig 命令可以用於查看、配置、啟用或禁用指定的網路介面,還可以用來配置網卡的IP地址、掩碼、廣播地址、網關等,功能很豐富 功能雖然豐富,但是如果你沒有安裝呢? 嘿嘿嘿 如果沒有安裝ifconfig管理命令的話,直接運行ifconfig ...
一周排行
    -Advertisement-
    Play Games
  • 一、引言:什麼是 JSON JSON (Java Script Object Notation) 是一種很常用的數據格式,它常常用在 web 應用程式中。它可以表示結構化的數據。 下麵是常見的 JSON 文件結構 { "name": "Kamishiro Rize", "age": "22", "o ...
  • 前言 大家好,我是蝸牛,在上一篇中,我們介紹了不同版本的HTTP區別和發展背景,這篇文章我們來聊聊HTTP的缺點,HTTP缺點大致總結有以下三點: 通信使用明文(不加密),內容可能會被竊聽。 不驗證通信方的身份,因此有可能遭遇偽裝(客戶端和服務端都有可能) 無法證明報文的完整性,有可能會被篡改。 其 ...
  • resultMap處理欄位和屬性的映射關係 如果欄位名與實體類中的屬性名不一致,該如何處理映射關係? 第一種方法:為查詢的欄位設置別名,和屬性名保持一致 下麵是實體類中的屬性名: private Integer empId; private String empName; private Integ ...
  • 大家在看到這篇文章前,為了有一個舒適的c++IDE,一定感受到了Dev-c++的廉價感,Clion功能的多餘,VS的臃腫。他們也有自己的優點,但糟點太多,令人十分難受。而VS Code,可以取長補短。下麵的配置內容,可以讓你在刷題時,享受絲滑的動畫,體會集成終端的方便,讓你覺得Coding不再枯燥。 ...
  • 給定一個不含重覆數字的數組 nums ,返回其 所有可能的全排列 。你可以 按任意順序 返回答案。 示例 1: 輸入:nums = [1,2,3] 輸出:[[1,2,3],[1,3,2],[2,1,3],[2,3,1],[3,1,2],[3,2,1]] 示例 2: 輸入:nums = [0,1] 輸 ...
  • 設計模式的目的 編寫軟體過程中,程式員面臨著來自 耦合性,內聚性以及可維護性,可擴展性,重用性,靈活性 等多方面的 挑戰,設計模式是為了讓程式(軟體),具有更好 代碼重用性 (即:相同功能的代碼,不用多次編寫) 可讀性 (即:編程規範性, 便於其他程式員的閱讀和理解) 可擴展性 (即:當需要增加新的 ...
  • 本文講解了決策樹的創鍵的過程,包括熵,信息增益的計算,還有決策樹的創建,以及使用matplotlib讓決策樹可視化的詳細過程 ...
  • ♠ use C++11 倍數 若 $a,b,k \in \mathbb N$,且 $a \times k=b$,那麼 $b$ 是 $a$ 的倍數,稱 $a$ 整除 $b$,記作 $a \mid b$。 $[1,n]\in \mathbb N$ 中 $x \in \mathbb N$ 的倍數有 $\l ...
  • LinkList可以定義指向List的指針 1.當函數參數為LinkList L時,意味著只改變或操作List的內容,而不需要改變L這個指針 如 Status GetElem(LinkList L,int i,ElemType) 2.當參數為LinkList &L時,意味著需要改變或操作L這個指針本 ...
  • Spring 5框架 一、Spring概念 1、Spring是輕量級的JavaEE框架 2、Spring可以解決企業應用開發的複雜性 3、Spring有兩個核心部分:IOC和AOP ​ 1)IOC:控制反轉,把創建對象過程交給Spring進行管理 ​ 2)AOP:面向切麵,不修改源代碼進行功能增強 ...