為確保系(xi)統在(zai)高并(bing)發、大數據量(liang)環(huan)境(jing)下(xia)的穩定高效運行(xing),要求建(jian)(jian)立完善的表(biao)(biao)(biao)空(kong)(kong)間(jian)(jian)(jian)與表(biao)(biao)(biao)分區(qu)管(guan)理(li)機制(zhi),具體包括:定期檢查表(biao)(biao)(biao)空(kong)(kong)間(jian)(jian)(jian)使用率,及時發現并(bing)處(chu)理(li)空(kong)(kong)間(jian)(jian)(jian)不足風險;建(jian)(jian)立分區(qu)自動創(chuang)建(jian)(jian)與維護流程(cheng),防止因分區(qu)缺失導(dao)致的數據插(cha)入失敗;制(zhi)定緊(jin)急情況(kuang)下(xia)的空(kong)(kong)間(jian)(jian)(jian)清理(li)與擴(kuo)展預案,確保在(zai)磁盤空(kong)(kong)間(jian)(jian)(jian)耗盡或(huo)表(biao)(biao)(biao)空(kong)(kong)間(jian)(jian)(jian)無法(fa)擴(kuo)展時能夠(gou)快速響(xiang)應并(bing)恢復(fu) ...
前(qian)幾(ji)天遇到了(le)(le)ORA-12154&TNS-03505這(zhe)個(ge)錯誤, 因為(wei)對其數(shu)據庫(ku)(ku)(ku)環境不了(le)(le)解(jie), 遠程登(deng)錄(lu)過去檢查(cha)的時候, 了(le)(le)解(jie)到一些大概情況(kuang):此(ci)數(shu)據庫(ku)(ku)(ku)安裝在Windows服務(wu)器(qi).遠程客(ke)戶端能(neng)登(deng)錄(lu)數(shu)據庫(ku)(ku)(ku),但是本地服務(wu)器(qi)使用(yong)普(pu)通(tong)賬(zhang)號登(deng)錄(lu)數(shu)據庫(ku)(ku)(ku)時報ORA-12154錯誤,如下(xia)所示: C:\Users\Admin ...
本篇(pian)摘(zhai)錄自黑馬程序(xu)員的(de)(de)B站教學(xue)視頻,由本人(ren)(ren)學(xue)習(xi)視頻內容后總結并提取摘(zhai)要制(zhi)作(zuo)而成的(de)(de)簡要筆記。本筆記只(zhi)記錄到(dao)進(jin)階篇(pian)(大部(bu)分),剩下的(de)(de)進(jin)階篇(pian)以(yi)及(ji)運維篇(pian)由于本人(ren)(ren)職業生涯沒有用武(wu)之地,所以(yi)沒有進(jin)行學(xue)習(xi)。 黑馬程序(xu)員黑馬程序(xu)員 MySQL數據庫入門到(dao)精通(tong),從mysql安裝到(dao)mysql高(gao)級、mysql優(you)化全囊括 ...
在邏輯(ji)復(fu)(fu)制(zhi)(zhi)中,正(zheng)如MySQL的(de)show slave status,或者postgresql的(de)邏輯(ji)復(fu)(fu)制(zhi)(zhi)pg_stat_replication的(de)sent_lsn,來觀察復(fu)(fu)制(zhi)(zhi)進度的(de)坐標位點,其復(fu)(fu)制(zhi)(zhi)進度坐標位置(zhi)都存(cun)儲在復(fu)(fu)制(zhi)(zhi)的(de)源(source)端(duan)。 SqlServer的(de)事務復(fu)(fu)制(zhi)(zhi)則有一些(xie)不(bu)一樣,在發布端(duan)和訂閱端(duan) ...
SqlServer的(de)事務復(fu)制中,immediate_sync和(he)allow_anonymous兩(liang)個參數(shu)會影響到(dao)復(fu)制的(de)后臺行為(wei)和(he)分發庫(distribution)的(de)數(shu)據保留方(fang)式(shi),這兩(liang)個參數(shu)單從名字(zi)上看,可能有些模(mo)棱兩(liang)可甚(shen)至(zhi)云里(li)霧里(li),以下是個人結合復(fu)制的(de)運維(wei),對兩(liang)個參數(shu)的(de)理解(jie)。 1,immediate_s ...
最近(jin)碰到一個 case,發現(xian)在特定(ding)場景下,并行復制竟然比單線(xian)程復制要慢。 現(xian)象 從某(mou)個時(shi)間點(dian)開始,從庫(ku)(ku)的(de)復制延遲持續增加,且沒有下降的(de)趨(qu)勢。 數(shu)據庫(ku)(ku)版(ban)本:8.0.40,事務隔離級別 RC(Read Committed),并行重放線(xian)程數(shu)(replica_parallel_workers)為 8。 分析 ...
開(kai)(kai)(kai)(kai)源(yuan)(yuan)作為(wei)一種(zhong)開(kai)(kai)(kai)(kai)放共享的(de)(de)新型(xing)生產(chan)(chan)模式(shi),已(yi)成為(wei)數字經濟創新、開(kai)(kai)(kai)(kai)放、共享和(he)可持續發展的(de)(de)核心(xin)驅動力。由(you)中國(guo)通信(xin)(xin)標準化協會(hui)(hui)牽頭主(zhu)辦(ban),中國(guo)信(xin)(xin)息通信(xin)(xin)研(yan)究院具體承辦(ban)的(de)(de) 2025 OSCAR 開(kai)(kai)(kai)(kai)源(yuan)(yuan)產(chan)(chan)業大會(hui)(hui)將于 10 月 28 日在北京中關村國(guo)家自主(zhu)創新示范區會(hui)(hui)議中心(xin)舉行(xing)。 大會(hui)(hui)現場(chang)設置(zhi)開(kai)(kai)(kai)(kai)源(yuan)(yuan)集市(shi),以(yi)面向(xiang)參會(hui)(hui)者(zhe)系統展示優 ...
一(yi)句(ju)話概念 索(suo)引(Index) 就(jiu)像是數據庫里的(de)“目錄”或“書的(de)索(suo)引頁”。 它的(de)主(zhu)要作用是: 加快查詢速度,減少數據庫掃描整張表的(de)次數。 舉個(ge)簡單的(de)例子(zi) 假設你(ni)有一(yi)個(ge)商品表 products,里面(mian)有幾(ji)萬條記(ji)錄。 如果你(ni)執(zhi)行(xing)下(xia)面(mian)的(de)查詢: SELECT * FROM products WHERE ...
為(wei)了(le)簡化技(ji)(ji)術棧,以(yi)及(ji)(ji)解決現(xian)有數據(ju)庫(ku)(ku)使用痛(tong)點,奇富科技(ji)(ji)數據(ju)庫(ku)(ku)團隊在2024年引入OceanBase替代部(bu)分MySQL與TiDB,實現(xian)了(le)代碼改造成(cheng)(cheng)本、存儲(chu)與硬件(jian)成(cheng)(cheng)本的(de)(de)大幅縮(suo)減,以(yi)及(ji)(ji)性(xing)能、穩定性(xing)、擴展(zhan)性(xing)等多(duo)方面(mian)的(de)(de)技(ji)(ji)術升級。本文分享奇富科技(ji)(ji)在多(duo)個場景的(de)(de)數據(ju)庫(ku)(ku)痛(tong)點,以(yi)及(ji)(ji)OceanBase落地實踐。 ...
EC編碼能夠對部分(fen)缺失的數(shu)據(ju)進行(xing)數(shu)據(ju)恢復,廣泛應用于存(cun)儲(chu)與通信領(ling)域。vivo目(mu)前HDFS集群節點達萬臺級別,數(shu)據(ju)規模(mo)接近EB級別,并且業(ye)務(wu)數(shu)據(ju)規模(mo)還在以較(jiao)高速(su)度持續增長中(zhong)。在推進壓(ya)縮算法(fa)緩(huan)解存(cun)儲(chu)壓(ya)力的同時(shi),EC編碼的推進是存(cun)儲(chu)降(jiang)本的一大有力手段。 ...
[20251014]建立完善(shan)通用的(de)(de)prx.sql腳本(ben).txt--//前幾天(tian)更改了tpt的(de)(de)prr.sql,想實現(xian)一(yi)個(ge)更加通用pr.sql的(de)(de)版本(ben)。自己做一(yi)些(xie)嘗試:--//參數1支持2種(zhong)格式,第(di)1種(zhong)格式使(shi)(shi)用數字序列使(shi)(shi)用,分開,輸(shu)出(chu)對(dui)應(ying)字段。第(di)2種(zhong)格式使(shi)(shi)用正則表達式輸(shu)出(chu)對(dui)應(ying)字段.--//參數2支持參數2|n ...
最(zui)近有(you)(you)個(ge)需要(yao)求,需要(yao)在(zai)(zai)SqlServer中鎖(suo)定(ding)一(yi)(yi)張表后,然(ran)后搞(gao)一(yi)(yi)些事情(qing),完成后解鎖(suo)。如(ru)何鎖(suo)定(ding)一(yi)(yi)張表,在(zai)(zai)MySQL和PostgreSQL中都比較好處理(li)。有(you)(you)專(zhuan)用(yong)的語(yu)法(fa)來實現,在(zai)(zai)SqlServer中并(bing)沒有(you)(you)對于“直接(jie)鎖(suo)定(ding)一(yi)(yi)張表的語(yu)法(fa)”,如(ru)何來處理(li)? 變通一(yi)(yi)下也比較簡(jian)單,甚至比MySQL和postgresql ...
物聯網(wang)工業數(shu)據(ju)管(guan)(guan)理場景(jing)中(zhong),盡(jin)管(guan)(guan)時序數(shu)據(ju)占主要(yao)部分,但(dan)企業往往需要(yao)實(shi)現跨(kua)維(wei)度關聯分析(xi),多源異構數(shu)據(ju)的關聯融合管(guan)(guan)理對數(shu)據(ju)庫提出了更高(gao)要(yao)求。 國產原(yuan)生時序數(shu)據(ju)庫 IoTDB 通(tong)過 JDBC 接口與數(shu)據(ju)庫管(guan)(guan)理工具 DataGrip 集成,用戶可直接通(tong)過 SQL 實(shi)現跨(kua)系統、多模態數(shu)據(ju)分析(xi),為智(zhi)能制造提供(gong)了全 ...
在(zai)(zai)之(zhi)前(qian)的(de)文章中,我們介紹了如(ru)何(he)使用索引生命周期(qi)策略來管理索引。如(ru)果(guo)要求(qiu)索引根據其生命周期(qi)階段(duan)自(zi)動在(zai)(zai)不(bu)同的(de)節(jie)點(dian)之(zhi)間遷(qian)移(yi),還需要用到冷熱(re)(re)(re)架(jia)構(gou)。我們來看(kan)看(kan)具體(ti)如(ru)何(he)實現(xian)。 冷熱(re)(re)(re)架(jia)構(gou) 冷熱(re)(re)(re)架(jia)構(gou)其實就(jiu)是(shi)在(zai)(zai) Easyearch 集群中定義不(bu)同屬(shu)性(xing)的(de)節(jie)點(dian),這些節(jie)點(dian)共同組成冷熱(re)(re)(re)架(jia)構(gou)。比如(ru)給(gei)所有(you)熱(re)(re)(re)節(jie)點(dian)一個 hot 屬(shu)性(xing) ...
9 月(yue) 24 日,“保障數(shu)(shu)據永(yong)不丟(diu)失!數(shu)(shu)據管理實戰:分區、同步與備(bei)份(fen)”直播中(zhong),天謀科技時(shi)(shi)序數(shu)(shu)據庫(ku)內(nei)核研(yan)發工程師(shi),IoTDB 項目交(jiao)付負責人曹志佳圍繞 IoTDB 分區同步和(he)備(bei)份(fen)相關原理及(ji)實踐展(zhan)開(kai),為大(da)家介(jie)紹(shao)了數(shu)(shu)據分區對時(shi)(shi)序數(shu)(shu)據庫(ku)的重要性、IoTDB 的分區機制和(he)同步方式,以及(ji)流處理框(kuang)架的應用場景。 ...
本文詳(xiang)細(xi)介紹Apache Flink的批處理與流處理執行模式(shi),包括Execution Mode的概念、配置方(fang)法、實現原(yuan)理以及最佳(jia)實踐(jian)。 ...
簡介 向(xiang)量數(shu)據庫已成為存儲和索(suo)引(yin)非(fei)結(jie)(jie)構(gou)化與結(jie)(jie)構(gou)化數(shu)據表征(zheng)(zheng)的首選工具。這(zhe)些表征(zheng)(zheng)被稱(cheng)為向(xiang)量嵌入(vector embeddings),由嵌入模(mo)型(xing)生成。向(xiang)量存儲在使用深度學習(xi)模(mo)型(xing)(尤其是大語言模(mo)型(xing))開發(fa)應用時發(fa)揮著關鍵(jian)作用。什么是向(xiang)量數(shu)據庫?在現實世(shi)界中(zhong),并非(fei)所有數(shu)據都能整(zheng)齊地歸(gui)入行列之(zhi)中(zhong)。處理(li)圖像(xiang)、視頻 ...
[20251010]建(jian)立完善tpt的prr.sql腳本(ben).txt--//昨天在測試時(shi)不小心(xin)輸入(ru)pr命令時(shi)多輸入(ru)一(yi)個(ge)r,沒想(xiang)到居然(ran)執行了,說明在本(ben)目(mu)錄或者SQLPATH環境目(mu)錄下存(cun)在prr.sql腳本(ben)。--//當(dang)時(shi)忙著處理其他事情,先(xian)把這件事情放一(yi)放,今(jin)天上班優先(xian)做一(yi)個(ge)探究。1.環境:SCOTT@boo ...
PostgreSQL pg_auto_failover 高(gao)可用 1:pg_auto_failover集群搭建 PostgreSQL pg_auto_failover 高(gao)可用 2:pg_auto_failover集群運維 鑒于官方//pg-auto-failover.readthedocs ...
近日,天(tian)翼(yi)云數(shu)(shu)據(ju)傳輸服務(wu)軟件(DTS)依(yi)據(ju)《數(shu)(shu)據(ju)庫遷(qian)(qian)移工具能力要求(qiu)》,結(jie)合(he)天(tian)翼(yi)云TeleDB數(shu)(shu)據(ju)庫產品,順(shun)利通(tong)過(guo)中(zhong)國信(xin)息通(tong)信(xin)研究院(簡稱“中(zhong)國信(xin)通(tong)院”)“可信(xin)數(shu)(shu)據(ju)庫”數(shu)(shu)據(ju)庫遷(qian)(qian)移工具專項測試。測試結(jie)果(guo)表明,天(tian)翼(yi)云數(shu)(shu)據(ju)傳輸服務(wu)軟件(DTS)在(zai)數(shu)(shu)據(ju)庫遷(qian)(qian)移工具功能完(wan)備性、易用性、通(tong)用性等方(fang)面均符合(he)標(biao)準要求(qiu)。 ...