標簽目錄：數據庫

2018
10-13

主流Java數據庫連接池分析(C3P0,DBCP,TomcatPool,BoneCP,Druid)

主流數據庫連接池常用的主流開源數據庫連接池有C3P0、DBCP、TomcatJdbcPool、BoneCP、Druid等C3p0:開源的JDBC連接池，實現了數據源和JNDI綁定，支持JDBC3規范和JDBC2的標準擴展。目前使用它的開源項目有Hibernate、Spring等。單線程，性能較差，適用于小型系統，代碼600KB左右。DBCP(DatabaseConnectionPool):由Apache開發的一個Java數據庫連接池項目，Jakartacommons-pool對象池機制，Tomcat使用的連... 繼續閱讀 >

2018
06-20

時序數據庫技術體系 – Druid 多維查詢之Bitmap索引

時序數據庫從抽象語義上來說總體可以概括為兩個方面的基本需求，一個方面是存儲層面的基本需求：包括LSM寫入模型保證寫入性能、數據分級存儲（最近2小時的數據存儲在內存中，最近一天的數據存儲在SSD中，一天以后的數據存儲在HDD中）保證查詢性能以及存儲成本、數據按時間分區保證時間線查詢性能。另一方面是查詢層面的基本需求：包括基本的按時間線進行多個維度的原始數據查詢、按時間線在多個維度進行聚合后的數據統計查詢需... 繼續閱讀 >

2018
03-23

用Python構建你自己的RSS提示系統

人生苦短，我用Python，Python是非常棒的快速構建應用程序的編程語言。在這篇文章中我們將學習如何使用Python去構建一個RSS提示系統，目標是使用Fedora快樂地學習Python。如果你正在尋找一個完整的RSS提示應用程序，在Fedora中已經準備好了幾個包。Fedora和Python——入門知識Python3.6在Fedora中是默認安裝的，它包含了Python的很多標準庫。標準庫提供了一些可以讓我們的任務更加簡單完成... 繼續閱讀 >

2018
01-02

分布式事務的總結與思考

思來想去，個人覺得要理解「分布式事務」，必須先知道什么是“事務（Transaction）”。當然，這里提到的“事務”是在事務型數據庫（TransactionalDatabase）知識領域內的。一個事務包含了若干個數據庫操作，這些操作通常都會對數據庫產生變化。值得一提的是，多個事務之間是互不影響，獨立運行的，事務里的各個操作最終都得以持久化。事務一個很重要的特性是："all-or-nothing"。通俗來講，事務是對數據的... 繼續閱讀 >

2017
12-25

新一代數據庫技術在雙11中的黑科技

摘要：12月13-14日，由云棲社區與阿里巴巴技術協會共同主辦的《2017阿里巴巴雙11技術十二講》順利結束，集中為大家分享了2017雙11背后的黑科技。本文是《新一代數據庫技術在雙11中的應用》演講整理，本文主要從數據庫上云和彈性調度開始談起，重點分享了新一代數據庫以及其在雙11中的應用，包括X-DB、X-KV和ESDB等。12月13-14日，由云棲社區與阿里巴巴技術協會共同主辦的《2017阿里巴巴雙11技術十二講》順利結束，集中為大... 繼續閱讀 >

2017
11-25

MySQL · 最佳實踐 · SQL Server三種常見備份 已認證的機構

摘要本期月報是SQLServer數據庫備份技術系列文章的開篇，介紹三種常見的SQLServer備份方法的工作方式、使用T-SQL語句和使用SSMSIDE創建備份集三個層面，介紹SQLServer的三種常見備份的工作原理和使用方法。三種常見的備份包括：?數據庫完全備份（FullBackup）?數據庫日志備份（TransactionLogBackup）?數據庫差異備份（DifferentialBackup）備份的重要性在開始分享之前，我們首先來看看數據... 繼續閱讀 >

2017
11-20

現代IM系統中消息推送和存儲架構的實現-博客-云棲社區-阿里云

前言IM全稱是『InstantMessaging』，中文名是即時通訊。在這個高度信息化的移動互聯網時代，生活中IM類產品已經成為必備品，比較有名的如釘釘、微信、QQ等以IM為核心功能的產品。當然目前微信已經成長為一個生態型產品，但其核心功能還是IM。還有一些非以IM系統為核心的應用，最典型的如一些在線游戲、社交應用，IM也是其重要的功能模塊?？梢哉f，帶有社交屬性的應用，IM功能一定是必不可少的。IM系統在互聯網初期即存... 繼續閱讀 >

2017
10-09

【譯】Go 中如何進行單元測試

在寫《Go語言標準庫》的第九章——測試時，看到了此文，講解挺細致，于是翻譯為中文，作為學習《Go語言標準庫》的第九章的補充材料。如果你花過一些時間學習如何編程，你很可能見過許多地方提過測試。似乎每個人都在談論測試，似乎都同意你應該進行測試，但這到底需要什么呢？在這篇文章中，我將嘗試回答這個問題，首先解釋什么是測試，然后我會用Go去深入實際編寫測試。在編寫測試時，我將通過編寫自定義mai... 繼續閱讀 >

2017
09-16

如何打造一個日均PV千萬級別的大型系統？

作者介紹周金橋，具有豐富的系統規劃、設計、開發、運維及團隊組織管理工作經驗，熟悉.Net、J2EE技術架構及應用。微軟2008-2012五屆最有價值專家(MVP)，2009年單獨著有《ASP.NET夜話》一書，2010年與人合著《程序員的成長之路》。至今活躍在多個技術社區。本文系作者原創投稿，未經 DBAplus社群 允許，不得擅自轉載和使用。本文我選定的方向是如何開發一個大型系統，在這里我對大型系統的定義為日... 繼續閱讀 >

2017
08-05

從技巧、案例和工具入手，詳解性能優化怎么做

作者介紹顏圣杰，.NET平臺軟件工程師，對DDD領域驅動設計感興趣，目前在研究ABP框架，熱愛寫作與分享。最近一段時間系統新版本要發布，在beta客戶測試期間，暴露了很多問題，除了一些業務和異常問題外，其它都集中在性能上。有幸接觸到這些性能調優的機會，這里跟大家歸納交流一下。性能優化是一個老生常談的問題了，典型的性能問題如頁面響應慢、接口超時，服務器負載高、并發數低，數據庫頻繁死鎖等。而造成性能... 繼續閱讀 >

2017
08-01

10個提升MySQL性能的小技巧

從工作量分析到索引的三條規則，這些專家見解肯定會讓您的MySQL服務器尖叫。在所有的關系數據庫中，MySQL已經被證明了完全是一頭野獸，只要通知停止運行就絕對不會讓你多等一秒鐘，使你的應用置于困境之中，你的工作也承受極大的風險。不過事實是，普通的錯誤都在MySQL性能錯誤的射程之內。所以為了使你的MySQL服務器能夠高速運轉，提供穩定且持續的服務，消除這些錯誤是非常有必要的，但是這可能常常會被你的繁忙... 繼續閱讀 >

2017
05-31

Android截屏與WebView長圖分享經驗總結

最近在做新業務需求的同時，我們在Android上遇到了一些之前沒有碰到過的問題，截屏分享、WebView生成長圖以及長圖在各個分享渠道分享時圖片模糊甚至分享失敗等問題，在這過程中踩了很多坑，到目前為止絕大部分的問題都還算是有了比較滿意的解決方案。以下就從三個方面來總結一下過程中遇到的挑戰和最后的解決方案。一、概述最近在做新業務需求的同時，我們在Android上遇到了一些之前沒有碰到過的問題，截屏分享、... 繼續閱讀 >

2017
05-06

Android工作經驗之開發技術分享

1.全部Activity可繼承自BaseActivity，便于統一風格與處理公共事件，構建對話框統一構建器的建立，萬一需要整體變動，一處修改到處有效。2.數據庫表段字段常量和SQL邏輯分離，更清晰，建議使用Lite系列框架LiteOrm庫，超級清晰且重心可以放在業務上不用關心數據庫細節。3.全局變量放全局類中，模塊私有放自己的管理類中，讓常量清晰且集中.4.不要相信龐大的管理類的東西會帶來什么好處，可能是一場災難，而要... 繼續閱讀 >

2016
12-21

全文搜索：分詞不在需要，按句子索引即可

摘要：一般來說的全文搜索服務，大體是基于字和關鍵詞的，基于語句的全文搜索服務是一個有意思的課題。以文字為最小節點，以語句為分枝，建立語義樹，提供基于語義樹的全文檢索服務。通過對語句進行語義特征編碼，并結合數據庫，來實現基于語義樹的全文索引和搜索服務。1引言搜索引擎是信息時代的基礎服務之一，搜索引擎服務的核心為全文檢索。常用的全文檢索，一般以關鍵詞的檢索為主，對于不同的語言需要不同的... 繼續閱讀 >

2016
11-23

如何備份導出 iOS 微信聊天數據庫

網絡上已經有一些關于探討如何導出IOS版微信聊天記錄的導出，比如WeBack和iTools，但這兩類工具主導針對的都是小白用戶，并沒有給出如何獲取完整數據庫的方案，盡管實際原理相差無幾，但想要程序更好地進行操作數據，還是所有差別，特此記錄。目前最新的IOS版本為10.1.1，據觀察該版本的備份文件存儲格式與IOS9略有不同，因此部分沒有及時更新的導出工具暫時無法使用。創建iPhone備份想要獲取到應用的... 繼續閱讀 >

2016
11-21

大眾點評訂單系統分庫分表實踐

背景原大眾點評的訂單單表早就已經突破兩百G，由于查詢維度較多，即使加了兩個從庫，優化索引，仍然存在很多查詢不理想的情況。去年大量搶購活動的開展，使數據庫達到瓶頸，應用只能通過限速、異步隊列等對其進行保護；業務需求層出不窮，原有的訂單模型很難滿足業務需求，但是基于原訂單表的DDL又非常吃力，無法達到業務要求。隨著這些問題越來越突出，訂單數據庫的切分就愈發急迫了。這次切分，我們的目標是未來十年內不需要... 繼續閱讀 >