前言

隨著互聯網紅利的逐漸消失，互聯網公司獲取新客戶的難度和成本越來越高，用戶增長的運營同學需要不斷嘗試不同的拉新策略，并根據用戶反饋及數據反饋快速調整，同時能夠快速跟進市場熱點，快速迭代產品功能。我們所在部門承接大量的金融業務（金白條、支付、小金庫、基金等）拉新獲客的訴求。為了在滿足快速交付業務需求不以犧牲產品質量為代價，我們制定了用戶增長質量門禁體系，通過規范化的質量活動對需求交付的各個階段進行質量準入和準出，步步為營，形成用戶增長產品需求交付質量保證“七重門”。

一重門：用例前置-未雨綢繆，把缺陷消滅在萌芽階段

TDD（Test-Driven Development）是敏捷測試的重要實踐，它強調在編寫代碼之前先編寫測試代碼，以此驅動代碼質量的提升以及功能的覆蓋。結合當前平臺研發部質量保證的現狀，測試用例絕大部分都是利用XMind編寫的文字描述形式的，若完全按照典型的TDD實踐進行落地，編寫測試代碼的成本較高，短時間內難以看到效果，因此我們第一階段優先實現了測試用例的前置，即測試用例的編寫和評審前置到設計評審或代碼開發之前，通過測試用例進一步明確功能需求、性能要求、異常流程、數據需求及驗收標準，并彌補需求評審環節可能遺漏的功能點和流程有欠缺的地方，提前預防缺陷，減少了在后期測試階段的返工和修復成本。通過在用戶增長、微電等領域多個項目的試點，各方均給與了正向的反饋，目前正在擴大試點范圍，目標是80%的需求實現用例前置。

二重門：單元測試-分而治之，確保每個最小功能單元的正確性

單元測試是對軟件中的最小可測試單元（即代碼中的函數、方法、類等）進行獨立的測試。它的主要目的是驗證每個單元是否按照預期正確工作。單元測試具有以下幾個好處：

• 提高代碼質量：通過編寫單元測試，開發人員可以驗證每個單元的行為是否符合預期，這可以幫助發現潛在的錯誤、邊界情況和異常行為。
• 確保模塊間的獨立性：單元測試要求每個單元都能夠獨立地進行測試，有助于構建更加靈活、可擴展和可維護的代碼。
• 支持重構和代碼重用：可以幫助開發人員驗證重構后的代碼是否仍然能夠正確工作，確保重用的組件在新環境中的行為符合預期。
• 減少調試時間：單元測試可以快速發現問題所在，縮小調試的范圍，加快問題排查的速度。
• 建立信心和提供文檔：通過編寫全面的單元測試，開發人員可以建立對代碼行為的信心，并且在代碼發生變更時，可以快速運行測試來驗證代碼是否仍然正常工作。

總之，單元測試是一種有效的軟件測試手段，它由開發人員編碼實現并執行，充分體現了全民質量保證的理念。在用戶增長的項目中，研發較為看中單元測試，在編碼的同時寫了大量的單測代碼，尤其是用戶增長研發團隊接入了ChatGPT，并聯合集團其他部以JoyCoder聯合項目組的形式，不斷迭代優化，目前已經可以快速自動生成較為規范的單元測試代碼，可以大大降低單元測試的工作量。

三重門：冒煙演示-嚴格把關，確保基本功能正常

冒煙測試在產品質量保障中起到了早期篩選問題、初步評估待交付需求質量的作用。合格的冒煙測試能夠快速篩選問題、幫助團隊優化資源和工作分配，并實現對產品質量的初步評估，能夠促進團隊交付效率的提升。在用戶增長質量保證的實踐中，我們一般通過行一組關鍵功能和核心流程的基本測試用例來驗證系統在最初階段是否適合進行更深入的測試，一般采用冒煙演示的方式，研發認為具備提測的條件之后，邀請測試同學一起現場進行冒煙用例的演示和走查。在我們的實踐中，一般會把總用例中30%左右的用例標記為為冒煙用例，一般都是主流程、核心功能的驗證點。不同的需求冒煙用例的比例可能差別較大，與需求的難易程度、涉及核心主流程的多少等有關系，一般情況下，研發和測試很容易就冒煙用例的內容和比例達成共識。

四重門：測試執行-明察秋毫，將缺陷一一捕獲

在產品、項目和需求交付流程中，測試的執行是產品質量保障的第四道防線，也是確保軟件質量的最關鍵步驟之一。通過有效的測試執行，能夠將產品缺陷盡早發現，缺陷的類型包括且不限于：功能問題、用戶體驗問題、性能問題、安全漏洞、埋點規范、兼容性、風控防刷等等。測試執行階段是測試同學工作時長最長的階段，也是其他角色最為熟悉的測試工作內容。通常在該階段發現的需求缺陷能達到95%以上，一般情況下，在測試執行階段的工作量占比總體研發工作的30%~50%，當然，不同的需求，測試工作量占比可能差別較大，尤其是回歸測試的比例，以及自動化測試在回歸測試中的占比，都直接影響測試執行階段的工作量和時長。

五重門：產品驗證-精益求精，功能、性能、體驗一個不能少

產品驗證是確保軟件質量的第五道防線，包括UAT、UI走查以及體驗驗收三部分。在需求準備上線之前，我們會邀請產品經理在預發環境或測試環境對待交付功能進行驗證，此時，測試人員和產品經理一同參與對產品的系統驗證，測試同學進行主流程演示或者產品經理自主驗證功能、性能和用戶體驗是否滿足最初的需求和預期，同時驗證運營配置是否有問題。產品驗證的結果分為兩種情況：通過和不通過。對于通過的情況，我們可以開始進行最終的發布和交付工作。對于不通過的情況，我們第一時間反饋給開發團隊，以便及時修復和優化問題。在產品驗收階段，基于產品設計和用戶視角，產品經理可以提出各種觀點和意見，從而進一步完善產品。這種多元化的反饋和意見可以幫助團隊在上線前識別和解決潛在問題，雖然此時已經處于需求交付的后期，但因系統還未面客，仍有一定的時間修復問題，這樣可以盡量避免問題逃逸到線上產生客訴。

另外，若涉及較多前端交互的需求，在產品驗證完需要邀請UI設計師進行UI走查以及用戶體驗同事進行體驗驗收。作為上線前用戶操作、用戶體驗方面的驗收，若因體驗存在缺陷導致驗收不通過，用戶體驗同事有權決定推遲上線，直至完成了優化，或者各方就體驗問題達成了共識，可以先上線，并在大范圍投放之前完成優化。

六重門：運營驗收-結果導向，以用戶和運營雙視角審視待投放功能

運營驗收主要是在需求上線后，邀請運營同學在線上進行最終的驗收，運營同學站在業務及用戶視角，驗證待交付功能是否與最初的預期一致，運營驗收階段是功能面客前的最后一道防線，基于對用戶的深刻洞察、敏銳的直覺以及對市場上同類功能的深入研究，運營同學在該階段經常能發現一些大家容易忽略的問題或缺陷。同時，更重要的是，可以驗證后臺配置是否有問題、預算是否充足，并決定新舊功能的分流比例、缺陷是否在容忍范圍內、是否需要報備客服，并確定投放后的運營策略、運營節奏及后續的產品迭代規劃。在該階段，偶爾會發生運營意見與產品意見、研發測試意見不一致的情況，因此，該階段也是一個互相說服、拉齊認知的重要階段。

七重門：容災演練-防患未然，極端情況下仍能保持業務連續性

隨著業務發展、微服務架構、分布式架構和虛擬化容器技術的廣泛普及，軟件架構的復雜度在不斷提升，服務之間的依賴所帶來的不確定性也成指數級增長，在這樣的服務調用網中，任何一環出現的正常或者異常的變化，都有可能對其他服務造成類似蝴蝶效應一般的影響。隨著用戶增長線上營銷活動、拉新工具、公共組件的不斷增加，整體鏈路增長以及數據流轉復雜，對整個系統的可用性、穩定性挑戰也越來越大，所以非常有必要主動找出系統中的脆弱環節，然后針對性地進行加固、防范，從而避免故障發生時所帶來的嚴重后果，進一步提升業務系統的高可用，提高業務系統應急保障能力。近幾年，國內外已經發生了數次大規模的故障導致對海量用戶的服務長時間中斷，產生了巨大的負面影響。為有效減少因內外部環境的故障對系統造成的影響，我們在日常工作中模擬各類故障，以檢驗對系統的影響及研測團隊的風險應對能力，我們在用戶增長領域進行了兩類容災演練：

• 一種是應用層面的混沌演練（Chaos Engineering）

混沌演練是一種通過有意引入系統隨機性、不穩定性和故障來測試和改進系統可靠性的實踐方法，它旨在幫助組織識別和解決潛在的系統缺陷和性能問題，以減少系統故障和提高系統的容錯性。混沌演練的關鍵理念是“通過引入故障來發現故障”。通過有節制地引入不穩定因素和故障場景，例如關閉某個服務、模擬網絡延遲、引發硬件故障等，混沌演練可以驗證系統的彈性、容錯能力和恢復能力。它能夠幫助我們發現隱藏的系統弱點，識別性能瓶頸和獨立失敗點，并提供改進系統穩定性和可靠性的機會。

• 一種是應用層面的混沌演練（Chaos Engineering）

演練的場景包括運營商網絡斷網、京東云機房斷網、存儲設備斷網、網絡流量抖動、網絡流量丟包等，影響范圍可能更廣，因此需要提前梳理好演練內容和應急方案，具體包括根據不同場景梳理演練SOP、根據SOP設置演練模板、根據模板評估系統是否達到演練要求、根據演練要求升級改造系統、根據演練模板設計演練流程及checklist，確保不會因演練而影響線上系統。通過對演練過程、演練內容、風險事項、應對方案的梳理，做到萬一發生類似基礎性故障或網絡、數據庫切換的時候，有序執行SOP操作，系統處于風險可控的狀態。截止目前，已經完成了針對用戶增長領域掛獎、發獎、資金組件等三個核心應用的數據庫、緩存切換演練，達到了預期效果。 總結

本文介紹了用戶增長領域在快速交付產品的同時為保證交付質量所設置的七道防線，每道防線都像一道門禁，只有滿足了準入要求，才能進入下一個階段，以此來規范各個階段的質量活動，并作為質量保證全流程的執行標準。需要指出的是，在實際的質量實踐中，不是形而上的、簡單粗暴的執行以上質量活動，我們會根據產品和業務需求的實際情況進行一定范圍的靈活調整或裁剪，在質量和效率之間達到一個動態的、適度的平衡。