應用系統(組件)上線部署實施方案(自己的一些記錄,看不清楚勿噴)
?
假設:使用的是2臺物理機(aix P570)形成雙機集群和一個EMC存儲陣列,WEB AP DB都在一臺服務器上
?
1 機房要求
????? 無電磁干擾、空氣污染、易燃物、水災。空間足夠、承重符合要求、溫度濕度要求等
?
2 HMC
????? HMC 和2臺服務器處于同一個機架,通過一臺交換機同2臺服務器連接。
在HMC中設置2個服務器分區(LPAR),分區設置如下:
服務器分2為LPAR1和LPAR2,每個分區擁有一半CPU、不到一半的內存(由于邏輯分區的內存需要有浪費一定的空間作為內存table,所以不能完全使用內存),2塊HBA(required),3塊網卡(required),4塊硬盤(required),1塊2-por rs232串口卡(required),1塊scsi卡(desired,用來連接外置磁帶機),1塊Other Mass Storage Controller(desired,IDE光驅)
?
3 服務器
插入光盤,進行安裝系統和補丁,注意設置各系統文件的空間大小,將OS安裝到一塊硬盤上。?
安裝powerHA。
?網絡設置,設置好所有網卡的IP,其中2塊網卡設置成心跳IP(兩個LAN用交叉線直連)。
??設置信任關系 vi /etc/hosts
?
4 存儲交換機
???????? 將2臺服務器的光纖卡端口連接到存儲交換機上,先用類似于VLAN的技術將不同應用和存儲隔離,在利用配置存儲交換機實現硬件的Zoning劃分,即讓不同的服務器訪問不同的存儲空間,避免相互干擾。
?
5 存儲
??一般是一個系統柜加多個存儲柜,先開存儲柜,再開系統柜,? 確定磁盤卷的保護方式(RAID0+1 或者RAID5),然后劃分外部使用的LUN、盤鎖和內部管理用LUN。每個LUN都有一個ID。
?使用Solution Enabler 軟件分配LUN給服務器,確認服務器是否連上了存儲。
??? 在主機上安裝EMC ODM EMC存儲驅動
在主機上安裝存儲多路徑軟件? POWERPATH (負載均衡、高可用)
?????? Powermt config
主機名稱 |
配置類型 |
空間編號 |
空間用途描述 |
lun 數量 |
大小 合計 |
位置 |
用途 |
A & B |
? |
1 |
數據存儲 |
3 |
? |
共享存儲 |
數據庫文件 |
2 |
應用空間 |
1 |
? |
共享存儲 |
應用程序、流水、文件日志 |
||
3 |
鎖盤 |
1 |
100M |
共享存儲 |
mc/sg鎖盤 |
?
6 服務器配置
???????? 設置WEB AP DB服務器的用戶、組。
???????? 將存儲空間掛到上面新增的用戶目錄下。
Mksssaraid ??幾塊pdisk硬盤創建raid5,變為邏輯磁盤hdisk2
Mkvg 在hdisk2上建立datavg
Mklv 在datavg上建議一個日志lv,建立一個datalv
Crfs 在datalv上建立文件系統 /home/db等
檢測卷組和文件系統 varyonvg fsck mount ?
在備份服務器上導入共享datavg? importvg –L datavg hdisk2
?
內置的2塊硬盤做OS鏡像。
設置各類服務開關
系統參數設置,設置最大進程數。
中間件掛在到本地硬盤,數據庫和應用掛載到存儲上。
????? ????????
7 ??POWERHA (HP叫 MC/SERVICE GUARD雙機集群)
作為雙機系統的兩臺服務器(主機A和B)同時? 運行Ha軟件
服務器除正常運行自機的應用外,同時又作為? 對方的備份主機
兩臺主機系統(A和B)在整個運行過程中,通過? “心跳線”相互監測對方的運行情況(包括系統? 的軟硬件運行、網絡通訊和應用運行情況等)
一旦發現對方主機的運行不正常(出故障)時? ,故障機上的應用就會立即停止運行,本機(? 故障機的備份機)就會立即在自己的機器上啟? 動故障機上的應用,把故障機的應用及其資源 (包括用到的IP地址和磁盤空間等)接管過來,? 使故障機上的應用在本機繼續運行
應用和資源的接管過程由Ha軟件自動完成,無 需人工干預
當兩臺主機正常工作時,也可以根據需要將其中一臺機上的應用人為切換到另一臺機(備份機)上運行,這個應用是將主機備機指向同一塊存儲空間,正常情況下備機是接受應用請求的。
?
如果主機發生故障的處理流程是:
1、 備機守護進程cmcld檢測到心跳超時
2、 備機搶占存儲上的仲裁盤,進行重組集群
3、 備機上啟動運行包,恢復應用訪問(切換時間就是啟動腳本的執行時間)???????? ????????
?
1、在每個節點上都安裝powerha
2、在主節點上配置 mitty hacmp,設置集群名稱,加入節點2,配置集群網絡,創建rhosts文件,導入到節點2
3、將主節點集群配置環境傳給節點2
4、主備節點創建服務器啟停腳本,? /usr/ha/start ?內容無非就是啟動數據庫,應用等。 加入到集群配置中
5、給集群設定資源,? 包括VG 文件系統,并做同步到節點2
6、驗證,啟動節點 smitty clstart
?
9 數據庫安裝 Informix 為例
???????? 9.1 安裝數據庫
進入informix根目錄,su
???????? ./installclientsdk
???????? ./RUN_as_root.clientsdk
???????? ./ids_install
???????? 對 onconfig.clr進行參數配置
???????? 編譯sqlhosts文件,主要配置主機名,端口名,協議等
???????? 配置/etc/service 將端口的域名解析為數字
???????? 9.2 創建數據庫
???????? Oninit –ivy 進入初始化配置
???????? 創建數據庫
???????? Onspaces –c –d phydbs ?/home/db/Informix/**chunk 創建物理日志
???????? Onspaces –c –d logdbs ……? 創建邏輯日志
???????? Onspaces –c –d **dbs? ……? 創建數據庫
???????? Onparams –a dlogdbs –s 50000 將邏輯日志劃分為50m一個
???????? 9.3 在備機上安裝數據庫,分別在主節點和備用節點編寫數據庫啟動和關閉腳本。
都位于/powerha/下
?
10 安裝并配置中間件
中間件和數據庫主要應該了解調優和配置維護,安裝就略了。? 一般為 tuxedo weblogic
?主機配置浮動IP(業務可識別的IP,集群軟件設置的,非實際IP)
?
這個筆記設計的東西已經算是比較老了,但是現在相信多數銀行還在用,但是發展趨勢是虛擬化,虛擬化的機器申請一般是通過一些軟件,例如vmware的vcenter,相對來說,要比物理機器的安裝要簡單。推薦虛擬化云計算的一本入門書《云計算:從基礎架構到最佳實踐》相信看完之后,對虛擬化和云計算里面還入門的講了下大數據,都會有一定的了解。
?
另外通過oracle rac asm 可以完全取代powerha。
通過powervm下也可以使用powerha。
每個應用都不一樣,這里就不舉例了。
?
?
?
?
?
?
?
?
?
?
?
附 AIX運維基礎:
系統故障] AIX操作系統下應用系統的維護與性能優化
AIX, 性能優化
一、AIX系統數據安全措施
?
在IBM小型機硬件配置期間,就應該考慮數據的安全性,系統資源的配置要滿足容錯處理的要求。主要應考慮以下幾點:
?
①生產主機發生硬件故障后,備機可以馬上自動接管應用系統;
②提高操作系統的硬件冗余,盡量減少單點故障對系統的影響;
③加強系統備份,減少系統版本升級造成的影響。
針對以上要求,可以采取一些安全措施,主要是硬件資源的冗余備份、系統軟件和應用軟件的合理分布以及高可靠性集群軟件的使用。我們的經驗是:把AIX操作系統和HACMP(High Availability ClusterMulti-Processing)軟件安裝在rootvg上,因為rootvg損壞,系統將無法運行,即使通過備份磁帶恢復,也會造成系統停機。因此在磁盤空間充裕的情況下,可考慮對rootvg作鏡像。具體做法是將主機的兩塊內置硬盤做rootvg鏡像,這樣可提高系統的安全性,防止單塊硬盤損壞對系統的影響,即使內置硬盤壞了一塊,系統仍可正常運行。在建立rootvg鏡像時,應盡量使用連接在不同SCSI上的硬盤,以做到負載均衡。另外,為提高系統的容錯能力,可對磁盤陣列上的硬盤進行鏡像配置(RAID0)或RAID5冗余配置,配置為datavg,在上面安裝數據庫和應用程序。為提高節點可靠性,可搭建HACMP集群環境,做到雙機熱備,即在2臺互為備份的主機上配置HACMP參數,滿足系統熱備要求。在日常操作方面,要做好系統備份工作,定期對生產機做兩個或兩個以上的介質備份。
1.rootvg的配置
將hdisk0和hdisk1做成mirror,配置為rootvg。
①把hdisk0、hdisk1加到rootvg:smitty extentvg hdisk1、hdisk0 →rootvg。
②做mirror:mirrorvg -c 2 rootvg。
③在hdisk0、hdisk1上創建boot IMAGE:bosboot -ad hdisk0,bosboot -ad hdisk1。
④改變啟動設備的順序:bootlist -m normal hdisk0,hdisk1 cd0
2.HACMP工作原理
HACMP主要是對群集(cluster)資源的管理,根據應用復雜程度和配置的不同,其群集資源的接管時間在30秒到300秒不等,完全不需要人工干預。一個群集中的資源通常包括:應用程序、硬盤、卷組(VG)、文件系統、NFS文件系統、IP地址等。資源分屬三類資源組(ResourceGroup):層遞式(Cascading)、替換式(Rotating)、同時存取式(Concurrent)。不同類型的資源組對應不同的接管方式。一個群集中可以有幾個資源組,它們可以分別是不同類型,因此,資源接管的方式可以多種多樣,配置十分靈活。
我們一般采用的是層遞式方式,即熱備份工作方式,其工作原理是:NodeA和NodeB都是資源組a的成員,該資源組a被設置成層遞式方式,NodeA對其擁有最高優先級。因此NodeA在群集中處于active狀態時,它會控制資源組a中的所有資源,此時NodeB處于閑置(idle)狀態,僅當NodeAdown掉時,NodeB才會接管資源組a,一旦NodeA重新加入群集,NodeB將釋放資源組aNodeA重新取得控制權。NodeB發生任何故障,不會造成任何影響。
?
二、AIX系統維護經驗
1.故障信息的收集
收集故障信息對于判斷、診斷故障原因,修復系統非常重要。我們通過檢查系統錯誤報告errorlog、發給root用戶的錯誤報告mail和檢查hacmp.outsmit.logboot.log等內容來判斷系統是否發生故障,根據故障信息進行相應的處理。
(1)系統故障記錄
errdemon 進程在系統啟動時自動運行,記錄包括硬件、軟件及其他操作信息,故障記錄文件為/var/adm/ras/errlog,可備份下來或拷貝到別的機器上分析,使用errpt 命令(普通用戶權限也可使用)。
#errpt |more 列出簡短出錯信息
#errpt -d H 列出所有硬件出錯信息
#errpt -d S 列出所有軟件出錯信息
#errpt -aj ERROR_ID 列出詳細出錯信息
(2)控制面板上的LED 代碼
(3)SMS(System Management Service)故障記錄
當主控臺出現鍵盤圖標后(LED顯示“E1F1時”)按1鍵。選擇“Utilities”,選擇“Error Log”,抄下8位故障代碼。
(4) Mail檢查
系統出現故障后會向root用戶發mail,報告出錯信息。通常系統出現故障后沒有進行檢查修復,系統還會定時以mail方式提醒root用戶。
(5)運行故障診斷程序
對系統硬件進行檢查和診斷,當發現有硬件故障時應立即使用diag。
#diag
> 選高級診斷(Advanced Diagnostic)
> 選問題診斷(Problem Determination)或選系統檢查(System Verification)
diag運行后會給出SRN代碼、故障設備名稱及百分比數、地址代碼等。
(6)其他用于收集系統信息的命令
lsdev -C 系統設備信息
lspv 查看物理卷信息
lsvg 查看卷組信息
lslpp 查看文件組信息
lsattr 查看設備參數設置
lscfg 查看VPD(Virtual Product Data)信息
2.系統硬件故障定位
IBM 小型機硬件故障定位方法包括小型機機柜上的顯示面板上的Checkpoints信息,ErrorCode和SRNs。Checkpoints檢查點是系統加電CMOS初始化程序 (IPL,Initial ProgramLoad)運行后顯示在機柜的顯示面板上一系列信息。
IPL流程如下:當系統加電后,自動進入IPL流程,IPL流程包括4個步驟,
①Service Processor的初始化,始于系統加電,直到OK顯示在機柜上的顯示面板上為止。這個步驟會顯示8xxx或9xxx checkpoints代碼。
②由Service Processor引導的硬件初始化,始于按下機柜上的白色電源開關。這個步驟會顯示9xxx checkpoints。“91FF”是最后的代碼,標志著第3步的開始。
③系統固件的初始化,一個系統處理器接管控制并繼續初始化系統資源,這個步驟會顯示Exxx。“E105”是最后的代碼,標志著第4步驟AIX啟動的開始。在這個過程中還會顯示各種位置碼(位置碼代表著系統的每一個部分)。
④AIX啟動,當AIX開始啟動時,顯示面板上的代碼為0xxx,同時位置碼會出現在第二行。當AIX的登錄窗口出現在控制臺上時,第4步驟結束,同時顯示面板上再無任何信息顯示。
當系統運行發現錯誤時,SRNs碼(Service requestnumbers,服務請求碼)會以xxx-xxx的形式顯示在顯示面板上,同時在AIX的errorlog中也會進行登記;當SSA磁盤柜出現故障時,在磁盤柜前面板的液晶顯示屏上會顯示相應的SRNs,同時黃色的顯示燈會閃動,在AIX的errorlog中會登記相應錯誤信息,在出現問題后記錄下代碼,并告之IBM公司解決。
3.軟件問題處理
軟件故障情況錯綜復雜,下面列舉幾個常見的故障處理方法。
(1)文件系統空間不夠
查看有沒有“滿”的文件系統。特別是/、/var、/tmp,不要超過90%。文件系統滿可導致系統不能正常工作,尤其是AIX的基本文件系統。如/ 根文件系統滿則會導致用戶不能登錄。用df-k查看。
# df -k 查看AIX的基本文件系統
除/usr文件系統,其他文件系統都不應太滿,一般不超過80%。
處理方法1:刪除垃圾文件
# du -sk? |sort -rn |head
查找出當前目錄下占空間最大的子目錄,逐層往下直到找出占空間最大的文件(要區分哪些目錄是文件系統的 mountpoint,哪些是文件系統的子目錄)。刪除文件,釋放空間。有時刪除文件后空間并不馬上釋放,這是由于刪除的文件正被某個程序打開。只有當這個程序停止后,空間才釋放,有時甚至需要重啟系統。
處理方法2:增加文件系統大小
# smitty chjfs
只要卷組VG中有剩余空間,文件系統可以在任何時候加大。
(2)檢查文件系統的完整性
# umount filesystem_name
# fsck -y filesystem_name
注意:文件系統必須先umount,再做檢查和修復,否則將導致未知的后果。
(3)查看卷組信息
查看是否有“stale”狀態的邏輯卷。若有,用syncvg命令修復。
(4)檢查內存交換區使用率
檢查使用率是否超過70%,若超過則用chps-sX pgname增加X個PP或用 mkps -a -n -sX myvg在myvg上增加一個PP數為X的內存交換區。
(5)小型機內存泄漏問題
小型機出現內存泄漏,即系統或應用進程無法將使用過的內存釋放,使可用內存的容量逐漸減少。如果可用內存降到某最小值將造成系統或應用程序無法FORK子進程,就會造成系統癱瘓。通常我們可以用ps和sar命令來查看小型機內存和CPU占用率的大概情況以及各進程的內存和CPU占用率的發展趨勢。使用ps命令,可查看內存和CPU占用率的基本情況。找出其中占用內存數不斷變大的進程,這個進程可能就已經發生了內存泄漏。
4.IBM HACMP 雙機熱備系統的管理和維護
(1)HACMP 雙機系統的啟動
以root用戶身份分別進入系統各節點,執行# smit clstart命令。
(2)HACMP 雙機系統的關閉
以root用戶身份分別進入系統各節點,執行# smit clstop命令。
(3)查詢HACMP 雙機系統的狀態
在雙機系統的運行中,操作員只有知道雙機系統的當前狀態,才有可能對雙機系統出現的異常情況進行恢復處理,保證雙機系統的高可用性和高容錯性。查詢HACMP雙機系統的狀態,以root用戶身份進入需要查詢的節點,用# lssrc -gcluster命令檢查HACMP雙機軟件在該節點是否已啟動,系統顯示3個active的信息,則說明HACMP 雙機軟件已正常啟動。
在確認雙機軟件HACMP 正常啟動的情況下,在命令行執行# /usr/sbin/cluster/clstat -a命令查看雙機系統的當前狀態。
5.網絡故障處理
(1)網絡不通的診斷過程
ifconfig 查看網卡是否啟動(up);netstat-i查看網卡狀態;Ierrs/Ipkts和Oerrs/Opkts是否>1%;ping本機網卡地址;ping其他機器地址,如不通,在其機器上用diag檢測網卡是否有問題。
在同一網中,子網掩碼應一致。
(2)網絡配置的基本方法
①如需修改網絡地址、主機名等,一定要用chdev 命令。
# chdev -l inet0 -a hostname=myhost
# chdev -l en0 -a netaddr='112.0.15.1' -a netmask=255.255.255.0'
②查看網卡狀態:# lsdev -Cc-if
③確認網絡地址:# ifconfig en0
④啟動網卡:# ifconfig en0 up
⑤配置路由,有兩種方式加入路由:
a.永久路由
# chdev -l inet0 -a route='112.1.15.2','112.0.15.254'
b.臨時路由
# route add 112.1.15.2 112.0.15.254
用命令 netstat -rn 查看路由表
6.IBM公司的巡檢流程
IBM公司的巡檢流程,對我們日常維護應重點關注的事項有所幫助,大家可以借鑒一下。
(1)檢查系統硬件情況:設備故障燈是否亮。
(2)系統錯誤報告。
(3)檢查是否有發給root用戶的錯誤報告。
(4)檢查hacmp.out,smit.log,boot.log。
(5)關鍵系統的文件使用率不大于80%。
(6)邏輯卷有否stale。
(7)內存交換區使用率是否超過70%。
(8)內存交換區的大小是否為物理內存的1.5倍。
(9)檢查備份情況(是否有系統備份、用戶數據備份,磁帶機是否需要清洗)。
(10)檢查通信設置(網卡、IP、路由表、ping、/etc/hosts、DNS設置等)。
(11)是否有數據保護方式如RAID10/RAID5是否有Hot Spare。
(12)系統DUMP設置是否正確。
(13)檢查系統參數是否正確。
(14)檢查rootvg是否鏡像。
(15)檢查errdemon srcmstr是否正常運行。
(16)檢查機房環境(電壓、濕度)。
(17)檢查系統性能:是否存在性能瓶頸topas vmstat 。
(18)檢查補丁程序(PTF)、微碼(是否需要升級)。
(19)進行HACMP測試:Cluster Verification。
(20)進行系統硬件診斷:運行故障診斷程序(Diagnostic)。
?
三、AIX系統參數優化
AIX內核屬于動態內核,核心參數基本上可以自動調整,因此當系統安裝完畢后應考慮修改的參數一般包括以下內容。
1.系統用戶的最大登錄數maxlogin
maxlogin的具體大小可根據用戶數設定,可以通過smitty chlicense命令修改,該參數記錄在/etc/security/login.cfg文件中,修改在系統重新啟動后生效。
2.系統用戶的limits參數
這些參數位于/etc/security/limits文件中,可以把這些參數設為-1即無限制,可以用vi修改/etc/security/limits文件,所有修改在用戶重新登錄后生效。
3.Paging Space
檢查PagingSpace的大小,在物理內存<2G時,應至少設定為物理內存的1.5倍,若物理內存>2G,可作適當調整。同時在創建Paging Space時應盡量分配在不同的硬盤上,提高其性能。利用smitty chps修改原有Paging Space的大小或利用smittymkps增加一塊Paging Space。
4.系統核心參數配置
利用lsattr-Elsys0檢查maxuproc,minpout,maxpout等參數的大小。maxuproc為每個用戶的最大進程數通常如果系統運行Oracle應調整maxuproc,將Default:128調整到500,maxuproc增加可以馬上生效。當應用涉及大量的順序讀寫而影響前臺程序響應時間時,可考慮將maxpout設為33minpout設為16,用smitty chgsys命令設置。
5.文件系統空間的設定
一般來說,文件系統/、/usr、/var、/tmp的使用率不應超過80%,/tmp建議至少為300M,文件系統滿將導致系統不能正常工作,尤其是AIX的基本文件系統,如/根文件系統滿則會導致用戶不能登錄。用df 查看:#df-k(查看AIX的基本文件系統),利用smittychfs擴展文件系統的空間。
6.激活SSA Fast-Write Cache
利用smitty ssafastw激活每一個邏輯盤hdiskn的Fast-Write Cache:選擇硬盤后,把Enable Fast-Write改為Yes后,回車即可。
7.High water mark for pending write I/Os per filemaxpout和Low water mark for pending write I/Os per file配置
其缺省值為0,在雙機環境中一般應將High water mark設為33 Low water mark設為24,這兩個參數可用smitty chgsys來設置。
8.syncd daemon的數據刷新頻率
該值表示刷新內存數據到硬盤的頻率,缺省值為60,一般可改為20,也可根據實際情況更改。該參數通過/sbin/rc.boot配置,將nohup/usr/sbin/syncd 60>/dev/null 2>&1&參數中的60改為20即可。
?
四、AIX系統備份和恢復
備份和恢復是系統管理員經常要做的事情,主要包括rootvg備份和用戶數據備份。
1.操作系統和系統程序的備份
#tctl -f /dev/rmt0 rewind
#smit mksysb
在“備份設備或文件”中添入“/dev/rmt0”后回車,系統會運行很長時間,等到屏幕顯示OK后拿出磁帶。這時候,系統備份完成。mksysb僅備份rootvg中已安裝的文件系統。
2.用戶數據備份
(1)常用磁帶機選項
/dev/rmt0 若選擇/dev/rmt0,在插入磁帶和寫完一次磁帶時,磁帶機都將磁帶反繞到頭。因此下一次備份文件將覆蓋本次備份。
/dev/rmt0.1若選擇/dev/rmt0.1則插入磁帶和寫完一次磁帶時,磁帶機均不反繞磁帶。因此,一盤磁帶可以連續備份幾個文件或文件系統。
(2)#smit fs
選擇“備份文件系統”,輸入要備份的“文件系統名稱”,輸入“/dev/rmt0.1”,重復上述操作即可在同一盤磁帶上備份多個文件系統。
3.rootvg的恢復
啟動機器進入維護模式,當出現“Welcome to Base Operating System Installation andMaintanence”時,選3 “Start Maintenance Mode for SystemRecovery”,要恢復系統,繼續選4“Install from a System Backup”,出現“Choose mksysbDevice”畫面,選“/dev/rmt0”并插入磁帶后回車,系統自動恢復操作系統。
4.用戶數據恢復
#tctl -f /dev/rmt0 rewind
#smit fs
選擇“恢復文件系統”,添入“設備名稱”和“目標目錄”,系統會自動恢復相應目錄。
?
五、AIX系統日常檢查
AIX系統日常檢查工作是應用維護非常重要的部分,可以把系統故障排除在萌芽階段,以下日常檢查很有參考價值。
(1)硬件檢查
檢查各指示燈狀態和各物理設備的可用情況。
(2)進程檢查
檢查是否有死進程,使用ps -ef命令列出正在運行的所有進程的各種信息。
(3)文件系統是否滿
適用df-k 命令可以以k為單位檢查文件系統的使用率。
(4)檢查系統出錯日志
使用errpt |more命令檢查,清除現有的logErrclear 0。
(5)檢查系統合法/非法登錄情況
使用Last命令檢查登錄地點。
(6)檢查系統是否有巨大的Core文件生成
使用find / -name core-print命令檢查。對Core文件,一般直接刪除即可。
(7)系統性能檢查
①CPU性能:使用Vmstat topas命令檢查。
②內存使用情況:使用topas,vmstat命令檢查。
③檢查IO平衡使用情況:使用iostat命令檢查。
④交換空間使用情況:使用lsps -a命令檢查。
(8)Mail檢查?
?
?
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
