運維人必收藏的最全Linux服務(wù)器程序規(guī)范

發(fā)表于 討論求助 2023-05-10 14:56:27

除了網(wǎng)絡(luò)通信外,服務(wù)器程序還必須考慮許多其他細節(jié)問題,零碎,但基本上都是模板式的。

  • Linux服務(wù)器程序一般以后臺形式運行。后臺程序又稱守護進程。它沒有控制終端,因而也不會意外接受用戶輸入。守護進程的父進程一般是init進程(pid=1)。

  • Linux服務(wù)器程序通常有一套日志系統(tǒng),它至少能輸出日志到文件,有的高級服務(wù)器可以輸出日志到專門的UDP服務(wù)器。大部分后臺進程都在/var/log下有自己的日志目錄。

  • Linux服務(wù)器程序一般以某個專門的非root身份運行。mysqld, httpd, syslogd等后臺進程,并分別有自己的運行賬戶mysql, apache, syslog。‘

  • Linux服務(wù)器通常時可配置的。服務(wù)器程序通常處理很多命令選項,如果一次運行的選項太多,則克拉一用配置文件來管理。絕大多數(shù)服務(wù)器程序都有配置文件并存放在/etc下。

  • Linux服務(wù)器程序通常在啟動時生成一個PID文件并存入/var/run目錄中,以記錄該后臺進程的PID。

  • Linux服務(wù)器程序通常需要考慮系統(tǒng)資源和限制,以預(yù)測自身能承受多大負荷,比如進程可用文件描述符總數(shù)和內(nèi)存總量等。

01 日志

1.Linux系統(tǒng)日志:

Linux提供一個守護進程來處理系統(tǒng)日志–syslogd, 升級版–rsyslogd。

rsyslogd守護進程可以接收用戶進程輸出日志,可以接受內(nèi)核日志。

用戶進程時通過調(diào)用syslog函數(shù)生成系統(tǒng)日志的。

該函數(shù)將日志輸出到一個unix本地域socket類型(AF_UNIX)的文件/dev/log中,rsyslogd則監(jiān)聽該文件以獲取用戶進程的輸出。

內(nèi)核日志在以前的系統(tǒng)上時通過另一個守護進程rklogd來管理的,rsyslogd利用額外的模塊實現(xiàn)了相同的功能。內(nèi)核日志由printk等換樹打印至內(nèi)核環(huán)狀緩存中。環(huán)狀緩存的內(nèi)容直接映射到/proc/kmsg。

rsyslogd通過讀取該文件獲得內(nèi)核日志,默認調(diào)試信息保存在/var/log/debug,普通信息保存至/var/log/messages,內(nèi)核信息:/var/log/kern.log。配置文件:/etc/rsyslog.conf,主要設(shè)置內(nèi)核日志輸入路徑,是否接受UDP日志,及其監(jiān)聽端口(默認514 /etc/services)是否接受TCP日志及其監(jiān)聽端口,日志文件權(quán)限,包含哪些配置文件。

2.syslog()

應(yīng)用程序使用syslog()與守護進程rsyslogd通信。

該函數(shù)采用可變參數(shù)(第二個參數(shù)message和第三個參數(shù)。。。)來結(jié)構(gòu)化輸出。

priority:設(shè)施值 (按位異或) 日志級別。設(shè)施值默認:LOG_USER,下面針對默認設(shè)施值,討論日志級別。

2.1下面這個函數(shù)可以改變syslog的默認輸出方式,進一步結(jié)構(gòu)化日志內(nèi)容

(1)ident:指定字符串將被添加到日志消息的日期和時間之后,通常設(shè)為程序的名字。

(2)logopt:對后續(xù)syslog調(diào)用的行為進行配置,它可取下列值的按位異或

(3)facility: 用來修改ysyslog默認設(shè)施值

此外,日志過濾也很重要,程序再開發(fā)階段可能需要輸出很多調(diào)試信息,而發(fā)布之后,我們又要將這些調(diào)試信息關(guān)閉,解決這個問題的方法并不是再程序發(fā)布之后,刪除調(diào)試代碼(日后可能還會用到),而是緝拿但地設(shè)置日志掩碼,使日志級別大于日志掩碼的日志被系統(tǒng)忽略。

2.2下面這個函數(shù)用于設(shè)置syslog的日志掩碼。

maskpri:指定日志掩碼值,該函數(shù)始終回成功,它返回調(diào)用進程先前的日志掩碼值。

2.3關(guān)閉日志功能:

02 用戶信息

1.UID, EUID, GID, EGID

用戶信息對于服務(wù)器安全很重要,大多說服務(wù)器以root啟動, 非root運行

基礎(chǔ)知識:

一個進程擁有兩個用戶ID, UID, EUID, EUID存在的目的是為了方便資源的訪問, 它使得運行程序的用戶擁有該程序的有效用戶權(quán)限,比如,su用來更改賬戶信息,但修改賬戶時su程序的所有者是root,在普通用戶運行su程序時,其有效用戶就是該程序的所有者root, 有效用戶為root的進程稱為特權(quán)進程,EGID與EUID類似,下面演示uid, euid區(qū)別:

將生成的可執(zhí)行文件,所有者設(shè)置為root,并設(shè)置該文件set-user-id標志,然后運行。

從測試輸出結(jié)果看,進程的uid是啟動程序的用戶id, 而euid是root。

2.切換用戶

03 進程間關(guān)系

1.進程組:

Linux下每一個進程都屬于一個進程組,因此他們除了pid之外,還有進程組ID(PGID)。我們用如下函數(shù)獲取指定進程組PGID.

成功返回pid, 失敗-1,設(shè)置errno。

如果pid與pgid相同,則由pid指定的進程別設(shè)置為進程組首領(lǐng):如果pid為0, 表示當(dāng)前進程的PGID為pgid;如果pgid為0, 則使用pid作為目標pgid。setpid函數(shù)成功時返回0, 失敗-1, 設(shè)置errno。

一個進程只能設(shè)置自己或者其子進程的PGID。并且, 當(dāng)子進程調(diào)用exec系列函數(shù)后,我們也不能再在父進程中對他設(shè)置PGID。

2.會話

(1)一些有關(guān)聯(lián)的進程將組成一個會話, 下面的函數(shù)用于創(chuàng)建一個會話:

該函數(shù)不能由進程組的首領(lǐng)進程調(diào)用,否則將產(chǎn)生一個錯誤。對于非首領(lǐng)的進程, 調(diào)用該函數(shù)不僅創(chuàng)建新會話, 而且有如下額外效果。

調(diào)用進程成為會話的首領(lǐng),此時該進程時新會話的唯一成員。

新建一個進程組,其PGID就是調(diào)用進程的PID, 調(diào)用進程成為該組的首領(lǐng)。

調(diào)用進程將甩開終端(如果有)

該函數(shù)成功時返回新的進程組PGID, 失敗-1, errno。

Linux進程并未提供所謂會話ID的概念, 但Linux系統(tǒng)認為它等于會話首領(lǐng)所在的進程組的PGID,

(2)并提供了如下函數(shù)讀取SID

3.用ps命令查看進程關(guān)系

執(zhí)行ps命令可查看進程,進程組和會話之間的關(guān)系。

在bash_shell 下執(zhí)行ps和less命令,所以ps和less命令的父進程時bash命令,這個可以從PPID(父進程PID)一列看出。

這三條命令創(chuàng)建了一個會話(SID是2962)和兩個進程組(PGID:2962, 3102)bash命令的PID,PGID和SID都相同,顯然它時會話的首領(lǐng), 也就是組2962的首領(lǐng)。ps時3102的首領(lǐng),

04 系統(tǒng)資源限制

Linux上運行的程序都會受到資源限制的影響,比如物理設(shè)備限制(cpu數(shù)量,內(nèi)存數(shù)量等),系統(tǒng)策略限制(cup時間等),以及具體實現(xiàn)的限制(文件名最大長度)Linux系統(tǒng)資源限制可以通過如下一對函數(shù)來讀取和設(shè)置:

getrlimit , setrlimit

rlimit 結(jié)構(gòu)體定義如下:

成功返回0, 失敗-1, 置errno

rlim_t 是一個整數(shù)類型,它描述資源級別

rlim_cur 成員指定資源的軟限制,建議性的,最好不要超越的限制,如果超越,系統(tǒng)可能向進程發(fā)送信號,并終止運行,如果當(dāng)前進程CPU時間超過軟限制,系統(tǒng)將向進程發(fā)送SIGXCPU信號;當(dāng)文件尺寸超過其軟限制時,系統(tǒng)將向進程發(fā)送SIZEXFSZ信號。

rlim_max 成員指定資源的硬限制。硬限制一般是軟限制的上限,普通程序可以減小應(yīng)限制,而只有以root身份運行的程序才能增加硬限制,此外我們可以使用ulimit命令修改當(dāng)前shell環(huán)境下的資源限制(軟/硬)這種修改對該shell啟動的所有后續(xù)程序都有效,我們也可以通過修改配置文件來改變系統(tǒng)軟限制和應(yīng)限制,而這種修改時永久的。

resource參數(shù)指定資源限制類型。如下表

05 改變工作目錄和根目錄

有些服務(wù)器程序好需要改變工作目錄和根目錄(web /var/www)

獲取當(dāng)前進程工作目錄和改變進程的工作目錄的函數(shù):

buf參數(shù)指向的內(nèi)存用于存儲當(dāng)前工作目錄的絕對路徑,size指定其大小

如果當(dāng)前目錄的絕對路徑超度(+1 (‘’))超過了size,則getcwd返回NULL,errno:ERANG。

chdir中path指向要切換到的目錄。成功0, 失敗-1 置errno。

改變進程根目錄:chroot

chroot并不改變進程的當(dāng)前工作目錄,調(diào)用chroot之后,仍需要調(diào)用chdir(“/”)來將工作轉(zhuǎn)至新的工作目錄,之后原來的文件描述符依然生效。所以可以利用早先打開的文件描述符來訪問調(diào)用chroot之后不能直接訪問的文件(目錄).

06 服務(wù)器程序后臺化

最后,如何在代碼中讓一個進程以守護進程的防止運行,守護進程的編寫遵循一定的步驟,下面一個實例。

實際上,linux提供了完成同樣功能的庫函數(shù):

nochdir:傳0則工作目錄將被設(shè)置為”/”,否則繼續(xù)使用當(dāng)前工作目錄。

noclose:傳0標準輸入輸出,標準錯誤輸出都被重定向到,dev/null,否則繼續(xù)使用原來的設(shè)備,成功0, 失敗-1 置error。

干貨分享

  • 這20個好用的 Unix/Linux 命令技巧 送給你

  • Pythoy 之 with ... as 語句的來龍去脈

  • 小白工程師必備:如何在 Git 中克隆、修改、添加和刪除文件?

  • 原來運維不僅僅是 Linux,竟然還要知道這么這么這么多?

  • 利用Python網(wǎng)絡(luò)爬蟲抓取微信好友的所在省位和城市分布及其可視化

  • 基于 Docker 搭建 MySQL 主從復(fù)制

  • 微信朋友圈千億訪問量背后的技術(shù)挑戰(zhàn)和實踐總結(jié)

  • Python之MySQL及SQLAlchemy操作總結(jié)

  • 運維必會基本功之:touch的這些玩法你都會麼

  • 運維必會基本功之:awk從入門到大神

  • Python 中的 functools 是干嘛使的?

  • 運維注意啦:Redis漏洞利用與防御

  • 運維開發(fā)來答:從輸入URL到頁面展示到底發(fā)生了什么

  • Python最簡編碼規(guī)范

  • Shell腳本:你不知道的玩法

  • 可用于企業(yè)的 7 個最佳開源 Web 服務(wù)器

  • 你知道怎么查看Linux發(fā)行版名稱和版本號嗎?

  • 常見MySQL高可用方案選型解讀

  • 為什么學(xué)習(xí)Linux?

  • 高可用架構(gòu)的6大常規(guī)方案

  • Ubuntu 18.04 LTS正式發(fā)布了,但我們來說說RHEL

  • 喪失先機,沒有自研操作系統(tǒng)的大國之痛

  • Python技能進階:冒泡算法排序,面試80%會問到的問題

  • Linux系統(tǒng)中尋求幫助,該找誰?找“男人”??!

  • Linux中netstat與端口的那些事

  • 國際運維圈粗大事了:Twitter遭遇世界范圍宕機,有網(wǎng)友怨稱若“世界末日”

  • 運維安全的那些事

  • Git 上菜了:Git 12 歲,送上 Git 技巧 12 招

  • Linux命令行也能玩Wi-Fi

  • Red Hat Enterprise Linux 7.5 正式版來了

  • Linux下GitHub的玩法分享

  • 給 “rm” 命令添加個“回收站”

  • 聽說墻外又出了個 DNS 是 1.1.1.1 ?

  • MySQL運維:索引與查詢性能優(yōu)化

發(fā)表
26906人 簽到看排名