歡迎您光臨本站 註冊首頁

分享經驗豐富的 Linux 程序員 Spence Murray 的開發

←手機掃碼閱讀     火星人 @ 2014-03-09 , reply:0
開發人員的筆記
分享經驗豐富的 Linux 程序員 Spence Murray 的開發技巧
級別: 初級


John Papageorge (john@mediaoverdrive.com)
主席, Media Overdrive
2003 年 12 月

Sppence Murray 是 Linux 開發高手之一,同時長期以來他一直是 UNIX 的堅定支持者.本文介紹的是 Murray 和他在 Codemonks Consulting 的同事在日常的 Linux 開發以及應用服務工作中用到的基本技術: shell 腳本,相信 Linux 的開發人員都會受益於這項有用而且通用的技術.
Spence Murray 是 Codemonks Consulting 的創始人之一,自從 20 世紀 80 年代最早在 SunOS 上編寫代碼到現在,一直致力於 UNIX/Linux 的開發.從那時起,他曾在 IBM 公司的 AIX、SGI 公司的 Irix 工作,長時間地編寫跨平台的 UNIX 代碼,包括 HP/UX,Irix,Solaris/SunOS,SCO UNIX,各種 BSD,MacOS X,當然,還有 Linux.從圖形/視頻設備驅動程序到 UI 代碼,他什麼工作都做過.Murray 編寫的跨平台代碼包括 X Window System Xserver 代碼,以及作為 Netscape Navigator 一部分的核心瀏覽器代碼.

Murray 最經常使用的 Linux 工具是 vi、bash 和 Emacs.「不論我是在寫 C、C 、Java、shell 腳本,還是 HTML,大部分的時間我都在這些工具中來回切換」,他說.


Linux 秘密武器
Murray 認為,對一個 Linux 開發人員來說,shell 是一個強大的軟體開發工具,無論怎麼評價都不過分.「在我做的每一項工作中都要用到 shell 腳本,不論是快速地閱讀和修改普通文本還是編寫代碼」,他說.「它輕便而快捷,它短小的命令是的來回移動代碼稱為一個迅速而沒有痛苦的過程.作為一名編輯,它很快就會成為第二本能」.

對 Murray 來說,Emacs 作為一個開發工具出現的晚了一些.「在 90 年代早期,我嘗試使用 Emacs 作為一個 IDE,並很快就轉換門廳.Emacs 非常強大,在那些日子裡,我會一直開著一個 Emacs 窗口,經常打開幾十個源文件,每個都有我編輯的上下文、使用 gdb 的調試會話以及在不同的源目錄下運行的 bash 腳本.有很多關於 Emacs 的資料,可以說,這是個可怕的工具...再者,您可以在任何您想要花時間去做開發的系統上運行 Emacs.



自從 20 世紀 80 年代中期第一次使用 SunOS支持的 vi 這個簡潔的環境以來,Emacs 編輯器已經成為了 Murray 的標準工具."它在各種流派的 UNIX 上都可以使用,這是我在致力於跨平台的開發工作時選擇它的主要原因之一」,他說.


Linux 開發人員:了解您的 shell
Murray 要求您要了解您的 shell.「Bash、tcsh、csh――shell 是您最基本的軟體開發工具」,他強調說.「它可以做許多了不起的事情.所有的工作都要依賴於它……和它的強大功能」.作為說明通用的 shell 腳本功能強大的例子,在參考資料部分中有一個可以下載的文件,其中有一組腳本,用於獲得 Red Hat 發行的更新 RPM 軟體包並將它們合併到原來的軟體包和定製的軟體包.下載文件並解壓縮后,您可以在 /DeveloperWorks/rpm_update_scripts 目錄下找到腳本.最終結果是一個包括所有軟體包最新版本的目錄和一個用於網路安裝的升級的 hdlist 文件.

下面的代碼片段實現的是對 Red Hat RPM 軟體包的自動更新,以創建一個使用最新的 RPM 的可以安裝的版本.這對任何一個維護公共 Linux 伺服器的人來說是一個基本的步驟.就我們而言,我們通常是維護許多公共 Linux 伺服器上的大量網路服務.下面是可以自動完成更新最新的安全和功能的過程的部分腳本.

下面的腳本樣例證明了普通的 shell 編程技術可以廣泛應用於各種系統配置和程序設計應用.腳本使用的是 bourne shell,它是在不同的 UNIX 系統中最為常見的 shell.這樣就可以保證這些非常輕便的代碼可以稍加修改或者不加修改地在不同的 UNIX 系統上使用.修改 Red Hat 軟體包的規範以應用於其它 Linux 發行版本是很容易的.

freshen.sh 使用指定的 RPM ftp 更新站點上的 RPM 軟體包來更新原有的 RPM 列表.執行過濾器來替換更新 RPM 軟體包.,長長的發行列表根據從更新鏡像站點上得到的新 RPM 軟體包完成更新.




清單 1. fresh.sh

#!/bin/sh
rh_ver=$1
rh_path=$2
update_dir=${rh_path}/RH${rh_ver}-updates
custom_dir=${rh_path}/RH${rh_ver}-custom
install_dir=${rh_path}/RH${rh_ver}-install

# Sanity check for the original directory.

# Create update and install directories if they don't exist

[ -d ${update_dir} ] || mkdir ${update_dir}
[ -d ${install_dir}/RedHat/RPMS ] || mkdir -p ${install_dir}/RedHat/RPMS

# Get latest updates from fresh rpms FTP site

./get_update.sh ${rh_ver} ${update_dir}

# Create/update hardlinks from update, and custom directories
# to the install directory. We assume that original RPMS are already
# hardlinked to the install directory, so all we need to do is filter
# out any replaced by updated packages.

./do-links.sh ${update_dir} ${install_dir}/RedHat/RPMS
[ -d ${custom_dir} ] && ./do-links.sh ${custom_dir}
${install_dir}/RedHat/RPMS

# Filter out all but the latest version of everything.

./filter-rpms.pl $install_dir/RedHat/RPMS

# Rebuild the hard disk lists
/usr/lib/anaconda-runtime/genhdlist ${install_dir}



freshen.sh 調用 do-links.sh 和 get_update.sh,分別去設置 RPM 發行版本的源、宿(省略了源 RPM 軟體包;硬鏈接用來設置目的 RPM)和檢索更新.

清單 2. do-links.sh



#!/bin/sh

src=$1
dest=$2

#for file in $src/*; do
for file in `find $src -name *.rpm -a ! -name *.src.rpm -print`; do
base=`basename $file;`
if test ! -f $dest/$base; then
echo "Linking $file";
ln $file $dest
else
echo "EXISTS: $file";
fi
done




清單 3. get_update.sh

#!/bin/sh
rh_ver=$1
dest=$2
echo "Retrieving updates for version ${rh_ver} to $dest"
lftp << EOF
open ftp.freshrpms.net

mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/i386 $dest/i386


mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/i486 $dest/i486
mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/i586 $dest/i568
mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/i686 $dest/i686
mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/SRPMS $dest/SRPMS
mirror -n pub/redhat/linux/updates/${rh_ver}/en/os/noarch $dest/noarch



Java 和 Linux
在 Codemonks,相當多的開發工作是在 Linux 上用 Java 完成.這兩個工具的組合為創建商業級質量的 Web 應用提供了一個平台,Murray 說.「在做這些項目的過程中,我們發現我們要總體上了解客戶已有的應用代碼」,他回憶說.locks.c (在下載得到的壓縮文件中的 /DeveloperWorks/locks 目錄下;參閱參考資料) 是一個代碼片段,實現的是用於 Java Virtual Machine Profiler Interface (JVMPI;參考資料中有關於 JVMPI 詳細信息的鏈接) 的讀/寫鎖以及大量的調試代碼.

Linux 開發人員的代表
「在情況允許的時候,不要寫特定於系統的代碼」,Murray 說,而是克服困難去「寫好的跨平台的代碼」.受雇的 Murray 堅持認為他最大的資本永遠是「寫具有商業品質的代碼,構建和提供網路服務,定製 OS 或內核,而且完全基於可靠的開放源代碼的平台」.

下面是一個代碼片段,來自於一個跨平台的定製的 IMAP 伺服器,這個伺服器由 Linux 和 MacOS X 的開發人員共同開發.代碼實現的是一個用來處理字元串的簡單的增長緩存.這樣避免了緩存溢出的問題(不要忘記那些安全漏洞),而不必要您每次做某些事情的時候重新分配空間.它是通過維護一個簡單的可變長的緩存來實現的,這個緩存可以寫滿和清空.這個緩存已經被用於一個實驗用的 IMAP 伺服器,這個伺服器是由一個團隊緊張工作了一周完成的.

除了一個簡單的字元串緩衝區的實現之外,這段代碼還實現了一個可變大小的字元串數組.它完成的是一個簡單的介面,當您寫完一個字元串以後,您可以標記它然後繼續寫下一個.此外,這樣會節約空間分配,並且將比較亂的代碼組織到一起.



完整的 IMAP 伺服器的代碼將在今年某個時間發布.


清單 4. 定製的 IMAP 伺服器一部分


#ifndef HOED_BUF_H
#define HOED_BUF_H

typedef struct {
char *str;
int size;
int length;
int str_start;
int max_size;

int n_strings;
int size_strings;
int *str_posn;
char **str_set;
} hoed_buf_t;

#if __GNUC__ > 2 || (__GNUC__ == 2 && __GNUC_MINOR__ > 4)
#define PRINTF(f, a) __attribute__((format (printf, f, a)))
#else
#define PRINTF(f,a)
#endif

extern hoed_buf_t *hoed_buf_alloc(int init_size, int max_size);
extern void hoed_buf_free(hoed_buf_t *);
extern void hoed_buf_reset(hoed_buf_t *);
extern void hoed_buf_new_string(hoed_buf_t *);
extern char **hoed_buf_get_set(hoed_buf_t *, int *n_string);

extern char *hoed_buf_put_char(hoed_buf_t *, char toadd);
extern char *hoed_buf_sprintf(hoed_buf_t *, const char *format,...)
PRINTF(2,3);
extern char *hoed_buf_strcat(hoed_buf_t *, const char *append);
extern char *hoed_buf_cat_sprintf(hoed_buf_t *, const char *format, ...)
PRINTF(2,3);

#endif /* HOED_BUF_H */



稱為殺手級的 Linux 應用程序
對 Murray 來說,有兩個殺手級的 Linux 應用程序:Emacs 和 Netscape Navigator.「Emacs 或許是給人印象最深而且廣為應用的基於 Linux 的應用程序」,他說.「另一個是 Netscape Navigator.有一次,我們要支持20多種 UNIX,我在 Linux 上完成了所有的工作」.

他繼續說,「有趣的是,基於 Linux 的應用程序可能運行於許多不同風格的 UNIX 系統上,甚至安裝了 Cygwin 的 Windows 系統.」

Linux 的未來如何?
當前,Murray 正在進行的 Linux 項目有好幾個,從支持電子郵件、消息和共享資料庫的分散式辦公應用程序到使用標準工具的網路應用程序(標準工具包括:Apache/Tomcat, PHP, PostgreSQL, MySQL, 和 Linux). Murray 有他自己的公司專門為網路服務和網路應用提供主機服務.



對 Murray 來說,得益於 Linux 強大功能的應用程序的列表在不斷地增長.「有很多」,他說.「Oracle, WebSphere, Apache, PostgresQL, MySQL, Cyrus IMAP... 這個列表很長而且在不斷增長.」

對 Murray 來說,Linux 到此為止了.「我們所有的伺服器都運行 Linux;不管目標平台如何,我們主要的開發都在 Linux 上進行;我們把 Linux 推薦給用戶來運行伺服器應用程序」,他說.「 Linux 快速發展的步伐,開放源代碼組織對它的廣泛支持,低廉的開發費用,如果把這些結合在一起,您就知道它是一個難以擊敗的平台」.

參考資料

下載本文中用到的源代碼.


developerWorks 上有 Read John 的 「Secrets of the wireless elite」 專欄.


為打好 Linux 基本原理的堅實基礎,請閱讀 developerWorks LPI 101 和 LPI 102 考試準備系列教程.


「生活在 Emacs 中」 簡捷明了地介紹了這個古老的編輯器.類似地, 「vi 入門 -- 巧表單方法」 讓您不用花很多時間就可以精通vi.


使用 Mail::IMAPClient CPAN 模塊構建 IMAP client with Perl .


了解更多關於 Java Virtual Machine Profiler Interface 的信息.


閱讀 OProfile, 一個用於 Linux 的開放源代碼的 profiler.


想要快速地開始進行 Linux 應用的開發,請訪問為您的 Linux 應用加油提速.您現在可以定購免費軟體的評測工具包 CD.


在 developerWorks Linux 專區中您可以找到更多 Linux 文章.



關於作者
John 一直與高科技界一些名人一起工作,同時他為 CNET、Macromedia、NBCI、Sun Microsystems 和 MSNBC 之類的公司發行了產品和發起了 Web 倡議.1996 年 John 啟動了極富創造力的 CNET/Intel 項目 Mediadome,並在 1998 年建立了 Macromedia 的 Shockwave.com.1999 年他還創建了 NBCi 的 Media Sharehouse.John 作為一名顧問,為 Sun Microsystem/Netscape 的 iPlanet 站點預測和研究 Java 技術的應用程序.目前,他還是 Standard Alliance 的副總裁,這是一家位於舊金山的 iTV 應用和生產的公司.可以通過 john@mediaoverdrive.com 與他聯繫.



[火星人 ] 分享經驗豐富的 Linux 程序員 Spence Murray 的開發已經有894次圍觀

http://coctec.com/docs/linux/show-post-57504.html