项目发布准备(freesbsd上postgres升级等一些准备)

0.删除200服务器setup数据库中的不必要表和存储过程

DROP TABLE "sensorPressure";
DROP FUNCTION hex_to_int(text);
DROP FUNCTION "pressureDataToSensorPressure"();

 

1.备份200的setupd数据库，:pg_dump -D -h localhost -U pgsql mydb(数据库名称) >  mydb.bak

2.还原setupdb到172的graindb  :psql -h localhost -U pgsql -d graindb < /home/mydev/project/setupdb.bak

    （遇到问题：提示 -d 选项无效  换用另外一个命令备份大数据库，具体查看postgres文档

     4.理大数据库; 4.1输出大数据库; 因为 PostgreSQL 允许表的大小大于您的系统允许的最大文件大小， 可能把表转储到一个文件会有问题，因为生成的文件很可能比您的系统允许的最大文件大。 因为 pg_dump 输出到标准输出，您可以用标准的 Unix 工具绕开这个问题： 使用压缩的转储. 使用您熟悉的压缩程序，比如说 gzip。 xiaop@xiaop-laptop:~$ pg_dump mydb(数据库名) | gzip > mydbBACK.gz 4.2 恢复大数据库; 用下面命令恢复： xiaop@xiaop-laptop:~$ createdb mydbNEW(新数据库名) xiaop@xiaop-laptop:~$ gunzip -c mydbBACK.gz | psql mydbNEW 或者 xiaop@xiaop-laptop:~$ cat mydbBACK.gz | gunzip | psql mydbNEW

）

windows 下恢复postgres

D:/Program Files/PostgreSQL/8.3/bin>psql -U postgres -d setupdb < G:/setup_bak

 

 

3.检查websetup触发器,存储过程,创建代码

 

4.使用websetup初始化graindb:paster setup-app development.ini
   4.1手动调用存储过程执行pressureData表到sensorPressure表转换

5.手工运行定时任务中的平均和拟合程序

6.使用172的graindb作为数据库运行web服务器快速测试全部功能

 

7.修改210服务器grainrpc数据库服务器地址及数据库名为172数据库

8.再次检查web服务器是否获得最新数据

9.运行定时任务使之成为后台程序

 

 

 

 

 

10.删除freebsd上postgres8.3数据库，从ports安装8.4

  （遇到了点问题，参考文档：http://www.cheeren.com/node/18）

  

唉！ 升級...升級...升級...這一陣子一直升級，這次輪到PostgreSQL 大升級。升级...升级...升级...这一阵子一直升级，这次轮到PostgreSQL 大升级。 PostgreSQL 不像其它軟體，即使是8.2 升級到8.3，也必須大改，所以無法直接用upgrade 工具直接升。 PostgreSQL 不像其它软体，即使是8.2 升级到8.3，也必须大改，所以无法直接用upgrade 工具直接升。 即使是Windows 版本，也必須勞心費力一番。即使是Windows 版本，也必须劳心费力一番。 這次我用FreeBSD 版本的升級做為例子，來說明最簡單也是最正確的大改版升級步驟。这次我用FreeBSD 版本的升级做为例子，来说明最简单也是最正确的大改版升级步骤。 首先，請先把原本資料庫的資料完全備份下來。首先，请先把原本资料库的资料完全备份下来。 如果你是Windows 的使用者或是Linux 的使用者，你可以考慮使用pgAdmin III 的「工具」選單中的「備份」或「備份全域」來做，這樣簡單很多，但是由於pgAdmin III 的說明太少，我實在看不懂「備份」對話方塊中選項的含意，所以乾脆不用。如果你是Windows 的使用者或是Linux 的使用者，你可以考虑使用pgAdmin III 的「工具」选单中的「备份」或「备份全域」来做，这样简单很多，但是由于pgAdmin III 的说明太少，我实在看不懂「备份」对话方块中选项的含意，所以干脆不用。 最正式的方法是使用在console 下的工具：pg_dump 和pg_dumpall。最正式的方法是使用在console 下的工具：pg_dump 和pg_dumpall。 兩者的差別在於，前者可以針對某個特定的database 做備份，而後者一般用來把整個伺服器資料做完整的備份。两者的差别在于，前者可以针对某个特定的database 做备份，而后者一般用来把整个伺服器资料做完整的备份。 我建議直接使用pg_dumpall 比較方便和快速。我建议直接使用pg_dumpall 比较方便和快速。 方法如下：方法如下： $ pg_dumpall > filename $ pg_dumpall > filename 而filename你可以自己取，比如host_a.20080206.full.dump 之類的。而filename你可以自己取，比如host_a.20080206.full.dump之类的。 名稱中加入日期可以讓你更清楚知道這個備份檔備份的日期。名称中加入日期可以让你更清楚知道这个备份档备份的日期。 加入full 字眼，可以提醒自己，這是完整備份，而非一般維護時所做的連續性部份備份的一份。加入full 字眼，可以提醒自己，这是完整备份，而非一般维护时所做的连续性部份备份的一份。 如果你所管理的PostgreSQL 有超過一台以上，那麼最好連資料庫主機名稱都註明。如果你所管理的PostgreSQL 有超过一台以上，那么最好连资料库主机名称都注明。 對了，差點忘了一件極重要的事！对了，差点忘了一件极重要的事！ 在Windows 上，只要你使用administrators 群組中的任何一位使用者登入，然後從開始功能表→PostgreSQL 8.3→Command Prompt，就可以打開「命令提示字元」，而且可以下達pg_dumpall 指令；但是，在FreeBSD，一般安裝時，預設root 是不允許執行PostgreSQL 的相關指令的，所以請先切換成pgsql 用戶，如果你沒更動pgsql 的密碼，那麼預設的密碼很「隨機」，也就是任你怎麼猜也都猜不出來，但是你可以先用su 切成root，再用su - pgsql 切換成pgsql 使用者，不用輸入任何密碼即可，這時就可以執行上述指令。在Windows 上，只要你使用administrators 群组中的任何一位使用者登入，然后从开始功能表→PostgreSQL 8.3→Command Prompt，就可以打开「命令提示字元」，而且可以下达pg_dumpall 指令；但是，在FreeBSD，一般安装时，预设root 是不允许执行PostgreSQL 的相关指令的，所以请先切换成pgsql 用户，如果你没更动pgsql 的密码，那么预设的密码很「随机」，也就是任你怎么猜也都猜不出来，但是你可以先用su 切成root，再用su - pgsql 切换成pgsql 使用者，不用输入任何密码即可，这时就可以执行上述指令。 但是請注意，這時最好把這個備份檔移到安全位置，以免繼續進行的安裝過程中不傎誤砍。但是请注意，这时最好把这个备份档移到安全位置，以免继续进行的安装过程中不傎误砍。 所以這時候你最好是先跳回root，請下exit 指令，然後用cp 指令把剛才那個dump 檔copy 到任何你暫存的位置。所以这时候你最好是先跳回root，请下exit 指令，然后用cp 指令把刚才那个dump 档copy 到任何你暂存的位置。 接著正式執行安裝。接着正式执行安装。 在安裝新版本之前，必須先移除舊版本，否則兩個daemon 會搶同一個TCP port，開機時會有無法預知的狀況出現。在安装新版本之前，必须先移除旧版本，否则两个daemon 会抢同一个TCP port，开机时会有无法预知的状况出现。 首先先看一下你的伺服器中，目前裝了哪些和PostgreSQL 相關的 package：首先先看一下你的伺服器中，目前装了哪些和PostgreSQL 相关的 package： # pkg_info | grep postgresql # pkg_info | grep postgresql 這時候你至少可以看到兩個package 出現在清單中，而我多了一個：这时候你至少可以看到两个package 出现在清单中，而我多了一个： postgresql-client-8.2.6_1 PostgreSQL database (client) postgresql-client-8.2.6_1 PostgreSQL database (client) postgresql-contrib-8.2.6 The contrib utilities from the PostgreSQL distribution postgresql-contrib-8.2.6 The contrib utilities from the PostgreSQL distribution postgresql-server-8.2.6 The most advanced open-source database available anywhere postgresql-server-8.2.6 The most advanced open-source database available anywhere 一般來說，如果你沒有安裝Server instrumentation 功能，那麼應該只有client 和server 兩個package。一般来说，如果你没有安装Server instrumentation 功能，那么应该只有client 和server 两个package。 但是這個小清單並不完整，如果你還有安裝php 和PostgreSQL 相關的驅動程式，那麼這時候並不會出現在這個清單當中。但是这个小清单并不完整，如果你还有安装php 和PostgreSQL 相关的驱动程式，那么这时候并不会出现在这个清单当中。 不用擔心，你若移除的順序不對，出現相依的套件，那麼把相依套件移除，再來移除目標套件即可。不用担心，你若移除的顺序不对，出现相依的套件，那么把相依套件移除，再来移除目标套件即可。 只是這時候你最好拿隻筆記下你一共移除了哪些套件，將來才能再一一重新安裝回去。只是这时候你最好拿只笔记下你一共移除了哪些套件，将来才能再一一重新安装回去。 我們先以這三個package 來說好了，如果你沒移除舊版本的server，那麼直接移除 client 會被提醒，而且停止進行安裝動作。我们先以这三个package 来说好了，如果你没移除旧版本的server，那么直接移除 client 会被提醒，而且停止进行安装动作。 同樣的，如果你沒先移除舊版本的contrib 和php 相關package，你在移除client 時也會因為相依套件尚未被移除，而被停止移除client 的動作。同样的，如果你没先移除旧版本的contrib 和php 相关package，你在移除client 时也会因为相依套件尚未被移除，而被停止移除client 的动作。 所以若以上述三者為例，則移除的順序為：所以若以上述三者为例，则移除的顺序为： # /usr/local/etc/rc.d/postgresql stop <-- 先停掉目前的PostgreSQL server # /usr/local/etc/rc.d/postgresql stop <-- 先停掉目前的PostgreSQL server # pkg_delete postgresql-contrib-8.2.6 # pkg_delete postgresql-contrib-8.2.6 # pkg_delete postgresql-server-8.2.6 # pkg_delete postgresql-server-8.2.6 # pkg_delete postgresql-client-8.2.6_1 # pkg_delete postgresql-client-8.2.6_1 這時請把/usr/local/pgsql/data 整個目錄移走，像我只是把它改個名稱，而讓它繼續留著，說不定哪天還會用到目錄中的某些檔案：mv /usr/local/pgsql/data /usr/local/pgsql/data_8.2。这时请把/usr/local/pgsql/data 整个目录移走，像我只是把它改个名称，而让它继续留着，说不定哪天还会用到目录中的某些档案：mv /usr /local/pgsql/data /usr/local/pgsql/data_8.2。 然後就可以開始使用port 來安裝PostgreSQL 8.3 了。然后就可以开始使用port 来安装PostgreSQL 8.3 了。 在安裝前，請先確定你的伺服器上的port tree 是否已是最新的版本，如果你的port tree 是在2008/2/5 天亮前更新的，可能postgresql-server-8.3 還不是最新版本，請先手動更新 port tree。在安装前，请先确定你的伺服器上的port tree 是否已是最新的版本，如果你的port tree 是在2008/2/5 天亮前更新的，可能postgresql-server-8.3 还不是最新版本，请先手动更新 port tree。 如果已是最新版本，那麼切到該port 目錄：如果已是最新版本，那么切到该port 目录： # cd /usr/ports/databases/postgresql83-server # cd /usr/ports/databases/postgresql83-server # make install clean # make install clean FreeBSD 會自動幫你將8.3 版的server 和client 都一併裝好。 FreeBSD 会自动帮你将8.3 版的server 和client 都一并装好。 接著把contrib package 也裝起來：接着把contrib package 也装起来： # cd ../postgresql-contrib # cd ../postgresql-contrib # make install clean # make install clean 如果你曾經把php5 的driver 移除掉或JDBC 等等等之前移除掉的套件，現在也請用同樣的方法把所有新的版本一一裝回去。如果你曾经把php5 的driver 移除掉或JDBC 等等等之前移除掉的套件，现在也请用同样的方法把所有新的版本一一装回去。 這樣就好了嗎？这样就好了吗？ 還早，請先看一下你的/usr/local/pgsql 下是否已經建好新的資料庫？还早，请先看一下你的/usr/local/pgsql 下是否已经建好新的资料库？ # ls /usr/local/pgsql # ls /usr/local/pgsql 如果這個目錄下只出現一個剛才更名的data_8.2，那麼代表Makefile 並沒有自動幫你做initdb，請執行：如果这个目录下只出现一个刚才更名的data_8.2，那么代表Makefile 并没有自动帮你做initdb，请执行： # /usr/local/etc/rc.d/postgresql initdb [1] # /usr/local/etc/rc.d/postgresql initdb [1] 這時你再下ls /usr/local/pgsql 指令時，就可以看到多出一個data 目錄了，這樣才能正確啟動PostgreSQL：这时你再下ls /usr/local/pgsql 指令时，就可以看到多出一个data 目录了，这样才能正确启动PostgreSQL： # /usr/local/etc/rc.d/postgresql start [2] # /usr/local/etc/rc.d/postgresql start [2] 如果沒出現任何錯誤訊息，那麼先恭喜你，安裝好了。如果没出现任何错误讯息，那么先恭喜你，安装好了。 但是工作才完成一半，再來是把原來備份的資料回存回資料庫中：但是工作才完成一半，再来是把原来备份的资料回存回资料库中： # su - pgsql # su - pgsql $ psql -f filename postgres $ psql -f filename postgres 也就是先切成pgsql 使用者，接著執行PostgreSQL 的互動式指令輸入工具：psql，然後把剛才你的dump 檔的名稱(這裏當然是完整路徑名稱)取代上面的filename 。也就是先切成pgsql使用者，接着执行PostgreSQL的互动式指令输入工具：psql，然后把刚才你的dump档的名称(这里当然是完整路径名称)取代上面的filename 。 接著一些訊息代表著資料庫回存的動作，正在做什麼動作。接着一些讯息代表着资料库回存的动作，正在做什么动作。 如果一切錯誤訊息都沒有出現過，那麼恭喜你，工作完成了80%。如果一切错误讯息都没有出现过，那么恭喜你，工作完成了80%。 對於Windows 的使用者來說，只要記住最後一條指令，就可以把剛才pg_dumpall 所備份的資料回存了。对于Windows 的使用者来说，只要记住最后一条指令，就可以把刚才pg_dumpall 所备份的资料回存了。 Windows 的使用者真幸福。 Windows 的使用者真幸福。 什麼？什么？ 才完成80%？才完成80%？ 是的，有兩個檔可能之前的版本你有更動過，分別是postgresql.conf 和pg_hba.conf，它們在FreeBSD 中應該位於/usr/local/pgsql/data 目錄下，請把之前曾經更動過的改回去，但是請把release notes 先讀過一遍，因為postgresql.conf 中很多管理項目都更動過了，可能之前你所更改的項目，8.3 版已經把該項和其它項目合併，並取了新的項目名稱了，先讀過release notes 的E.1.2.2. Configuration Parameters 是很重要的。是的，有两个档可能之前的版本你有更动过，分别是postgresql.conf 和pg_hba.conf，它们在FreeBSD 中应该位于/usr/local/pgsql/data 目录下，请把之前曾经更动过的改回去，但是请把release notes 先读过一遍，因为postgresql.conf 中很多管理项目都更动过了，可能之前你所更改的项目，8.3 版已经把该项和其它项目合并，并取了新的项目名称了，先读过release notes 的E.1.2.2. Configuration Parameters 是很重要的。 還有，剛才如果把舊的8.2 版的 /usr/local/pgsql/data 目錄直接刪掉，那此刻就糗了，你必須用你的記憶力回想你曾經更動過的項目和內容，所以我才會建議只需把它更名，保留下來。还有，刚才如果把旧的8.2 版的 /usr/local/pgsql/data 目录直接删掉，那此刻就糗了，你必须用你的记忆力回想你曾经更动过的项目和内容，所以我才会建议只需把它更名，保留下来。 若是你對PostgreSQL 的備份和回存有興趣，英文程式也還可以，那麼請進一步參考PostgreSQL 的線上說明： Chapter 24. Backup and Restore 。若是你对PostgreSQL的备份和回存有兴趣，英文程式也还可以，那么请进一步参考PostgreSQL的线上说明： Chapter 24. Backup and Restore 。 附註：附注： [1] 當然囉，如果新的data 目錄已經生成，也就是Makefile 已經自動幫你執行initdb 的動作了，那麼initdb 這個動作就可以省了。 [1] 当然啰，如果新的data 目录已经生成，也就是Makefile 已经自动帮你执行initdb 的动作了，那么initdb 这个动作就可以省了。 我會特別這樣提的原因是，我現這兩天的搶先版本的Makefile 怪怪的，有時不會自動執行initdb 動作。我会特别这样提的原因是，我现这两天的抢先版本的Makefile 怪怪的，有时不会自动执行initdb 动作。 [2] 如果你沒有像我這麼麻煩的用pg_dumpall 和psql 來備份回存，直接升級(還是得先移除舊版本再安裝新版本)，表面上看起來還是可以升級，但是，事實上Makefile 會把你舊版本的postgresql.conf 和pg_hba.conf 複製一份到新的data 目錄中。 [2] 如果你没有像我这么麻烦的用pg_dumpall 和psql 来备份回存，直接升级(还是得先移除旧版本再安装新版本)，表面上看起来还是可以升级，但是，事实上Makefile 会把你旧版本的postgresql.conf 和pg_hba.conf 复制一份到新的data 目录中。 如我文中所說的，postgresql.conf 在這個版本中有大更動，因此，當你打算啟動資料庫時，會出現FATAL ERROR！如我文中所说的，postgresql.conf 在这个版本中有大更动，因此，当你打算启动资料库时，会出现FATAL ERROR！ 解決方法很簡單，用不著重灌，把新的data 目錄移走(一樣用更名的)，執行/usr/local/etc/postgresql initdb，重做一次initdb，就會有一個全新版本的data 了。解决方法很简单，用不着重灌，把新的data 目录移走(一样用更名的)，执行/usr/local/etc/postgresql initdb，重做一次initdb，就会有一个全新版本的data 了。 [3] 這篇文章僅適用於負載不大的伺服器上，倘若你的伺服器是mission critical 的大用量伺服器，雖然基本的升級概念是一樣的，也就是資料庫大升級等同重新安裝，所以服務勢必一定得中斷，但是事前的演練和良好的計劃，可以讓停機服務的時間減少。 [3] 这篇文章仅适用于负载不大的伺服器上，倘若你的伺服器是mission critical 的大用量伺服器，虽然基本的升级概念是一样的，也就是资料库大升级等同重新安装，所以服务势必一定得中断，但是事前的演练和良好的计划，可以让停机服务的时间减少。 在這種情況，建議必須得增加備援伺服器，在主伺服器升級的同時，讓備援伺服器先暫時服務。在这种情况，建议必须得增加备援伺服器，在主伺服器升级的同时，让备援伺服器先暂时服务。 說到這裏，就得牽涉到「資料庫複製」(replication) 的主題了。说到这里，就得牵涉到「资料库复制」(replication) 的主题了。 等我有空再來寫一篇PostgreSQL 和replication 相關的文章。等我有空再来写一篇PostgreSQL 和replication 相关的文章。

 

11.将172数据库备份，还原到210上
   11.1检查是否有8.3的bug
12修改210服务器grainrpc数据库服务器地址及数据库名210数据库

0.删除/home/ftpuser/upload中以存在的setupdb.bak
1.进入210服务器/home/ftpuser/upload备份数据库 pg_dump -D -h localhost -U pgsql setupdb >  setupdb.bak
2.使用ftp工具下载保存到project目录下
3.在172上建立graindb数据库
   还原到172服务器 psql -h localhost -U pgsql -d graindb < /home/mydev/project/setupdb.bak

 

最后检测数据是否正常