Update Script mit Imageserverprüfung

BdMdesigN · 19. September 2016

Nun ich würde gerne in einen Updatescript auch via md5 prüfen, ob auf dem Imageserver eine Updatedatei liegt.
Wenn ja soll das Script das Exile Update Image vom Image server ziehen oder das aus dem Cache benutzen, wenn vorhanden.
Ist weder im Cache noch auf dem imageserver ein Update, soll nur das normale Arma 3 Update laufen.

Dies hat den Grund das z.Bsp. der Exile Mod für Arma 3 sepperate Updates erhalten soll.

Hat einer von Euch so ein Script schon mal geschrieben und könnte mir Starthilfe geben?

GenXRoad · 19. September 2016

Du meinst eine update.sh?

Oder meinst du beim starten des arma server überprüfen?

BdMdesigN · 19. September 2016

Nein das sollte schon per update.sh sein. der "Kunde" soll ja selber Updaten.

GenXRoad · 19. September 2016

Okay

Ich schau mal was ich beisteuern kann

Habs halt bei mir anders gemacht, bei mir wird z.B. Beim starten geprüft (sofern der Kunde es aktiviert hat)

BdMdesigN · 19. September 2016

Wäre nicht schlecht. Dank Dir schon mal.

celltek · 19. September 2016

Solch eine Lösung bieten wir bereits schon an.

https://www.celltek.info/api/?addon=exilemod

Code

{
 response: {
 success: true,
 name: "exilemod",
 version: "1.0.1",
 date: "16.07.16 12:10:00",
 uri: "https://celltek.info/api?addon=exilemod",
 file: "http://www.exilemod.com/download-all-the-files/@ExileServer-1.0.1.zip",
 changelog: "http://www.exilemod.com/forum/152-changelogs/"
 }
}

Alles anzeigen

Im Startskript kann man dann einfach eine Abfrage machen per JSON ob eine neue Version höher als 1.0.1 vorhanden ist falls ja dann Dowload "file".

Achso fast vergessen und wenn man über Bash das ganze machen will einfach mit TickTick https://github.com/kristopolous/TickTick

BdMdesigN · 19. September 2016

Danke celtek, aber genau so will ich das nicht und kann es so auch nicht gebrauchen.
Mein Updateimage wird direkt in den Arma 3 Server kopiert und hat alle Dateien da, wo sie auch hinsollen.

Aussedem ist es nicht nur mit der @Exileserver.zip getan, denn es wird auch die @ExiLe.zip gebraucht und die ist 1,1 GB groß.

Wer schon mal ein Exile Server konfiguriert und aufgesetzt hat, weiss das viele Dateien in den Arma 3 Server root Ordner gehören. Desweiteren habe ich eine spezielle Ordnerstruktur.

celltek · 19. September 2016

Du musst ja nicht das "file" Downloaden kannst es aber zur Versionsabfrage nutzen, bleibt jeden ja offen.

Im grunde müsste man dann eh viel mehr abfragen einbauen wenn z.B. Mod X mit Exile installiert ist wird diese ja auch benötigt und geprüft. Die meisten haben ja noch CBA, Ryan Zombies, Weapons (NATO & Co) installiert.

BdMdesigN · 19. September 2016

Mein Exile Mod Serverimage ist schon ein Komplettimage (inklusive Arma 3 Server).

Das liegt schon als Serverimage auf dem Imageserver und nun soll da noch ein Updateimage rauf.

Bei der Installation des Servers wird das Arma3Exile Image vom Imageserver gezogen und/oder aus dem Cache Installiert.

Jetzt ist ein neues Arma 3 Serverupdate auf Steam und die update.sh wird vom Kunden ausgeführt (Kundenbereich -> Auf Updates prüfen wenn verfügbar) und das Update wird eingespielt.
Nun ist ein Exile Update vorhanden und wenn der Kunde via Kundenbereich -> Auf Updates prüfen wenn verfügbar den Server Updated, soll die update.sh im Cache nach dem Updateimage suchen. Sollte es dort noch nicht sein, soll das Script auf dem Imageserver nach dem Updateimage suchen.

Ist das Image aber im Cache soll das Image im Cache auf die md5 geprüft werden, ob die Datei im Cache mit der auf dem imageserver identisch ist. Wenn ja soll die aus dem cache benutzt werden, wenn nicht die auf dem Imageserver.

Ok die Versionsprüfung könnte man mit einbauen, um zu prüfen ob überhaupt ein Exile Update nötig ist.

Die anderen Mods sind unwichtig, da vieles via Steamworkshop läuft und einiges per Hand. Mir geht es nur um mein Updateimage.

celltek · 19. September 2016

Gut hatte ich mir schon gedacht das du ein fertiges Image mit Exile zsm. hast.

Teste gerade ein paar möglichkeiten, hoffe mal du nutzt es auch auf Linux. Kann die Tage mal was hier fertiges posten.

BdMdesigN · 19. September 2016

Na Windows kommt mir nicht auf die Server

GenXRoad · 19. September 2016

Gibt halt viele möglichkeiten, ich nutze z.B. Die originale Versionsnummer und vergleiche diese dann ist die neue > alte Version -> Download, entpacken usw. evtl vorher configs sichern und alle anderen files löschen usw. Ist halt auch immer abhänig vom spiel das ganze

BdMdesigN · 22. September 2016

So ich hab mal mein Update Script fertig.

Dieses benötigt aber fuse und sshfs:

Bash

#!/bin/sh


VAR_A=$1	# Zu prüfende Datei / Image Datei
VAR_B=$2	# Imageserver mit Passwort
VAR_C=$3	# Kundennummer
VAR_D=$4	# Serverordner
VAR_E=$5	# md5 Datei
VAR_F=$6	# Steamuser
VAR_G=$7	# Steampasswort
VAR_J=$8	# Game/Server ID


cachefolder="/home/skripte/cache"
cachefile="$cachefolder/$VAR_A"
downloadfile="$VAR_B/$VAR_A"
webissh="/home/user-webi/.ssh"
mountpoint="/mnt/images/"
remove="$cachefolder/$VAR_E"


./steamcmd.sh +login $VAR_F $VAR_G +force_install_dir ./$VAR_C +app_update $VAR_J validate +exit


# Hier wird geprüft, ob das Update Image im Cache Existiert
if [ -f "$cachefile" ];then
	# Wenn ja:
	# Hier kopieren wir die ssh Keys in den Kunden Ordner, werden für den nächsten Schritt benötigt
	cp $webissh /home/$VAR_C
	# Nun mounten wir den Imageserver via Fuse und sshfs in das lokale System
	sshfs 'imageserver@xx.xxx.xxx.xxx': $mountpoint
	# Prüfen ob Image auf dem Imageserver und im Cache Ordner identisch sind
	file1=`md5sum $cachefolder$VAR_A | awk '{print $1}'`
	file2=`md5sum $mountpoint$VAR_A | awk '{print $1}'`

	if [ "$file1" != "$file2" ]; then
		# Wenn nicht identisch
		# Altes Image löschen
		rm $cachefolder/$VAR_A
		# Nun das neue Image in den Cahe ordner kopieren
		cp $mountpoint$VAR_A $cachefolder
		# Image in den Ziel Ordner entpacken
		tar -xvzf $cachefolder/$VAR_A -C /home/$VAR_C/server/$VAR_D


	else
		# Image in den Ziel Ordner entpacken
		tar -xvzf $cachefolder/$VAR_A -C /home/$VAR_C/server/$VAR_D

	fi
	# Die im Cacheordner erstellte .md5 löschen
	rm $remove
	# In den Kunden Ordner wechseln
	cd /home/$VAR_C
	# Die ssh Keys löschen
	rm -rf .ssh
	# Nun noch den Imageserver Unmounten
	fusermount -u $mountpoint


else
	# Wenn nein:
	# In den cache Ordner wechseln
	cd $cachefolder
	# Image vom Imageserver ziehen
	wget ftp://$downloadfile
	# Image im Zielordner entpacken
	tar -xvzf $VAR_A -C /home/$VAR_C/server/$VAR_D

fi


exit 0

Alles anzeigen

Ich hab es noch nicht getestet, aber schaut mal drüber. Nicht das ich da ein Fehler drin habe.

mhavelka · 22. September 2016

eine nette idee

wenn es den zweck tut ist es nice haben das ganze etwas anders gelöst da stecken paar Jahre arbeit drin bei dem Programm was dies bei uns tut.

und ich muss sagen auf diese idee wär ich nicht so schnell gekommen.

statt exit 0 würde ich exit $? nehmen dann gibt er den return code der letzten aktion zurück sprich wenn etwas failed haut er den richtigen error code raus
greetz

GenXRoad · 22. September 2016

Ich habs halt auch etwas anders gelôst, bei tekbase ist vieles "leider" flickschusterei, die updates der addons/mods hätte man eigentlich in den addon/mod installieren teil mit machen können/sollen

BdMdesigN · 22. September 2016

Was jetzt aber noch fehlt ist der Versions Check. ich möchte den lieder mit der bash und nicht mit extra Scripte wie jSon lösen.

Zitat von mhavelka

eine nette idee

wenn es den zweck tut ist es nice haben das ganze etwas anders gelöst da stecken paar Jahre arbeit drin bei dem Programm was dies bei uns tut.

und ich muss sagen auf diese idee wär ich nicht so schnell gekommen.

statt exit 0 würde ich exit $? nehmen dann gibt er den return code der letzten aktion zurück sprich wenn etwas failed haut er den richtigen error code raus
greetz

Alles anzeigen

Danke für den Tip mit dem exit $?.

Hab mich auch bischen durch Tante Google eingelesen und einzelne Teile in der Konsole getestet. Doch das gesamt Script ist noch ungetestet.
Das zweite Problem ist auch dies:

Es wird immer der Exile Mod, wenn der Kunde Updatet, überschrieben, da der Versions Check noch nicht fertig ist.

Aber das mit fuse und sshfs klappt ganz gut, wenn man die ganzen Vorbereitungen für fuse gemacht hat.

GenXRoad · 22. September 2016

Ja das nicht so berauschend wenn immer geupdated wird wenn sich der md5 ändert

BdMdesigN · 22. September 2016

Zitat von GenXRoad

Ja das nicht so berauschend wenn immer geupdated wird wenn sich der md5 ändert

Nein das Script oben Updatet immer.

Hier mal mit Versioncheck, den ich recht Einfach gehalten hab:

Bash

#!/bin/sh


VAR_A=$1	# Zu prüfende Datei / Image Datei
VAR_B=$2	# Imageserver mit Passwort
VAR_C=$3	# Kundennummer
VAR_D=$4	# Serverordner
VAR_E=$5	# md5 Datei
VAR_F=$6	# Steamuser
VAR_G=$7	# Steampasswort
VAR_J=$8	# Game/Server ID


cachefolder="/home/skripte/cache"
cachefile="$cachefolder/$VAR_A"
downloadfile="$VAR_B/$VAR_A"
webissh="/home/user-webi/.ssh"
mountpoint="/mnt/images/"
remove="$cachefolder/$VAR_E"
version="version.txt"


./steamcmd.sh +login $VAR_F $VAR_G +force_install_dir ./$VAR_C +app_update $VAR_J validate +exit


# Hier kopieren wir die ssh Keys in den Kunden Ordner, werden für den nächsten Schritt benötigt
cp $webissh /home/$VAR_C
# Nun mounten wir den Imageserver via Fuse und sshfs in das lokale System
sshfs 'imageserver@xxx.xxx.xxx.xxx': $mountpoint
# Hier prüfen wir die Version
isversion=`cat $mountpoint$version | grep -i Exile | awk '{print $2}'`
sversion=`cat /home/$VAR_C/server/$VAR_D/$version | grep -i Exile | awk '{print $2}'`
wahr=$(echo "$isversion > $sversion" | bc)


if [ "$wahr" = 1 ]; then


	# Hier wird geprüft, ob das Update Image im Cache Existiert
	if [ -f "$cachefile" ];then
		# Wenn ja:
		# Prüfen ob Image auf dem Imageserver und im Cache Ordner identisch sind
		file1=`md5sum $cachefolder$VAR_A | awk '{print $1}'`
		file2=`md5sum $mountpoint$VAR_A | awk '{print $1}'`


		if [ "$file1" != "$file2" ]; then
			# Wenn nicht identisch
			# Altes Image löschen
			rm $cachefolder/$VAR_A
			# Nun das neue Image in den Cahe ordner kopieren
			cp $mountpoint$VAR_A $cachefolder
			# Image in den Ziel Ordner entpacken
			tar -xvzf $cachefolder/$VAR_A -C /home/$VAR_C/server/$VAR_D
		else
			# Image in den Ziel Ordner entpacken
			tar -xvzf $cachefolder/$VAR_A -C /home/$VAR_C/server/$VAR_D
		fi
	else
		# Wenn nein:
		# In den cache Ordner wechseln
		cd $cachefolder
		# Image vom Imageserver ziehen
		wget ftp://$downloadfile
		# Image im Zielordner entpacken
		tar -xvzf $VAR_A -C /home/$VAR_C/server/$VAR_D
	fi


fi
# Aufräumen
# In den Kunden Ordner wechseln
cd /home/$VAR_C
# Die ssh Keys löschen
rm -rf .ssh
# Nun noch den Imageserver Unmounten
fusermount -u $mountpoint


exit $?

Alles anzeigen

Da ich ja Regelmässig auf der Exilemod Seite bin, bekomme ich ja mit wenn es eine Neue Version gibt.
Ich kann mir aber auch im Adminbereich ein Widget oder Modul bauen, was mir die Aktuelle Version von de Exilemod HP mit

Code

curl -s "http://www.exilemod.com/downloads/" | sed -n '274p' | awk '{print $2}'


oder


curl -s "http://www.exilemod.com/downloads/" | sed -n '274p'

ausgiebt.

GenXRoad · 22. September 2016

Wäre es nicht sinvoller evtl direkt den download von der exile page zu machen?

BdMdesigN · 22. September 2016

Nein. Da ich dann immer noch alles per Hand machen müsste.
Wirst Du verstehen, wenn Du selber ein Exile Server aufsetzt.

Teilen