Fixing Proxmox boot ending in grub prompt with ZFS disks

I have removed my outdated how-to as it was not functional for my proxmox version (6.4x) during a planned reboot on 5-7-2021 .. I am lucky I did not had a power outtage earlier as that would have given me more troubles ..

Proxmox has made a great tool: proxmox boot tool .. and following the guidelines in the link below gave me a working proxmox in only minutes (it took some hours before I had a USB thumbdrive working (one defect one) ..

But there is a great how to here

Important parts

Repairing a System Stuck in the GRUB Rescue Shell

If you end up with a system stuck in the grub rescue> shell, the following steps should make it bootable again:

Boot using a Proxmox VE version 6.4 or newer ISO
Select Install Proxmox VE (Debug Mode)
Exit the first debug shell by typing Ctrl + D or exit
The second debug shell contains all the necessary binaries for the following steps
Import the root pool (usually named rpool) with an alternative mountpoint of /mnt:
```
zpool import -f -R /mnt rpool
```
Find the partition to use for proxmox-boot-tool, following the instructions from Finding potential ESPs
Bind-mount all virtual filesystems needed for running proxmox-boot-tool:
mount -o rbind /proc /mnt/proc
mount -o rbind /sys /mnt/sys
mount -o rbind /dev /mnt/dev
mount -o rbind /run /mnt/run
change root into /mnt
```
chroot /mnt /bin/bash
```
Format and initialize the partitions in the chroot – see Switching to proxmox-boot-tool
Exit the chroot-shell (Ctrl + D or exit) and reset the system (for example by pressing CTRL + ALT + DEL)
Note: The next boot can end up in an initramfs shell, due to the hostid mismatch (from importing the pool in the installer).
If this is the case, simply import it again with using the force -f flag:
```
# zpool import -f rpool
```

This first part gives you the start to fix grub again

Find the partitions:

lsblk -o +FSTYPE

(in my situation) with the vfat > 512MB

format it again

# proxmox-boot-tool format /dev/sda2
# proxmox-boot-tool format /dev/sdb2

NB. I used the –forced option as there is data on the vfat

the init part

# proxmox-boot-tool init /dev/sda2
# proxmox-boot-tool init /dev/sdb2

and if needed (what was the case in my situation)

# proxmox-boot-tool clean

Reboot and I was up and running again with my node in my cluster ..

The next GUIDE to install NGINX-PROXY-MANAGER and not having bad gateway database issues

Before reading: the main reason why this nginx-proxy-manager was not running in my environment was the fact that I was running my Linux version as LXC under Proxmox and not as a VM under proxmox. After failing a 2nd time with exact the same config files what was working I noticed that I was using LXC and that the Proton VM was actually a VM, by changing it to a normal Debian VM I was able to get a working version fast again.

This is also probably the reason that Portainer was not able to start the database as well. So in the end: using a VM ..

I was reading:
another website that was telling me how to install nginx-proxy-manager. But I failed. I kept getting ‘ bad gateway’ and if you read the github posts about this issue you will not understand why all is failing.

So yes, I did install proton VM, a sucking virtual machine under my proxmox as it was used by the guy from that other website. As docker is available I had to start it during boot. Those guidelines were described fine. But installing my own mysql or mariadb was failing time after time. Especially as mariadb or mysql was not having a root password. So I failed. Buy why?

So in the end (lucky I had a snapshot, so that I could go back when messing some things really bad up. I restarted the machine and thought about what I read on another website: nginx-proxy-manager is ‘now’ providing a mysql instance itself. AHA .. so if that is true than I have to forget all info about previous own installed docker stuff with databases. So i removed those failures from the system.

I checked the website of nginx-proxy-manager and thought: let start over ..

In the end to make this story short

I made sure the server pointed to “host”: “127.0.0.1”, in the config.json

make sure there is a config.json
place this config.json where you use the ‘docker-compose up -d’
I did it in /home/nginx-proxy-manager/

And probably here is the catch as the default example is telling

 # Make sure this config.json file exists as per instructions above:
      - ./config.json:/app/config/production.json

the /app/config/production.json is a location where you did not put your own config.json. So this part is totally wrong. So the config.json with your database settings can never be found, so you get issues, but the ‘ make sure this config.json exisist as per instructions above ‘ gave me no clue, cause what is stated above?

So I tried what I did before in the docker-compose.yml I changed the location of my config.json to

-./config.json:/home/nging-proxy-manager/config.json

now I restarted the docker container again but I made an error the container was started with docker-compose up without the -d (DAEMON) … so I got output in my screen and suddenly I saw that there was a connection to the database but my password was not accepted.

I made sure I shut down the docker container again, removed the contents from the directories and restarted it again .. YEAAAHHH .. finally .. it was working

In short, 2 things to notice

config.json: change the host part to: “host”: “127.0.0.1”,
in the docker-compose.yml pinpoint the config.json to the actual location on your HDD wher you put it.

Now start with ie. docker-compose up -d

have fun

Moving VMWARE VM to Proxmox: The steps to follow

first download the OVFtool from VMARE and make sure you put the ‘bundle’ file on your Proxmox host. I used: VMware-ovftool-4.4.0-15722219-lin.x86_64.bundle

Make sure sure the prerequisites of ovftool are present on the proxmox host
apt install libncursesw5

This file could be needed (I saw somewhere that someone had an error missing this dependency), so I installed it.

than make sure the VMWARE-ovftool can be executed so chmod it to ie. 755

install it with ./VMWARE-ovftool-xxxx
after the installation is finished it will tell you that it has been installed correctly

Than follow the following steps:

ovftool vi:root@[vmware-machine]/[name-of-vm] .
This will download the VM onto your Proxmox host
qm importovf 200 [name-of-vm].ovf local-zfs
this will convert your VM to Proxmox and put it on (in my case) local-zfs
when ready you need to add a network card to the hardware in Proxmox, as this is not transferred from VMWARE
Add the vmxnet3 driver for network in Proxmox
boot the machine and login.

check the ensXX where XX can be different from VMWARE, so change it (easy to be seen with the command ‘ ip address ‘

change it to the correct new number in the file: /etc/networking/interface
shutdown machine again and reboot

VM is being converted from VMWARE to Proxmox

NB. I used Proxmox 6.2-10 with their ISO on a HP Gen8 MicroServer (Community Edition)

De anderhalve meter: Corona

Mijn weblog zou niet mijn weblog zijn als ik in al de jaren dat ik deze weblog heb niet iets zou schrijven wat een stuk historie is, wordt en blijft.

In dit stukje vraag ik mezelf iets af: in hoeverre is de anderhalve meter afstand nu zinvol, minder zinvol of onzinnig?

Met andere halve meter afstand is de kans dat je besmet raakt minder (wordt gesteld). Want de kans dat je direct besmet wordt door iemand met een virus (ik schrijf met opzet: een virus) is minder omdat je afstand houdt. Echter: er bestaat een kans dat iemand buiten loopt, niest, een windvlaag de nies meeneemt en uiteindelijk via de lucht bij je terecht komt.

Nu zit je in een TV studio, je zit anderhalve meter van elkaar. je praat normaal, je doet normaal echter nu ben je klaar met je praatje en je moet jezelf verplaatsen. Op dat moment gaat iemand anders op je plek zitten. je loopt zelf door de ‘lucht’ van de ander en gaat zitten

Is dit dan geen schijnveiligheid? Natuurlijk begrijp ik dat als er afstand is de kans verminderd, maar stel: je loopt in de winkel je loopt langs iemand schouder aan schouder omdat een winkelwagentje in de weg zit je raakt elkaar aan en loopt door. 5 minuten later proest iemand in de winkel en jij loopt 5 seconden later daar waar deze persoon heeft lopen te proesten, wat is dan de veiligheid?

Wat is de kans bij het eerste en wat is de kans bij de tweede?

Het maken van een Timelapse en deze dan automatisch naar Youtube posten

Voor ons huis wordt een appartementen complex gebouwd: Het Quadrant in Apeldoorn aan de Laan van Zonnehoeve nabij Station de Maten. Omdat ik als nerd en geek het interessant vind om te kijken wat er nu allemaal gebeurd heb ik een Unifi Flex G3 camera opgehangen die uitkijkt op de bouw van dit nieuwe complex. In de achtergrond is momenteel de sloop van de Americahal te zien

Elke x seconde wordt er 1 foto gemaakt en deze foto’s worden 1 keer per dag achter elkaar gezet en er een video van gemaakt. Zo wordt elke dag in 3 minuut en 51 seconden samengevat. Daarnaast wordt er ook elke vrijdag een timelapse gemaakt die het begin van de bouw tot het huidige moment bijhoud. Deze video wordt uiteindelijk ongeveer 15 minuten lang (afhankelijk hoe lang de bouw duurt)

Kijken? Zie hier het youtube kanaal

Alles is automatisch ingesteld. Dus zolang alles het maar blijft doen wordt alles automatisch gedaan. Ik hoef niets te doen.

Wat wordt er dan exact gedaan?

Elke X seconde wordt er een JPG image opgeslagen op een Virtuele Linux Server
Elke dag om 15.00 wordt er een timelapse gemaakt van de foto’s van een dag daarvoor
Tezamen met een rechtenvrij stuk muziek wordt de video gemaakt
Om ongeveer 15.45 wordt elke dag deze video naar Youtube geupload
de 24 uur worden in 3 minuut en 51 seconden samengevat, je kan dus zo elke dag even kort zien wat er op de bouwplaats is gedaa
Elke x minuut wordt er ook nog een 2e foto genomen. Deze wordt op een andere locatie op de Virtuele Linux Server opgeslagen en gebruikt om een een 2e timelapse te maken
Zo wordt elke vrijdag om 08.00 een timelapse gemaakt om zo een video te krijgen die de gehele bouw van start tot eind volgt.

Wat is er gebruikt om dit mogelijk te maken

Unifi Flex G3 camera (IP)
Linux Server
Timelapse script
Youtube Upload script via API
een NAS om de fotos op te slaan. NB: de dagelijkse fotos worden verwijderd nadat er een timelapse is gemaakt. Alleen van de ‘wekelijkse’ timelapse om zo de gehele bouw te volgen worden voor een langere tijd opgeslagen
Crontab instelling om de gegevens automatisch te verwerken
1 zondagmiddag gebruikt om dit op te zetten

Using Mail-in-a-box with Rsync ssh backup on a different port

Mailinabox has an option to send backups over rsync to a system. Default through port 22. Many users who want to store backups of mail in a box need a different SSH port other than 22, a change can be made

go to /mailinabox/management

nano -w backup.py

find line 17 to 20 what starts with:

rsync_ssh_options = [
	“–ssh-options= -i /root/.ssh/id_rsa_miab”,
	“–rsync-options= -e \”/usr/bin/ssh -oStrictHostKeyChecking=no -oBatchMode=yes -p 22 -i /root/.ssh/id_rsa_miab\”“,
	]

In my setup I have to make sure the first ssh-options line is not active so put a # in front of it

Than make sure you change the -p 22 rsync option to the -p xxxx option where your SSH rsync is running. Unfortunately this cannot be set through the admin gui.

Notice: when updating mail in a box your first need to do following:

go to ./mailinabox

enter: git stash so that your changes are accepted by git and can be overwritten again. After the upgrade of mailinabox you have to make this change again.

AroundMyRoom PlayGround

I'm playing here. And you are invited

Moving VMWARE VM to Proxmox: The steps to follow

De anderhalve meter: Corona

Het maken van een Timelapse en deze dan automatisch naar Youtube posten

Using Mail-in-a-box with Rsync ssh backup on a different port