Ubuntu on Alicey's blog

古のMiniDVをUbuntuで吸い出した備忘録

Sun, 10 Mar 2024 18:18:00 +0900

こんにちは。

今回は、古のテープカメラのメディアであるMiniDVのデータを吸い出して一般的なPCで開ける状態にしたログを残します。

【HPE】ML110のRAIDカードとNICのファームウェアをUbuntuでアップデートした備忘録

Sun, 25 Jun 2023 23:37:00 +0900

こんにちは。

HPE ML110 Gen9のRAIDカード(Smart Array P440)とNIC(331T, 330i)をUbuntuでアップデートしたので、その手順を記録として残しておきます。

なぜこのような備忘録を書いたかというと、HPEで配布されるファームウェアは基本WinとRedHatを基準にしており、Ubuntuではひと手間加える必要があるためです。

※筆者はこの手順を参考にして起きたトラブル(機器の故障等)の責任の一切を負いません。自己責任でお願いします。

手順１: ファームウェアのダウンロード

HPEのサポートページからファームウェアをダウンロードします。

URLはこのへん。

このとき、OSの選択肢にUbuntuはないため、Red Hat Enterprise Linuxを選択しておきます。そのためrpmファイルがダウンロードされます。

ダウンロードが成功したら、scpなどを用いてサーバにコピーします。

手順2: rpmファイルをdebファイルにコンバート

rpmファイルをdebにコンバートするために、 alien というミドルウェアを利用します。

以下コマンドでインストールします。

> sudo apt update && sudo apt install -y alien

インストールに成功したらファイルのコンバートを行います。コンバートは以下コマンドで行えます

> alien [firmware-filename].rpm

完了すると、同一ディレクトリに [firmware-filename].deb ファイルが生成されます。

手順3: debパッケージをInstall

debファイルを取り込むためには、dpkgコマンドを利用します。以下コマンドで作業します。

> dpkg -i [firmware-filename].deb

HPのファームウェアの場合、 /lib/x86_64-linux-gnu/ 配下にフォルダが作成されるようです。

cdコマンドで移動して、存在を確認します。

> cd /lib/x86_64-linux-gnu/[firmware-filename]/

> ls -al

(パッケージのアンインストールは dpkg -r でできます。)

手順4: ファームウェアインストーラの実行

ファームウェアをRAIDカードやNICに適応します。

電源状況等には注意して行うと良いと思います。

この手順はアップデートする機器により多少異なるため、ファームウェアのインストールページを確認すると良いと思います。

一例のみ掲載します。

例1: > ./setup

例2: > ./CP042888.scexe

実行すると、どのカードに対して適応するかなどをプロンプトで質問されるので、該当するものを選びます。

おまけ

ちなみに、この手順を利用してもUbuntuではインストールできないものもありました。

QLogicの10G NICのドライバの場合、次のようなエラーが起こりました。

こういった場合は、大人しくRHEL系のOSやWindowsを使うべきでしょう。

機械学習基盤の構築(Ubuntu20.04+Tensorflow+Docker+GPU)

Tue, 03 Aug 2021 10:01:00 +0900

なりゆき

大学で行っている研究にて、機械学習を用いた処理を行っているのですが、学生の持っているマシン(大半がm3なMacBook)では遅すぎていつまで経っても終わらないという話が出ました。そこで、大学に機械学習のリソースをくれないかという話をしたところ、GPU搭載のゲーミングノートPCを貸していただけたので、これを使うことにしました。

（本当はGPU乗ったサーバのVM貸してほしかった.....電気代怖い....）

PCの詳細はこんな感じ

CPU : Intel Core i7 9750H(6C12T 2.6GHz up to 4.5GHz)
RAM : DDR4-2400 SODIMM 32GB
GPU : NVIDIA RTX2070 Mobile
OS : Windows10Home → Ubuntu 20.04 LTS

OSの載せ替え

まず、既存のWindowsをバックアップします。

SSDを載せ替えても良かったのですが、予算の関係で今回はディスクのイメージを作成しました。

詳しい内容は前回の記事を御覧ください。

Ubuntuのインストール

Ubuntuをインストールします。

といっても、難しいことはなく、USBブートし画面の指示に従いインストールするだけです。

ドライバのインストール

ドライバ類のインストールをします。

今回は、GPUのドライバのみ手動インストールしました。

バージョンに関しては、TensoeflowのGPUサポートと照らし合わせ、

CUDA 11.4, NVIDIA-SMI 470.42.01をインストールしました。

ココで1箇所ハマったことがあります。

UbuntuをSecureBootを利用する形でセットアップしたため、ドライバインストール時に見慣れない「Enrolling MOK Key」の設定が必要になります。

ドライバをセットアップし、Reboot後、見慣れない青背景の画面が出たため、何も考えずにContinueBootした所、ドライバを読み込みませんでした。気をつけましょう。

その時参考にしたサイト: UbuntuでNVIDIAドライバが動かない

Docker等の構築

ココまで来てしまえば、後は必要なソフトウェアをインストールするだけです。

Tensorflowの場合ですと、公式にDockerを利用するものと、pipでのセットアップに関するものがまとめられています。

これを参考に構築します。

（需要があれば、別途記事にします。）

また、DockerでNVIDIA GPUを利用する際にはNVIDIA Container Toolkit(nvidia-docker2)のインストールが必要になります。

こちらを参考にさせていただきました。

公式のドキュメントはこの辺りですね。

docker composeを利用する場合、v1とv2でdocker-compose.ymlのGPUを指定する方法が異なりますのでご注意ください。個人的にはv2で構築することをおすすめします。

詳しくは、ドキュメントをご参照ください。

また、この辺りは、バージョンによって変化が生じやすい部分かと思われますので、環境(OSやGPU)に応じた設定を都度ドキュメント等で確認することをおすすめします。

おまけ

せっかくゲーミングPCだからゲームしないとね？

というわけで、マイクラをプレイしておきました。

僕がよくする配信+ゲームではGPUフルロード。フレームレートも落ちますね....144Hzモニタの意味....

というか、キー配列無茶苦茶すぎん？

無駄にBIOSからキーボードの光り方変えられるｗ

いろいろと癖が強いマシンだった。

ばいち

初期状態のWindowsをddでバックアップ

Fri, 30 Jul 2021 09:24:00 +0900

初期状態のWindowsをddでバックアップ

大学から借りたPCにUbuntuをインストールすることになりました。(詳しくは次回投稿します)

しかし、PCにはWindowsがインストールされており、しかも初期設定をしていない状態でした。これでは回復ディスクを作成するのも面倒です。

ここで思いつく方法として

SSDの換装
ddでイメージの抽出

があります。

予算がなく、SSDの換装が難しかった為、ddで初期状態のWindowsのイメージを作成することにしました。

※参考にする際は自己責任でお願いします。ミスると全データ消えます。

はじめに

まず、ddを実行する環境を用意します。

今回はUbuntu20.04LTSをUSBメモリからライブブートしました。

UbuntuでWindowsのイメージを作る

イメージの作成をします。

まず、作成したイメージを保存する記憶媒体を接続します。

今回は外付けHDDを接続しました。

次に、lsblkで認識しているブロックデバイスの一覧を表示します。

こんな感じになります。

ここで、コピー元のデバイス名とコピー先のマウントポイントを確認します。

今回は

コピー元デバイス：nvme0n1

コピー先マウントポイント：/media/ubuntu/backup/

となります。

次に、cdコマンド等でコピー先マウントポイントへ移動します。

> cd /media/ubuntu/backup/

ここで、ddコマンドを使用します。

しかし、そのまま実行するとクソデカファイルが作成されるので、gzipを併用します。

> sudo dd if=/dev/nvme0n1 | gzip -c > ./backup.gz

コマンドの意味はそれぞれ

sudo：管理者権限で実行

dd if=/dev/nvme0n1 ：ddで/dev/nvme0n1が参照元

gzip -c：圧縮(結果をファイルではなく標準出力へ出力する)

> ./backup.gz：ファイル./backup.gzに出力

実行画面はこんな感じ

(テストとかミスとかしてるけど気にしないで....)

しばらく待つと、

作成が完了します。

ファイルサイズは14GB程でした。

戻すときは逆の手順で行います。

> gzip -dc < backup.gz | dd of=/dev/nvme0n1

余談

今回、gzipを利用していますが、これがなかなか遅いです。。。

1コアフル利用...

そこでpigzを利用するとマルチスレッド処理できるため速いらしいです。標準で入っていなかったため挑戦しませんでしたが、試してみても面白いかも。

なにかの参考になれば幸いです。

参考文献

ddの進捗を確認：https://qiita.com/tukiyo3/items/5e3fd748287ffa4b6612

ばいち