【1ボードPC】分散コンピューティング【コロナ】

◆分散コンピューティングについて

一つ一つのPCの処理能力は微力であっても数が集まれば、スーパーコンピューターに匹敵あるいはそれ以上の処理能力となる。
ネットでつながった複数のPCに仕事を分散させて処理させることを分散コンピューティングという。

このスレでは主に、シングルボードPCによる分散コンピューティングについて取り扱っています。

◆BOINCプラットフォームについて
（Berkeley Open Infrastructure for Network Computing プラットフォーム）

分散コンピューティングのためのプラットフォームの一つであり、カリフォルニア大学バークレー校によって開発された。
汎用性が考慮され、このプラットフォーム一つで複数の分散コンピューティングプロジェクトに参加しそれぞれにPCの処理能力を提供できる。

参加者が行うべきことは、第一にBOINCプラットフォームのインストールと、第二に参加したいプロジェクトに対してBOINCを通してログインすることである。
後は自動で、BOINCプラットフォームを通じてこのプロジェクト側からPCに次々タスクが割り当てられ、PCは延々とその処理を行って結果を返す。

BOINCにおいて分散コンピューティングは次のソフトウェアによって実現される。
・「アプリケーション」
分散コンピューティングの各プロジェクトからダウンロードされ、プロジェクトのタスクを含んでいる。
・「コア・クライアント」
各アプリケーションの共通基盤でライブラリのようなものである。
・「GUIやTUIなどの操作用インターフェイス」

「アプリケーション」を除く二つの部分を合わせて、BOINC クライアントと総称する。
Linux, Windows, Mac, Android などで動作する。

【参考】
・Berkeley Open Infrastructure for Network Computing
https://ja.wikipedia.org/wiki/Berkeley_Open_Infrastructure_for_Network_Computing

>>2（BOINCのインストール）

全然計算終わらないな~って思ったら更新押してなくて動いてなかった事に5時間前に気づいた
さっき進捗が半分超えた!

有線LANならuser-data書くことでうまく行くんでしょうけど
無線LANだからSSID認識するのに時間がかかってuser-dataがまともに動かず
諦めて一括セットアップshellをブログにあげてcurlで持ってきたら叩くだけという状態にしてます

トライアンドエラーでやっとこさか…(寝たい

>>148
ログインすらままならずｗｗｗｗ
rootもどうやらパスワードを変えたのか変えてないのか…
たぶん変えてないのでしょうね

>>152
追い越したじゃないｗ
ちょっと引き離したんだｗ

だめだもうねよう
おやすみなさい

>>151
すみません、無知なので教えてください。
クラスタでBOINC動かすと一件あたりの処理が一台でやるより早く終わるんでしょうか。それとも単に同時に動ける数が増えるだけ？
もし後者だとすると、ユーザーから見ると一台？に見えるんでしょうか。たとえばBOINC Managerで全部一括で表示されるとか？

>>154
パソコンでメディアをマウントして /etc/{パスwd,パスwd-} をテキストエディタで
zsh -> /usr/bin/zsh に書き換えられませんか？
自分もやらかした事があって、それで生還した事がありまして
あとはレスキュー用イメージ作ってそこからchrootしてみるとか

>>157
誤: レスキュー用イメージ
正: レスキュー用メディア

WiMAXの通信制限に引っ掛かってもR@hは諦めない！
昨日の3時に無事復旧させました
今大急ぎでぶん回してます

>>157
ありがとうございます
macだからかな…
mount時に system-bootでマウントされてくる場所がbootの場所のみで肝心のpassファイルなどにもアクセスできなかった状態でした

ただもう大丈夫です
無事に戻って来れましたので下手を打たないようrootにもしっかりパスワード設定しました
明日念押しで別のユーザも作ります…っていうか別のユーザ作って試せば良かったんだorz
ナニヤッテンダ……ｗｗｗｗ

>>156
たぶんですがkubernetesのCPUや1台当たりにかける時間によっては速くなるかもしれませんが
リソースになってるホスト側がラズパイなのであまり期待できない気がします
ホストに縛られますのでCPUやメモリリソースの取り合いとなりますからねー

517位。
http://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=500

「ゼロくらいから始めるBOINC」みたいな感じで自分がインストールした時のメモをまとめ直してみたけどどうやって共有すればいいんだろ？
とりあえずMEGAにtxtファイルをあげてみたけど．．．
https://mega.nz/folder/27RgjAjL#xFIUmGyn-RtaFIapAmpHLA

>>159
無事復旧出来てよかったですね。
私は無精者なのでなるべくラズパイ上で完結出来る様にメンテ用メディアがいつでも控えてますｗ

>>160
順調ですね。
500位圏内も時間の問題でしょう。

>>161
誰でもコピペorダウンロード出来る形で誰かが管理していれば取り敢えずOKだと思いますよ。
残念ながらネットを利用する者は善意の人間ばかりではないので、原本の編集までは出来ないままの方がいいと思います。
本スレのテンプレもそう言う狙いで敢えて現在の形にしてありますのでね。

>>161
閲覧さえ出来れば編集出来ない事は無いですからね。
そんなわけで公開して下さったファイルをマージしたものと、簡易htmlに整形したものを作ってみました。
お気に召されたらご活用下さい。
https://send.firefox.com/download/bbff2715bc32c881/#y-Rt-YKMNgNr1j0jeAjkPA

>>106

> メモリが足りないってサーバーに言われる時って
> 1907.35 MB
> 1716.61 MB
> 858.31 MB
> の少なくともこの３パターンがあることはわかってるんですが、

3814.70 MB ← New!

おおお。
ありがとうございます。

と思ってみようと思ったら・・・

>>161
復号キーをきかれました。。。

>>163
期限切れだといわれました。。。

遅かったのか。。。 orz

htmlに整形してもらったやつをもう少し手直ししてみたけど、どうなんだろ。
とりあえずMEGAにまた上げたけどアップロードもどこに上げたら共有で編集とかできるんやろか

504位！
http://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=500

>>165
ありゃ、ダメやったかな
https://mega.nz/folder/27RgjAjL#xFIUmGyn-RtaFIapAmpHLA/folder/inZSmCjK

>>161

最悪な途中送信をしてもうた…

>>161
丁寧！すごい！！
Zeroから始めるって言うから
（ ・∀・)．。(ぱいぜろ君も出番か？)
と思ったのは内緒。(笑)

>>164
なんぼほどでっかいタスク投げてきたのか…

>>166
字下げ等で読みやすくなっていい感じですね。
web上で共同作業となると何らかの秘密のやり取りが必要になると思います。
悪意のある部外者が勝手に改ざん・削除したりする事は有り得るので。

>>167
現在圏内に入りましたね。
期限は20回24時間内にしておいたので大丈夫かなと思いきや以外と欲しい方が多かったのですね。
今度はもっと制限を緩めて上げる様にします。

>>166
そうか、GitHub使えば簡単ですね
htmlもブラウザで表示出来るし

>>170
なんだかよくわからないけど、3B+だけこんなのが出るようになって
しかもまったく仕事もらえません。。。
2B V1.2と3Bは仕事もらえてるんだけど。。。

>>168
見れました！
めっちゃ力作だった！

というかごめんなさい、うちのPC環境が悪いみたいです。
スマホからだと見れました orz

Markdown形式で記述してGitHubに登録すれば便利かもしれない

http://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=480

ギリギリTOP 500入りましたねｗ

>>176
499位→493位に浮上したのでギリギリではなくなりましたｗ

しかも銅バッチかな？
2人入ってますねー
二台目運用しようかなぁ…

今日はなかなか４スレッド入らないので業を煮やしぶっ込んでみました
※良い子は真似しないでね
https://i.imgur.com/35Laumc.png

https://foldforcovid.io/
https://foldforcovid.io/how-does-it-work
余った計算機で打倒コロナ
バレナが予構成＋機能追加した（焼いて差し込むだけの）OSクローンイメージ公開してるね
microSDが余ってて、バレナを信用してて、手っ取り早くR@Hに参加したいだけなら一つの選択肢かもしれない

MarkdownもGitHubもよくわかんないけどこれでいいのかな？
編集履歴は遡れるからいたずら編集も直せるってことなのかな

https://github.com/TamamoGozen/ZeroKurai

>>181
そんな事言いながら共同作業なんか必要ない位完璧に仕上がってるじゃないですかｗ
ここまで出来るのでしたら釈迦に説法みたいで恐縮ですが、誰かに修正のプルリク出されてもご自身が承認しない限り
意図しない改竄をされる事はありませんよ。

2chのチームがあるのになにしてんの？（そこ入ってる）

>>183
2ch関連のチームも複数あるてしょ？

現在487位
https://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=480
アクティブユーザーが多い番手になったのか、ここからはじりじり上がる様な展開になるでしょう

まな板くんすげえな。今や完全に主力じゃないか。

Ubuntu 20.04 LTS出てますね。
https://ubuntu.com/download/raspberry-pi

試したいけど余ってるラズパイ（←とめたくないｗ）＆microSDHCがない・・・。

パソコンにバックアップしたりした上で do-release-upgrade では駄目ですかね？
止めたくないのであれば別ですがｗ

>>187
とめている間にチーム順位が下がったりしたらとか考えるともう
この解決策はひとつしかないと導き出されたのですが
あろうことか理性が感情を凌駕しているという信じられない事態が
発生しているのであります

ポチッとな

>>188
順位はリアルタイムで動くわけでは無いので大丈夫だと思いますよ。
メモリに余裕があればストレージ追加->適切にマウント->環境クローン->chrootしてboincとアップグレードを平行して実施　という荒技もありますよｗ

今日はCOVID-19の仕事をたくさん貰えているような気がします。

>>189
KSYのカートには入ってますね。何故か。何故だろう？
電源アダプタの在庫なしが長らく続いていましたがようやく補充されたようです。

>>190
慣れない（というか初めての）ことをやって
どこかで手順を失敗して全滅・・・というのが容易に想像できますｗ

想像通りの解決策で草
良いぞ良いぞ

コロナだからね、経済回すのは絶対善じゃん？
さらにその後貢献できるんだからもう答えは決まったようなもの

止めたらどうとか一切考えなく
自己満足のためだけにUbuntu20.04にあげてしまいました
あと、複数台で参加されてる方が多いので自分も２台目をポチろうかと（同調圧力

まだポチってません。まだ。

https://magpi.raspberrypi.org/articles/how-to-overclock-raspberry-pi-4
こんなの見たら専用機を用意したくなるじゃないですか。

どうしよう（答えの見つかっている問い）

>>195

その記事を参考に2000MHzにオーバークロックしたラズパイ4が、>>89 の構成で元気に稼動中。

> 7. Take it to the max
も試したがすぐフリーズした。

複数台は電源の確保がなあ
複数ポートで4Bをぶん回せるくらいに強力なUSB-ACアダプタって何があるのだろうか

ごめん、>>89 の構成にLittleFAN40Uで冷却してる構成だった。

なお、CPU温度を計測したら40度台。

なにこのスレ怖い

ラズパイ単頭飼いとかかわいそうじゃん寂しがってるぞもう一台買うしかないな

>>197
さっきふと我に返って、まさにそれをどうしようかと。。。
普通に１台１電源でやってて、タコ足だらけな上、現状空きがない。。。
これ以上のタコ足はまずそうだし。。。←既にまずいとも言う

>>198
そんな実績報告されたらやるしかない・・・のか・・・？

とりあえず冷却系の強化を検討しますｗ

>>199
> もう一台買うしかないな
が何回か続くんじゃないですかねｗ

>>197
NetGearのPoEハブを買って来て、
PoE→Type Cアダプタを使えば、
4台は動かせる。

このスレをご覧になっている新規の方いますか？

ご遠慮なく、チームにご参加ください。

常連の居酒屋みたいに見えて入りにくいかなと思って。

>>201
結局4B/2GBで2GHz試していますｗ
冷却系の強化はファンの電圧を3.3V→5Vに上げただけです
（Miuzeiの・ヒートシンク・ファン付きケース）
ちょっとファンの音がうるさくなりましたがすぐになれるでしょうｗ
コア数4・CPU時間90%で、今のところ50℃いくかどうかという程度です。
計算時のエラーとか検証でのエラーが少なければ（←今でも発生しているので・・・）
他の4Bもやってみましょうかね。

>>205
もうすぐ暖かくなってくるから、
冷却対策が必要になってくるよな。
お手軽にはファンを回すことだよね。

https://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=420
現在チームAmigaの直下
９時以降の4/26の集計後もう少し上がるでしょう

>>207
誤: 4/26
正: 4/25

>>207
434位ですか！
そろそろ失速するかと思いきや、全然そんなことないですねｗ

ところでたまにランキングに表示されないことがあるのですが
そんなことないでしょうか。いくら探しても見つけられず・・・。
集計処理中とかですかね。

>>205
最初、クロックアップしただけじゃなくて使用メモリを200%→100%に戻すとかしてたんですね。
そしたら推定時間が1hだったのがふと見ると10hとか11hとかになっていて、、、めっちゃ遅くなってる！
温度は50℃以下だし、クロックも2000MHzちょいだし、、、。
boincの設定を元に戻したり、一応スワップ領域を2GB→4GBに増やしてみたりして、
それっぽい動きになったようなので寝ました。

で、寝てる間の結果は、
　計算済、検証済み：４件
　計算中に異常発生：４件
引き分けでした orz
（仕事のボリュームは全て推定2時間弱）

でも異常発生でも功績値もらえてるのが２件あるんですよね。
功績値がもらえる・もらえないの違いがよくわかりません。
時間は同じようなものだし。。。

高負荷時に計算時のエラーとかユーザーによる中止（←そんな操作はしていない）になることが
多いような気がしますが、この辺の違いですかね。。。
（特にboinctuiの表示やsshでログインするのに数分待たされたりしたあととか、
　その時はエラーになってなくても後でみるとエラーに）

ちなみに1.5GHz→2GHzの効果はよくわかりませんｗ
ベンチマークは
　整数：2100ぐらい→2800ぐらい
　浮動小数点：57000台→76000台
に上がっているので速くなっているのでしょうが。

>>209
私も昨日の晩は探しても見つかりませんでした。
そのうち出てくんべと思い力尽きて寝ましたｗ

>>210
システムリソースがカツカツの時はシリアルコンソールが便利ですよ。
初期の頃はリソース節約の為にsshデーモンすら落としてましたｗ

※ここの人達はオーバークロックに手を出してしまう猛者揃いですが
　気兼ねなくご参加下さいね。
　わからない事は優しく教えてくれると思います。テンプレも充実してるし

みんなのタスクは結構COVID019関連降ってますか？？
12時間のタスクが1番落ちてきやすいのはやっぱり間違い無いのかな…？？
4/8のタスクがCOVID019になってます
1週間前は再セットアップで奮闘してて気づかなかったんですが2週間前に比べると比較的依頼されやすくなってますね

ラズパイに限っては12時間以上がCOVID019関連なのかなぁ

>>212
２時間でも降ってこない事は無いようです
物理メモリ１ギガの3B+なので、さっきようやく２度目が降臨したばかりですがｗ
https://i.imgur.com/ESKvfyz.png

>>212
うちは2時間指定にしています。
12時間近くがんばって計算エラーが出ると悲しいのでｗ
短時間の仕事をたくさんやろうかと。

現在の4Bの状況は
14/40
22/42
20/38
14/26
21/43
がCOVID-19関連ですね。
boinctuiの表示でest 1h〜2hの仕事がほとんどです。
（1hといっても詳細を見ると2時間弱ですが）

今はそれなりにありますが、来ないときは全然来ないですね。
1/50とかｗ

>>211
やっぱりシリアルコンソールも使えるようにしておいたほうがよさそうですね。
何かのついでにUSB-TTLの変換ケーブル買っちゃうかｗ

X11なんかもってのほかなんだろうな
猛者揃いだ

>>216
設定さえ済ませてしまえばパソコン側のX使えますよ

>>210
> めっちゃ遅くなってる！
再発です orz
そしてエラーのほうが多くなってきました orz
もっと確認してから実戦投入しないといけないですね。
ということで、一旦クロックは元に戻しました。
そしてやっぱり専用機が欲ｓ（ｒｙ

>>97
本日またネットワークが死んで強制再起動…前回同様他のマシンからのVNCやpingに応答せず、でした

/var/log/syslog見てもVNCサーバーのエラーくらいしか見えなかったのですが、他にどこか見ると良い場所ありますか？

あー黒mk2買ってこようかなー。ヘイズル1号機っぽい色味とかやってみようかなー

無駄リソース減らすためにはXをVNCで飛ばすのは論外で、SSH経由でリダイレクトも良くないとするとどうしたらええんや
なんかインターフェイスになるサーバー立ち上げる感じ？

ごめん、スレ間違えた

>>221
$ sudo systemctl disable --now boinc-client
$ sudo echo '好きなパスワード' | sudo tee /etc/boinc-client/gui_rpc_auth.cfg
$ sudo chmod 640 /etc/boinc-client/gui_rpc_auth.cfg
$ sudo boinc --daemon --dir /var/lib/boinc-client --allow_remote_gui_rpc

これ以降 IP又はマシン名:31416 で別のマシンから boincmgr又はboinctui からアクセス可能
サービスで起動すると何だかrpcアクセスがうまくいかないので自分はこうしてます

>>223
そうするとこのように外部マシンからアクセス可能です。
https://i.imgur.com/dZfRm4F.png
https://i.imgur.com/7y51ryC.png

なるほどboinc自体がrpcの口持ってるのか
これなら起動後にsshd殺してもいけそうやな

>>225
いけますね
rpcアクセス覚えた頃はもうsshd頃すのやめてましたが、一応検証の為に今シリアルコンソールから頃してからboinctuiでアクセスしてみたらOKでした

ありがとうここのスレ親切だし楽しいな

ということは、もしかしてラズパイ何台飼っても母艦から統合的に管理できるということなのでは？
いかんこれは沼に引きずり込まれる罠だ

>>228
もちろんいけますね
多頭飼いの人はscreenやtmuxで画面分割して表示させると脳汁ドバドバですよｗ

>>213,214
来ないわけではないけど来てるのですね
参考になりましたー
別の端末があったら14時間もやってみるのですけどちょっと後回しになりそうです

>>219
あら、GUI使われているのですね
もしかしてboincもGUI使われてますか？？
CUIだとメモリ逼迫はしますがネットが切れることはないですよ
一応swapは話題に上がってたので設定したのですが
20MBから200MBある感じですよ…って言っててタスクが二つしか実行されてないから見てみたらメモリ制限かけたままだった
preeping(CPU横取り)されてるから気づけた

うちの子只今確変中
いいぞ3B+よ。歌え、もっと歌え
https://i.imgur.com/Ptznv9C.png

>>219
おかしいですね。

ip a の結果は、どうなっています？
IPアドレス喪失しているとかないでしょうか。

>>228
/var/lib/boinc-client/cc_config.xml

<cc_config>
<options>
<allow_remote_gui_rpc>1</allow_remote_gui_rpc>
</options>
</cc_config>

boincマネージャーを動かせるマシンがあれば、
以上の設定が有効になっているクライアントを管理できた。

3Bでメディアサーバーと一緒にBOINC動かせられないものかとやってみたら両方ともダメになってOS入れ直す事態に陥った
しゃーないからメディアサーバー用にゼロを手配中なので、それが届いたら3BもBOINC専用機にしよう

>>231
>>233

まとめてお返事ですみません！今は再起動して正常に動いているのでip aの結果は問題ないように見えます

非GUIのやり方か、別マシンから管理する方法が良さげですね

別マシンから管理する場合、Raspberry Piはチーム参加、別マシンは非参加とか可能でしょうか？Raspberry Piは1台しか無いのです(ToT

ただいま409位です。
https://boinc.bakerlab.org/rosetta/top_teams.php?sort_by=expavg_credit&;offset=400

これから参加予定の方もいらっしゃるので、まだまだ上がりそうですね。

>>237
メンバー15人？　アクティブの人が15人？それとも登録している人15人？

>>239
登録している人が１５人ですね。
もっとも我々のチームは現状全員アクティブなのでこちらも１５人ですが（笑

>>236
他にもっといい方法があるかもしれませんが、
私はPC用とラズパイ用で別のアカウントを作っています。
総功績が分散しちゃいますがそこは割り切りました。。。

>>241
やはりそうですね、私も別アカ作ります

初めてtui起動して操作方法習得に必死です（汗）

GUIは普通に終了させておくだけで良いですか？？
それにしてもここの皆さん熱意も技術も凄い！

>>234 の設定のおかげで、Windowsクライアントからラズパイのデーモンにつないで状態を確認できるようになりました。
ありがとう。これでラズパイのVNCとXサーバを止めることができる。

>>234
自分も234さんの方法に切り替えました。
こりゃ楽でいいやｗ
横からですがありがとうございます。

>>243
>>244
リモート管理できてよかったです。
レスありがとう。

>>238
吉田の追い上げすげーな

>>238
マンスリーじゃん

寝る前だと言うのにロードアベレージ５を越えとるだと？
我が子よ、夜更かしで逝くなよ...

https://i.imgur.com/LuglLod.png

にわかtui人です

guiの時に見えていたタスク詳細が何も表示されないのですが、何か設定ミスってるのでしょうか？？

>>249
自己レスで補足です

ローカルのコンソールでは問題無く見えるのですが、他のマシンからsshで繋いだときに見えないようです

BOINC Manager起動時に、リモートのデーモンに自動接続する方法ってありませんか?
起動する度にコンピュータとパスワードを手動で入力する手間を省きたいので。

先程ubunts 20.04に上げてきました
4時間ぐらいかかりましたが入れてるものが少ないので特に問題にはなりませんでした

しばらく放置するとしてなかなか良い感じに功績上がってます
6000ぐらいまで来たのが嬉しいけど功績数をもっと増やしたいと欲が出てきますねー