結局C++とRustってどっちが良いの？ 6traits

結局C++とRustってどっちが良いの？ 6traits at TECH

[前50を表示]
700:デフォルトの名無しさん
23/08/19 17:53:56.37 2pOprLh9.net
>>698
そもそもRustは低レイヤ向けでライブラリを特に必要としない用途に向いてるってことだよ
Webやクラウドなどの通常のバックエンドアプリはライブラリを多用することになるがそれは向いていないってことの証

701:デフォルトの名無しさん
23/08/19 17:57:23.73 Y5l+MR//.net
ほんとに(webの上位層で)人気が出てくれば、ライブラリは勝手に揃ってくるだろうけどね

702:デフォルトの名無しさん
23/08/19 18:20:48.63 JEXSqoZz.net
webやるには十分よ

703:デフォルトの名無しさん
23/08/19 18:58:40.44 nqM77Zy+.net
>>700
ところが低レイヤもたくさんライブラリ使うんだよ

704:デフォルトの名無しさん
23/08/19 19:13:06.91 ZeP/2UQc.net
だんだんOSSがおかしいと思い始めてきた

705:デフォルトの名無しさん
23/08/19 19:18:41.11 bDuPlb9r.net
RHELやHashiCorpの動きはAmazonがターゲット？

706:デフォルトの名無しさん
23/08/19 19:32:52.64 bYZ/uEmX.net
actix-webとaxumどちらがいいのだろう

707:デフォルトの名無しさん
23/08/19 19:49:03.02 MPHyURRb.net
>>704-705
Mojo🔥がAmazonかGoogleに買収されてクラウドオンリーになる可能性

708:デフォルトの名無しさん
23/08/19 20:17:26.90 ScsfkQnZ.net
Firefoxはバクサイ開いたままにしてるとメモリー20GB、CPU100%になったりする
Chromeはそんなことにならない
そういう違いがある

709:デフォルトの名無しさん
23/08/19 20:41:53.76 JEXSqoZz.net
>>706
axum

710:デフォルトの名無しさん
23/08/19 20:47:27.03 ZeP/2UQc.net
>>707
妨害してるってこと？

711:デフォルトの名無しさん
23/08/19 21:06:21.33 LtLp+SED.net
インターネットはおかしいと最初から思ってた
でもソースコードを保存する場所はネットでもディスクでも紙でもなんでもいい

712:デフォルトの名無しさん
23/08/19 21:18:25.63 fB8B9G8R.net
>>690
Python3の場合(正常に動作しかも高速)
URLﾘﾝｸ(paiza.io)
Rustの場合(timeoutする)
URLﾘﾝｸ(paiza.io)

713:デフォルトの名無しさん
23/08/19 21:36:12.67 DB+Yglwb.net
write_allの後はflushした方いいんじゃね？
しらんけど
まあPythonの方がアマチュア向けというか面倒見がいいのは分かる

714:デフォルトの名無しさん
23/08/19 21:50:51.02 fB8B9G8R.net
>>697
自演がバレたなω

715:デフォルトの名無しさん
23/08/19 21:52:18.92 fB8B9G8R.net
>>698
crates.io 破綻してるよな

716:デフォルトの名無しさん
23/08/19 22:20:00.98 DB+Yglwb.net
crates.ioに限った話ではないけど
ライブラリ名と実装品質のミスマッチはいつも気になってる
HTTP/2用のライブラリでもhttp2よりh2の方が利用者数多いとか
オープンなレジストリの宿命として諦めるしかないのかな

717:デフォルトの名無しさん
23/08/19 22:20:55.24 uqHP0fTk.net
>>644
5chでデマ垂れ流して気持ち良くなるだけのゴミ人生でしたw

718:デフォルトの名無しさん
23/08/20 00:49:54.32 nxq7VYP6.net
損得の勝負をしてると、デマで得をする奴がいないか常に不安だよな
それなら単純に本当か嘘かで勝負すればデマと勝利は両立しないから安心安全なのでは

719:デフォルトの名無しさん
23/08/20 01:54:31.51 xEeb34b9.net
>>712
HTTPを知らないなら素直にライブラリを使えよ
そのRustコード汚すぎるがそこに正しくHTTPヘッダを一行加えたら動いたぞ
サイン曲線GIFが表示されている

720:デフォルトの名無しさん
23/08/20 02:56:13.90 shN/tp+V.net
>>719
修正版ウブおながいします

721:デフォルトの名無しさん
23/08/20 06:38:03.53 klcvUWNp.net
練習に書いてみた
fn base64_encode(input: impl AsRef<[u8]>) -> String {
　const TABLE: [u8; 64] = *b"ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+/";
　const MASK: usize = 64 - 1;
　let mut input = input.as_ref();
　let mut output = Vec::new();
　while let [i0, i1, i2, rest @ ..] = input {
　　let x = u32::from_be_bytes([0, *i0, *i1, *i2]) as usize;
　　(0..=3).rev().for_each(|shift| output.push(TABLE[x >> shift * 6 & MASK]));
　　input = rest;
　}
　match input {
　　[i0, i1] => {
　　　let x = u32::from_be_bytes([0, *i0, *i1, 0]) as usize;
　　　(1..=3).rev().for_each(|shift| output.push(TABLE[x >> shift * 6 & MASK]));
　　　output.push(b'=');
　　}
　　[i0] => {
　　　let x = u32::from_be_bytes([0, *i0, 0, 0]) as usize;
　　　(2..=3).rev().for_each(|shift| output.push(TABLE[x >> shift * 6 & MASK]));
　　　output.push(b'=');
　　　output.push(b'=');
　　}
　　_ => {}
　}
　String::from_utf8(output).unwrap()
}

722:デフォルトの名無しさん
23/08/20 07:18:09.55 3t1JnBWI.net
>>663
同意

723:デフォルトの名無しさん
23/08/20 08:16:48.41 6nnys+Pw.net
>>699
俺はOSSを使わない仕事をしているから。

724:デフォルトの名無しさん
23/08/20 08:21:25.95 6nnys+Pw.net
>>698
>OSSかどうかとは関係なく現状のRustはライブラリ探しと精査に超時間がかかるのは確か
いや、それはOSSだとほぼ必ず起きる現象。
OSS自体が持つ欠点の一つだから。

725:デフォルトの名無しさん
23/08/20 08:24:41.49 6nnys+Pw.net
クローズドなソフトだと、古いものも維持されるかどうかは、
それぞれの企業次第で各企業の特徴が出る。
ところがOSSの場合、人類全体の傾向となるから、
どのOSSなソフトでも似たような保守の傾向となり、
制御できない。なぜなら、人類全体の傾向はいつも
ほぼ同じだから。
電力送電における「無限大母線」という言葉を思い出した。

726:デフォルトの名無しさん
23/08/20 09:39:15.51 GjiTjTDJ.net
>>720
>>712 もう治ってる
 >>719 thx

727:デフォルトの名無しさん
23/08/20 09:56:36.27 GjiTjTDJ.net
>724
なんか全体集合と部分集合を理解出来ていない様な日本語ですね

728:デフォルトの名無しさん
23/08/20 10:26:38.95 nxq7VYP6.net
人類の傾向はいつも、n=1を笑い、前例が1つもない事件事故に泣く

729:デフォルトの名無しさん
23/08/20 10:50:22.50 1EohdLDs.net
>>723
boostは使わないのかな?

730:デフォルトの名無しさん
23/08/20 11:46:34.65 PLGKFrd6.net
>>727
実際rustに限らずOSSなら必ず当てはまることなので部分と言っても意味はない。

731:デフォルトの名無しさん
23/08/20 11:52:30.19 1EohdLDs.net
>>730
「ライブラリ探し」は検索すれば良いだけ
「精査」はOSSはソース手に入るが
プロプラなソフトでは諦めるしかない

732:デフォルトの名無しさん
23/08/20 12:53:04.65 nxq7VYP6.net
時間はお金で買える
ただ具体的にいくらで買えるのか誰も知らないだけ

733:デフォルトの名無しさん
23/08/20 13:19:08.66 sLWYcNsZ.net
>>731
ライブラリの選定ってソースコードの精査はそれほど比重高くないよ。
それよりもライセンス、開発体制やアクティブさ、直近のリリース状況、人気とかが重視されがち。

734:デフォルトの名無しさん
23/08/20 13:30:35.17 1EohdLDs.net
>>733
アンカー間違っとった

>>724
「ライブラリ探し」は検索すれば良いだけ
「精査」はOSSはソース手に入るが
プロプラなソフトでは諦めるしかない

735:デフォルトの名無しさん
23/08/20 15:55:58.84 KkFZufKp.net
>>712を見て思ったが
RustにもPythonのrequests/base64のようなライブラリあるんだろ

736:デフォルトの名無しさん
23/08/20 15:58:19.75 OKeiQGdq.net
標準ライブラリには入ってない

737:デフォルトの名無しさん
23/08/20 16:12:04.89 KkFZufKp.net
>>736
Pythonのrequestsも標準じゃないだろ
Rustは標準のみを使い,Pythonでは外部ライブラリも使ってだからな

738:デフォルトの名無しさん
23/08/20 16:22:18.11 mA4FcHyW.net
RustってSimd命令は非安定だよね？実際にSimd命令使うとどれくらい高速化できんの？
Simd命令ってCPUに応じて場合分けしてコードを書かないとならんの？

739:デフォルトの名無しさん
23/08/20 16:51:39.65 7DmX7Wr5.net
>>738
CPU以外にボトルネックがないならおおよそ並列度の分だけ性能上がる
32bit + 32bitのような計算を1命令で処理してたところを256bit幅がサポートされてるハードウエア&命令を使えば約8倍

740:デフォルトの名無しさん
23/08/20 16:54:56.78 7qQbvCdM.net
>>739
実際には、「お膳立て」のためのオーバーヘッドが有ることと、
SIMD命令が使える部分が少ないことで、8倍のSIMD命令を
使っても、20%位の向上にしかならないと言われている。
数値は大体。
だから、IntelはAVX512をメインストリームからは捨て
ようとした。

741:デフォルトの名無しさん
23/08/20 17:01:04.61 7qQbvCdM.net
スパコンが、ベクトル型が廃れてスカラー型の並列型が
流行していることからしても、SIMDは将来性の無い
ものだと個人的には思ってる。
むしろ、SIMDを捨て、コア数を増やす方が圧倒的に
高速化できる。

742:デフォルトの名無しさん
23/08/20 17:20:33.01 V1e9lq/f.net
スパコンのコーディングは知らんけど
雑にスレッドプールにぶん投げるだけで速くなる並列処理の方が
SIMDより使いやすいなって思う

743:デフォルトの名無しさん
23/08/20 18:05:27.72 a//hKKzV.net
>>720
整理するとこれでいいみたい

use std::error::Error;
use std::net::TcpStream;
use std::io::{BufReader, BufRead, Read, Write};
use std::fmt::Write as _;

fn http_get(host_port: &str, path: &str) -> Result<Vec<u8>, Box<dyn Error>> {
　let mut server = TcpStream::connect(host_port)?;
　let mut http = String::new();
　write!(http, "GET {path} HTTP/1.1\r\n")?;
　write!(http, "Host: {host_port}\r\n")?;
　write!(http, "Connection: close\r\n")?;
　write!(http, "\r\n")?;
　server.write_all(http.as_bytes())?;

　let mut server = BufReader::new(server);
　let mut line = String::new();
　server.read_line(&mut line)?;
　if line != "HTTP/1.1 200 OK\r\n" {
　　return Err("HTTP: not 200 OK".into());
　}
　while server.read_line(&mut line)? > 2 {}

　let mut data = Vec::<u8>::new();
　server.read_to_end(&mut data)?;
　Ok(data)
}

744:デフォルトの名無しさん
23/08/20 18:11:30.48 gUvM95Xg.net
よかったね

745:デフォルトの名無しさん
23/08/20 18:25:00.43 MyoNrmjT.net
>>743
え？Rustって標準ライブラリでhttpリクエストすらできないの？

746:デフォルトの名無しさん
23/08/20 18:38:37.77 iamuQ/3/.net
Rsutはwebやるための言語とか言ってたような

747:デフォルトの名無しさん
23/08/20 19:01:10.42 mA4FcHyW.net
とりあえず1000×1000の行列の行列積dotが0.015秒弱でできるようなところまで行列ライブラリーが実装できたので、何とか0.00秒台で計算が終わる様にしたい。
今の所手を出してない最適化
1) Simd命令
2) インラインアセンブリ
3)ループアンローリング(これはRustだと自動的にやってくれてる様で自分の実験した範囲ではあまり効果がなかった。)

この中で一番効果的な最適化は何？
ちなみに今の所は以下の最適下は既に実装済み
1) ループ交換
2) キャッシュブロッキング
3) rayonによる並列処理

748:デフォルトの名無しさん
23/08/20 19:10:25.82 IxOV384F.net
>>745
Rustの標準ライブラリは言語サポートを必要とするものを中心に極めて絞っている
既出のhttpやbase64だけでなく正規表現や乱数など多くの機能がデファクトスタンダードライブラリ

>>746
標準ライブラリにないだけで各種ライブラリは下位から上位フレームワークまで揃っている
CPUとメモリのリソースコスパ重視でWebやるならRust一択でまちがいない
Webインフラ各トップ企業たちも>>496のようにRustを採用している

749:デフォルトの名無しさん
23/08/20 19:16:55.65 55RG+hvj.net
デファクトスタンダードという選りすぐりに聞こえるが
単にそれしかないだけのような...
ユーザ数少ないので

750:デフォルトの名無しさん
23/08/20 19:20:14.76 yJmfO0+S.net
>>747
simdに手を出すとarmのsimdまでやる羽目になる
インラインアセンブリも同じ

つまり今のところおすすめはない
外部のライブラリなどに依存するなら別だけど

751:デフォルトの名無しさん
23/08/20 19:25:32.14 mA4FcHyW.net
>>750
じゃあ基本的にはdot演算に関してはこれ以上の最適化の余地はないって感じ？

752:デフォルトの名無しさん
23/08/20 19:26:47.41 MoWe6Sep.net
グーグルとアップルが流行らせようとしてるらしいが

753:デフォルトの名無しさん
23/08/20 19:44:59.22 sOv9anOF.net
paiza.io の Rust は crates 使えないから
ホント使いもんにならんわ

754:デフォルトの名無しさん
23/08/20 19:47:42.13 rPtHvv2S.net
じゃあGitHubのCodespacesでも使ってれば

755:デフォルトの名無しさん
23/08/20 19:54:55.65 yJmfO0+S.net
>>751
おすすめはしないけどやればやったになるはず
デバッグ環境があるかは知らないが

756:デフォルトの名無しさん
23/08/20 19:58:02.59 U3mkt6q/.net
>>753
それはpaizaが悪い
例えば>>712で意味のない比較をしているが
Python版はimport requestsと標準ライブラリではないものを使っている
つまりpaizaはPythonだと標準ライブラリ以外のライブラリも使える
同じようにRustでも標準ライブラリ以外を使えるようにpaizaが対応すれば解決

757:デフォルトの名無しさん
23/08/20 20:00:15.86 259yUXDO.net
>>747
これに即して測ってみては(1500x1500(f64)の生成、行列積、破棄の計測)
URLﾘﾝｸ(github.com)

とりあえずnumpyとの比較とか
URLﾘﾝｸ(github.com)

758:デフォルトの名無しさん
23/08/20 20:00:40.96 pu4udaaX.net
シミュレータなどは行列演算だけ高速化しても、全体の
高速化にはなら無い事が多い。

759:デフォルトの名無しさん
23/08/20 20:04:56.81 mA4FcHyW.net
>>757
手元のnumpyよりは少なくとも1000×1000の行列積は2倍から3倍速、10000×10000の行列積だと約5倍から10倍速い。手元よnumpyのバックエンドはIntelMKL。

760:デフォルトの名無しさん
23/08/20 20:07:47.30 mA4FcHyW.net
まだ、行列の対角化とか逆行列の計算は実装できてない。

761:デフォルトの名無しさん
23/08/20 20:20:10.35 259yUXDO.net
なんかnumpyが遅くない？

1000x1000でnumpy.dot(a, b)部分だけ測ったらこんな感じだったけど

0.006215572357177734
0.005822658538818359
0.005129098892211914
0.007399797439575195
0.011432886123657227
0.008414506912231445
0.009572029113769531
0.009091615676879883
0.008922100067138672
0.007265329360961914

762:デフォルトの名無しさん
23/08/20 20:23:55.44 259yUXDO.net
def calc(n):
n = n // 2 * 2
a = build_matrix_np(n, 1.0)
b = build_matrix_np(n, 2.0)

start = time.time()
d = matmul(a, b)
end = time.time()
time_diff = end - start
print(time_diff)

return d[n // 2][n // 2]

763:デフォルトの名無しさん
23/08/20 20:37:44.31 259yUXDO.net
pipで入れたのでopenblasだと思うけど、こんな感じ

OMP_NUM_THREADS=1 python mutmul-numpy.py 1000
0.030291080474853516
0.029540538787841797
0.029771089553833008
0.02943873405456543
0.02980208396911621
0.03012990951538086
0.0300595760345459
0.030525922775268555
0.03243899345397949
0.02984023094177246

OMP_NUM_THREADS=8 python mutmul-numpy.py 1000
0.0073316097259521484
0.007174968719482422
0.007193326950073242
0.006682157516479492
0.006906747817993164
0.006983757019042969
0.007711172103881836
0.008562803268432617
0.007740497589111328
0.00671076774597168

>>759のnumpy計測がsingle threadになってたりしてる？

764:デフォルトの名無しさん
23/08/20 22:44:27.85 mA4FcHyW.net
>>763
シングルスレッドでの計測になってたぽい。この計測って最初のメモリ確保は含めてる？

765:デフォルトの名無しさん
23/08/21 11:52:24.10 lrfEI2bB.net
SIMDでの行列演算の最適化方法そのものとかさすがに関係なさ過ぎ。
RustとC++の違いに着目するならまだしも。

766:デフォルトの名無しさん
23/08/21 14:56:42.48 jPnmmh+2.net
>>764
>>762の通り行列積部分

JuliaをREPLで試した

function matgen(n, seed)
tmp = seed / n / n
[tmp * (i - j) * (i + j - 2) for i = 1:n, j = 1:n]
end
n = 1000
n = round(Int, n / 2) * 2
a = matgen(n, 1.0)
b = matgen(n, 2.0)
using BenchmarkTools
c=@btime(a*b)

OPENBLAS_NUM_THREADS=1 julia --optimize=3 --check-bounds=no
29.581 ms (2 allocations: 7.63 MiB)
OPENBLAS_NUM_THREADS=8 julia --optimize=3 --check-bounds=no
6.875 ms (2 allocations: 7.63 MiB)

juliaが行列積でnumpyの10倍遅いのが意外

767:デフォルトの名無しさん
23/08/21 16:08:29.46 IYi1S2wl.net
>>765
まあ、この板は実質雑談板なんで。アンチOSS君も大暴れしてますし大目にみてください。

768:デフォルトの名無しさん
23/08/21 16:21:29.46 A+ik1f9X.net
OSS関係無いわな。スレチ。別のところで好きなだけやればいい。

769:デフォルトの名無しさん
23/08/21 16:41:35.26 W/JUog9y.net
OSSは関係大有りだと思う。

770:デフォルトの名無しさん
23/08/21 16:46:18.02 dQnAszLW.net
Juliaとかは関係あるの？

771:デフォルトの名無しさん
23/08/21 16:48:11.28 US7qznQL.net
議論に関係あるかどうかの議論が必要ですね

772:デフォルトの名無しさん
23/08/21 16:55:39.81 A+ik1f9X.net
>>769
rustのエコシステムの話とかなら関係あるけど、OSS自体のメリデメ、とかそういう論点はスレチ。

773:デフォルトの名無しさん
23/08/21 17:31:43.44 W/JUog9y.net
>>772
そんなことなくて、OSSであるということは、
非常に大きな影響を及ぼすので無視できない。

774:デフォルトの名無しさん
23/08/21 17:54:01.38 A+ik1f9X.net
>>773
それが通るなら少しでも擦れば何でもありになる。
影響の大小なんて本人が大きいと言い張れば大きいことになる。
スレタイ読んで関係あるかどうか常識で考えれば自明。もちろんあなたに言っても意味無いわけですけども。

775:デフォルトの名無しさん
23/08/21 18:18:38.42 W/JUog9y.net
>>774
そういうことじゃなくて、OSSは本質的に非常に大問題を
抱えてしまっているから、どうしようもない。

776:デフォルトの名無しさん
23/08/21 18:33:57.42 AlisErs6.net
>>775
そういうことじゃなくて、
じゃなくて、このスレそういうスレなんだよ。
マジで頭おかしいw

777:デフォルトの名無しさん
23/08/21 18:35:45.82 dQnAszLW.net
Rustが失敗した原因の根底にOSSの問題があるって言いたいんじゃね

778:デフォルトの名無しさん
23/08/21 19:07:31.63 8jq5nfQv.net
「（すべての）OSSは本質的に非常に大問題を抱えている」→「Rustは本質的に非常に大問題を抱えている」
ってことだな
一応前提が正しければ結論も正しいけど前提の論証が大変そうだ
「一部のOSSは本質的に非常に大問題を抱えている」→「すべてのOSSは本質的に非常に大問題を抱えている」
みたいな論証魔法を決めれば何とかなるけどプログラマはこの類には耐性あるからな
「一部の」と「すべての」を削って後ろの修飾語を盛る程度だとまだ術式が足りなくて通らない

779:デフォルトの名無しさん
23/08/21 19:20:23.58 NjHCZBFl.net
どっちでもいいから、面白いことを書いてくれ

780:デフォルトの名無しさん
23/08/21 19:32:31.36 jTK4AVkF.net
>>775
boostは使わないの?

781:デフォルトの名無しさん
23/08/21 19:53:38.34 2W/Jw/4i.net
矛盾を抱えているんだから論証とか無駄。
どんな結論でも導出できる。

782:デフォルトの名無しさん
23/08/21 20:44:27.67 oR9oJ1qa.net
背理法の仮定を利用しなくても矛盾するなら、任意の結論を背理法で証明できる
だから「矛盾しているのはお前だけ」みたいな結論はむしろ出てこないんだよ
属人的な仮定を必要としないのだから全人類が矛盾する

783:デフォルトの名無しさん
23/08/21 21:19:54.31 q/j5yT82.net
>>782
論理を語るのなら、まず共通の前提条件を全部出して合意取れよ。
前提条件より先に結論が出るとかありえないし、前提条件の合意が取れていないなら矛盾するから議論する意味がない。

784:デフォルトの名無しさん
23/08/21 21:26:14.98 6J/DqmTl.net
>>778
おもしろい

785:デフォルトの名無しさん
23/08/21 21:58:53.90 oR9oJ1qa.net
>>782
合意がなければ義務はないというのは正しい
議論には義務が必要不可欠というのは間違っている
強制力があるべきという合意がもしあれば論理ではなく物理的な戦争が始まる

786:デフォルトの名無しさん
23/08/21 22:02:41.22 oR9oJ1qa.net
ちょっと間違えたけど、どこを間違えたのかいちいち合意を取るのが面倒臭い

787:デフォルトの名無しさん
23/08/22 00:06:37.51 p77SLRC3.net
まあ、この板はプログラム関連なら基本的に何話しても良いってことで。この6traits目を、立てた本人が言ってることなんで。次のtraitからはそれについても書いとく？

788:デフォルトの名無しさん
23/08/22 00:42:55.89 CKREFo3h.net
>>787
君スレと板ごっちゃにしてない？

789:デフォルトの名無しさん
23/08/22 06:46:28.34 oV9q0mPv.net
このスレタイに釣られるって段階で、参加者がある程度絞られてる
別に何話そうが確かに構わんのだが、面白いことを書け
ライブラリ書いてるヤツが定着してるのは、Rustのライブラリ作りってこんな感じなのか、と思って眺めてる
そういや、hsutter氏がなんか動画出してたけど、まだ観てない
勉強しないといけないこと(non C++, non Rust)大杉

790:デフォルトの名無しさん
23/08/22 12:18:07.09 whNyN1Gw.net
>>773
スレタイを100万回読め

791:デフォルトの名無しさん
23/08/22 19:02:47.39 jvLbVv4g.net
>>766 訂正
測定自体はOKですが、最後の一文、桁を読み間違えてたorz
× >juliaが行列積でnumpyの10倍遅いのが意外
juliaとnumpyは同じスピードです(両方ともopenblasバックエンド、同一スレッド数の場合)
URLﾘﾝｸ(i.imgur.com)
>>747,759,764
そちらの環境でのマルチスレッドnumpyの測定数値が出ていたら自作ライブラリとの比較結果お願いします

792:デフォルトの名無しさん
23/08/22 19:57:32.16 p77SLRC3.net
>>791
なんかnumpyでマルチスレッド指定しても速度上がんないんですけど何か要因は考えられますか？

793:デフォルトの名無しさん
23/08/22 21:29:39.50 3Q3W0wKi.net
>>792
こちらでは素のvenvでやり直しても、defaultでマルチスレッドが効いています
$ python311 -m venv venv
$ . venv/Scripts/activate
$ pip install numpy
$ pip list
Package Version
---------- -------
numpy 1.25.2
pip 23.2.1
setuptools 65.5.0
$ du -h venv
96M venv
$ python matmul-numpy.py 1000
0.006245136260986328
0.006272077560424805
0.006720542907714844
0.007251739501953125
0.006670713424682617
0.0067596435546875
0.006724119186401367
0.005736351013183594
0.005699872970581055
0.007322788238525391
condaの場合は分かりませんので、とりあえずpipのopenblas版numpyで計測してみては?
URLﾘﾝｸ(numpy.org)

794:デフォルトの名無しさん
23/08/22 22:57:52.73 3Q3W0wKi.net
miniforgeのcondaでchannel指定してmkl版numpyを入れましたが、こちらもマルチスレッドが効いています(MKL_NUM_THREADS指定無しでも)
$ conda install -c intel numpy
$ du -h ****/tmpenv2
1.3G ****/tmpenv2 <-- orz
$ python -c 'import numpy; numpy.show_config()'
....
blas_mkl_info:
libraries = ['mkl_rt']
library_dirs = [****]
define_macros = [('SCIPY_MKL_H', None), ('HAVE_CBLAS', None)]
include_dirs = [****]
....
MKL_NUM_THREADS=8 python matmul-numpy.py 1000
0.007200717926025391
0.007269620895385742
0.0062868595123291016
0.00983738899230957
0.007195472717285156
0.006726503372192383
0.006485939025878906
0.0068206787109375
0.006815910339355469
0.006788492202758789

795:デフォルトの名無しさん
23/08/22 23:05:57.11 3Q3W0wKi.net
MKL版はthread数指定しないと=8よりも若干遅くなる
$ python matmul-numpy.py 1000
0.007860660552978516
0.009339094161987305
0.00830698013305664
0.006848335266113281
0.008496522903442383
0.007841348648071289
0.007840871810913086
0.00741887092590332
0.007982254028320312
0.006742000579833984
$ python -V
Python 3.8.11 :: Intel Corporation
芋づるインストールされた中でバージョンが気になるもの
mkl intel/win-64::mkl-2023.2.0-intel_49496
mkl-service intel/win-64::mkl-service-2.4.0-py38h9a4cf0c_35
mkl_fft intel/win-64::mkl_fft-1.3.6-py38h5020ddc_56
mkl_random intel/win-64::mkl_random-1.2.2-py38hf267b2b_76
mkl_umath intel/win-64::mkl_umath-0.1.1-py38h51af1d9_86
numpy intel/win-64::numpy-1.24.3-py38hcdfd0aa_0
numpy-base intel/win-64::numpy-base-1.24.3-py38h9b12b81_0

796:デフォルトの名無しさん
23/08/22 23:11:09.00 3Q3W0wKi.net
シングルスレッドがopenblasよりも若干遅いじゃないか!
この辺でやめておきますorz
MKL_NUM_THREADS=1 python matmul-numpy.py 1000
0.032694339752197266
0.03222513198852539
0.03307652473449707
0.03224611282348633
0.031710147857666016
0.03175640106201172
0.032773494720458984
0.032234907150268555
0.03272652626037598
0.0316920280456543

797:デフォルトの名無しさん
23/08/23 11:18:41.09 89z/H8g7.net
crate の docs の comment 率上げるために
struct に comment 付け捲る仕様はホントうざい

798:デフォルトの名無しさん
23/08/24 02:29:53.65 zGLBQFrp.net
python や bumpy の話題はスレ違い。
OSSの話題は許容範囲。
同一視してはいけない。

799:デフォルトの名無しさん
23/08/24 02:32:08.21 zGLBQFrp.net
RustとC++の比較において、前者が「パソコンにおいて」
OSSからスタートしてしまったことは、全ての問題の始まり。
かつてC言語はUnixではOSSであったろうが、パソコンでは
原則的にクローズドであったからこそ発展を遂げた。

800:デフォルトの名無しさん
23/08/24 02:42:41.30 hEI/Eij5.net
>>799
>かつてC言語はUnixではOSSであったろうが、パソコンでは
>原則的にクローズドであったからこそ発展を遂げた。
自分で書いていて論理がおかしいと思わないのかな?

801:デフォルトの名無しさん
23/08/24 02:45:44.43 hEI/Eij5.net
>>799
C言語がクローズドって何がクローズなのかな?
ANSIは誰もが使えるオープンな規格だろうが?
他人に伝えたい文章は正確に書き給え

802:デフォルトの名無しさん
23/08/24 02:47:37.96 zGLBQFrp.net
>>801
TurboC, msc, Watcom C/C++, LSI C, Lattice C,
Small C などがクローズであり、パソコンでOSSなものは
当時存在していなかったはずだ。

803:デフォルトの名無しさん
23/08/24 02:53:01.56 zGLBQFrp.net
C言語は、規格はオープンと言えばオープンであったが、
PC-9801用のコンパイラのソースコードは非公開であった。
X68000 は gcc だったらしいが。

804:デフォルトの名無しさん
23/08/24 02:53:58.47 hEI/Eij5.net
>>802

>>799
>パソコンでは原則的にクローズドであったからこそ発展を遂げた。
これは因果化関係を主張しているので
相関ではなくて因果の根拠を示すことが必要です
述べて下さい

805:デフォルトの名無しさん
23/08/24 02:56:38.98 hEI/Eij5.net
分かると思うけどタイポ
-因果化関係
+因果関係

806:デフォルトの名無しさん
23/08/24 03:19:55.67 zGLBQFrp.net
>>804
クローズドだから競争が生じ、開発環境が高度に発展した。

807:デフォルトの名無しさん
23/08/24 03:23:10.48 zGLBQFrp.net
Win95が開発環境にとって終わりの始まりだった。
OSが32BIT化したことで、Unix系の無料OSSツールが
「主流のビジネスパソコン(PC-9801など)」の世界に
大量流入。
競争条件が破綻し、競争が不可能となり、衰退。

808:デフォルトの名無しさん
23/08/24 04:23:51.68 ejJL7Sq0.net
>>759
(室温超伝導)サンプルの提出をお願いします

>>793-796
スルーか一言で済ませて、余計な知恵を付けさすな

809:デフォルトの名無しさん
23/08/24 04:45:44.07 UfAeCzV0.net
C/C++
/*
printf("hoge*/hoge\n");
*/
コンパイル通る

Rust
/*
println!("hoge*/hoge");
*/
コンパイル通らないωωω

810:デフォルトの名無しさん
23/08/24 04:47:55.84 UfAeCzV0.net
#[cfg(test)]
が原因か？

811:デフォルトの名無しさん
23/08/24 04:51:35.83 UfAeCzV0.net
>>799
>RustとC++の比較において、前者が「パソコンにおいて」
>OSSからスタートしてしまったことは、全ての問題の始まり。
一理ある

>かつてC言語はUnixではOSSであったろうが、パソコンでは
>原則的にクローズドであったからこそ発展を遂げた。
君の世界戦は異世界のものなのか？

812:デフォルトの名無しさん
23/08/24 04:54:05.61 UfAeCzV0.net
分かると思うけどタイポ
世界戦
世界線

813:デフォルトの名無しさん
23/08/24 04:57:32.27 zGLBQFrp.net
>>811
俺が言っているパソコンとは、PC-9801のことだ。
他のパソコンは知らんが、PC/AT機でもDOSでは、
OSSなコンパイラはほとんど動かなかったのでは。

814:デフォルトの名無しさん
23/08/24 04:59:32.52 UfAeCzV0.net
知らないならさっさと寝て下さい

815:デフォルトの名無しさん
23/08/24 05:13:21.27 zGLBQFrp.net
>>814
お前の方が知らんだろ。
OSSのせいで何もかも衰退してる。

816:デフォルトの名無しさん
23/08/24 05:26:52.49 7AUlTMfz.net
OSSは貧者(俺含む)の味方。これはガチ

817:デフォルトの名無しさん
23/08/24 07:39:52.41 UfAeCzV0.net
みんなの予想通り
プリゴジン氏が暗殺された
ぜんぶOSSのせいだ

818:デフォルトの名無しさん
23/08/24 08:51:41.95 TNcuPvYX.net
>>802
当時っていつだよ。
gnu cは1980年台からあるだろ。

819:デフォルトの名無しさん
23/08/24 08:53:47.64 TNcuPvYX.net
>>813
ハナクソみたいな日本市場で世界を騙るとか、どこの異世界ですかね？

820:デフォルトの名無しさん
23/08/24 12:14:49.40 fsW9ztQn.net
>>819
5chでイキって気持ち良くなるとか、どこの暇人ですかね？

821:デフォルトの名無しさん
23/08/24 13:03:33.51 hEI/Eij5.net
>>802
確かにコンパイラは淘汰され減ったが
トータルのコンパイラの利用者つまり開発者は
OSSがない場合に比べて増加したんだと思うよ
誰でも直ぐに無料で開発を進められるようになり
開発者の裾野が広がったのは
ソフトウェアの進化速度を考える上で重要だったと思う

822:デフォルトの名無しさん
23/08/24 15:07:09.15 HFuNmebf.net
>>821
淘汰されたのはOSSのせいじゃなくてVisual C++のせい。

823:デフォルトの名無しさん
23/08/24 15:13:16.73 YZsWFF7D.net
>>818
DOSのPC-9801ではまともに使えなかった。

824:デフォルトの名無しさん
23/08/24 15:51:29.49 YZsWFF7D.net
競技プログラミングみたいな何の能力を測定しているのか、
また、参加者も限られるようなものの成績が良かった
ことと、言語に対する評価眼を持っていることは別である。
評価とは、審査する側が誰であるかによって異なってしまう。
国際組織でも、アメリカの金で成り立っている組織は、
アメリカの意見になってしまうことは良く知られている
のと同様、プログラムでも学問の世界でも同様だと考えられる。

825:デフォルトの名無しさん
23/08/24 15:56:25.89 hEI/Eij5.net
>>824
それで?

826:デフォルトの名無しさん
23/08/24 15:56:54.62 YZsWFF7D.net
「若いから年上の人より正しい判断が出来る」とは限らない。
しかも、その若者の能力が高いかどうかを判定しているのが
京大総長というような高齢の権威者の場合はなおさら。
何を持って人の能力を判断しているのか問題、という問題
が起きる。

827:デフォルトの名無しさん
23/08/24 16:00:05.43 YZsWFF7D.net
京大総長が、「この人はプログラミング能力がすばらしい」などと
判断したとしよう。
しかし、それは「京大総長基準」に過ぎない。
「プログラミング能力が素晴らしい」とは、一体何を
もって決めるのか。
仮に素晴らしかったとしても、プログラミング言語の
良し悪しをその人一人が判断してよいということでもない。

828:デフォルトの名無しさん
23/08/24 16:12:01.07 M4GRlfeF.net
それで?

829:デフォルトの名無しさん
23/08/24 18:17:38.62 QG+ZRfMP.net
test

830:デフォルトの名無しさん
23/08/24 18:50:59.70 RER6Zrq6.net
パソコンが高価だった時代はゲーム機が貧者の味方
その時代のゲームは今でも売買されているが開発者の利益にはならない
むしろ過去の商用ソフトは衰退させた方が最新のゲームを売りやすい

831:デフォルトの名無しさん
23/08/24 18:52:23.22 CY1BVKcv.net
#[derive'Copy, Clone)]
たとえば古い passwd ファイルの形式とかで使われていた
root:x:0:0:root:/root:/bin/bash
user01:x:500:500::/home/user01:/bin/bash
のような「:」区切りのテキストファイルのデータベースを扱いたいとき
C標準のライブラリは何ですか？
Rust用のcrateで言うと何ですか？

832:デフォルトの名無しさん
23/08/24 19:15:40.09 zclBScKH.net
なんでそんなこと聞くの？

833:デフォルトの名無しさん
23/08/24 22:11:36.44 3ljd7W/g.net
自作自演の準備じゃね

834:デフォルトの名無しさん
23/08/25 00:12:20.33 1ayFYibv.net
>>831
区切るだけならstr.split(':')かstr.splitn(7, ':')
構造体に入れるなら一般的にserde crate
そのケースならcsv crateでコロンにデリミタ指定でもいけるはず

835:デフォルトの名無しさん
23/08/25 00:21:37.84 jCG33I6S.net
Cなら自分はstrtokが好きかなあもちろんいろいろとunsafe

836:デフォルトの名無しさん
23/08/25 03:14:57.13 VpCvI12o.net
Ruby で、CSV モジュールを使って書いた
UNIXプログラミング質問すれ Part10
ｽﾚﾘﾝｸ(tech板:936番)-937

837:デフォルトの名無しさん
23/08/25 05:21:04.13 +GAmI8K8.net
>>681
わかりみ

838:デフォルトの名無しさん
23/08/25 07:20:56.16 vekBwhc6.net
BDS-C とか α-C の人は少数派かな

839:デフォルトの名無しさん
23/08/25 07:34:56.19 jCG33I6S.net
THINK Cとか、CodeWarriorとかあったけどねえ内製にはgccで十分だわって

840:デフォルトの名無しさん
23/08/25 10:05:27.96 QjCfYj97.net
マクロはズル
非売品はチート
ネイティブコンパイラは商品という雰囲気

841:デフォルトの名無しさん
23/08/25 21:47:21.62 dgCh3EK3.net
スレタイだけ見て検証結果だけ見に来ました
どこですか？

842:デフォルトの名無しさん
23/08/25 22:49:31.05 TKWUIPKw.net
検証結果ならC++とRustの平行線が交差してるところに書いてあるよ

843:デフォルトの名無しさん
23/08/26 09:36:49.47 6yPOQcjp.net
何番のレスですか？

844:デフォルトの名無しさん
23/08/26 10:17:55.69 YvKfERa1.net
MS「BASICとCってどっちが儲かるの」
科学「推測するな。速度を計測しろ」
アンチOSS「ソースを見れない方が勝つ」

845:デフォルトの名無しさん
23/08/26 10:47:48.15 oTZjsNGJ.net
>>844
アホ科学者「推測するな。速度を計測しろ」
知的科学者「思考実験しろ」

846:デフォルトの名無しさん
23/08/26 12:11:26.64 n9Zpgb21.net
科学的wの含意がわからないバカは単なるバカより悪性度が高い

847:デフォルトの名無しさん
23/08/26 12:50:41.78 EQIr/PqP.net
参照で充分なのに所有権の移転を要求する関数があると
いちいちcloneしてから渡さないといけないから非効率
もちろん一回呼ぶだけならclone不要だが
ループ中とかで何度も呼ぶ用途には使えない
なんでそんな関数の設計になってるんだろう？
別にメリットでもあるんか？

848:デフォルトの名無しさん
23/08/26 13:34:35.63 Zw1oRqbC.net
日本の科学界は理論軽視。実験ばかりしてる。

849:デフォルトの名無しさん
23/08/26 13:51:37.78 BkdXpONX.net
日本のプログラマは設計軽視
実装ばかりしている

850:デフォルトの名無しさん
23/08/26 13:53:57.47 1I5XjMeW.net
まだ検証結果とかないんですね
結果だけは知りたいので、そのうちまた来ます

851:デフォルトの名無しさん
23/08/26 13:54:42.84 X9B+4TBT.net
無駄な事を如何に合理的に行うか

852:デフォルトの名無しさん
23/08/26 17:14:09.12 BANL9PLy.net
>>847
例えばどの関数？

853:デフォルトの名無しさん
23/08/26 18:20:57.77 SuFMWKx7.net
>>852
誰かばれるからネットでは言えないだろうて。

854:デフォルトの名無しさん
23/08/26 18:28:43.52 PUW/Ds/i.net
逆じゃね
日本人は実装軽視
設計でガチガチに固めすぎる

855:デフォルトの名無しさん
23/08/26 18:35:38.61 d2gT63Zp.net
>>853
具体例出せないんだと
本人の認識に問題あるのか
関数の作りに問題があるのかわからない

856:デフォルトの名無しさん
23/08/26 18:39:02.26 rFnbk731.net
わからなくていいんじゃない？

857:デフォルトの名無しさん
23/08/26 19:54:07.81 W0ZiOB7w.net
わかってないのに何かわかったつもりになって書き込まれているクソスレ

858:デフォルトの名無しさん
23/08/26 21:07:05.08 0tgAAb31.net
上には上があるわかったつもりでも、さらに賢い奴から見ればクソ
自分なりに勉強して持論もまとめてるが、わかったなんて思わないもんだ

859:デフォルトの名無しさん
23/08/26 21:55:32.22 H12RzSKf.net
さすが老害スレww

860:デフォルトの名無しさん
23/08/26 22:24:06.83 lapxHx5e.net
賭け事とか軽率な行動をしなければいいよ
頭の中が謙虚だろうが傲慢だろうが行動に直結しなければいい
いくら謙虚になっても忠誠心か何かで極端な行動をするパターンはある

861:デフォルトの名無しさん
23/08/26 22:46:59.85 rQ60jT/J.net
さすが老害スレw

862:デフォルトの名無しさん
23/08/27 02:06:49.72 q6Sk83rz.net
判ると解るの違いも分からないとか単なるバカだろ

863:デフォルトの名無しさん
23/08/27 02:08:05.98 fTLdLIfO.net
あーそれめっちゃわーかーるー！

864:デフォルトの名無しさん
23/08/27 02:39:08.79 v+5WY+8u.net
Firefoxは何かと問題が多い

865:デフォルトの名無しさん
23/08/27 10:34:56.61 m1noAQBG.net
構造体に演算子オーバーロードしたいときって，所有権持ってかれないように構造体の参照に対して演算子オーバーロードでいいの？
期待通りに動くんだけど
&a + &b
みたいな書き方になってまどろっこしい

866:デフォルトの名無しさん
23/08/27 10:46:11.22 FBPgStJh.net
(*a).演算()やa->演算()を間違えてa.演算()と書いたらエラーになるのがC++で
エラーにならないのがRustじゃないの

867:デフォルトの名無しさん
23/08/27 10:50:29.34 fHPM9HO/.net
>>855
前者だったことが判明

868:デフォルトの名無しさん
23/08/27 11:12:20.72 KN9Q47l4.net
勝利宣言おじさん！

869:デフォルトの名無しさん
23/08/27 12:47:03.16 nwdT7crg.net
>>867
ネットで身元がばれるような情報が書けない事をいいことに
勝利宣言してしまう人。

870:デフォルトの名無しさん
23/08/27 13:02:52.22 gIdFwVfH.net
くやしそうww

871:デフォルトの名無しさん
23/08/27 13:15:32.07 nwdT7crg.net
どうせ普及し無い事が分かってるし、なんとでも言え。

872:デフォルトの名無しさん
23/08/27 13:30:23.89 FBPgStJh.net
スマホや自動車の部品のように
買わされたけど存在意義は知らない物が普及することはよくある

873:デフォルトの名無しさん
23/08/27 13:50:59.05 HtzqCBy6.net
おじさん思考トレース
おじさんはね
Rustに部分的にでも欠陥があるかのような物言いは許せないんだよ
コードが出れば今すぐにでもそいつのせいにしてマウントして打ち消しようと思うんだけどね
証拠がないならそいつのせいってことで断定してマウントとっちゃうのが手っ取り早いから、もうそういうことにしちゃうよ

874:デフォルトの名無しさん
23/08/27 13:53:29.74 HtzqCBy6.net
こうして今日もRustの名誉は保たれた

875:デフォルトの名無しさん
23/08/27 14:19:51.40 FzVOeawK.net
FirefoxはRustで書かれてる

876:デフォルトの名無しさん
23/08/27 14:42:04.03 ZMNQeswV.net
めちゃくちゃくやしかったんだなwwwww
クッソおもろい

877:デフォルトの名無しさん
23/08/27 14:45:24.00 wLUi1wnU.net
FirefoxってRustでも書かれているってだけで
C/C++の方がまだ多いうだよ

878:デフォルトの名無しさん
23/08/27 14:53:34.38 FBPgStJh.net
確率的にはコンパイラのバグよりもアプリかライブラリのバグが多いから
コンパイラに欠陥があった的な物言いは分が悪い
これをやりたいためにライブラリを外部に丸投げする方式が普及している

879:デフォルトの名無しさん
23/08/27 15:00:51.57 FzVOeawK.net
使用率100%は電池が減る

880:デフォルトの名無しさん
23/08/27 16:29:11.02 CnmnxBvX.net
>>865
普通はCopyにする
Copyにできないなら明示的にcloneする
どちらにも採用できない状況なら
参照に対してのみオーバーロードを書く
+や-の演算子はdot演算子と違ってauto-referencingが効かないから
&a + &bみたいな書き方になるのは現状では避けようがない
将来的にauto-refが効くように改修されることがもしあれば
a + bのような書き方もできるようになるかもしれない

881:デフォルトの名無しさん
23/08/27 17:02:53.80 dtO6uWju.net
＞&a + &b
＞みたいな書き方になってまどろっこしい
Copy実装したくない大型なら参照を使うから&a + &bの書き方がありがたい
小型ならCopy実装してa + bと書ける

882:デフォルトの名無しさん
23/08/27 17:07:29.78 FBPgStJh.net
大きいサイズの値を2回以上コピーするのを1回にするような最適化は
コピーコンストラクタに副作用がない保証があればできる気がする
そしてRustのCopyの振る舞いはユーザが勝手に定義できない

次ページ