Pytorch: Saya tidak dapat mengimpor PyTorch, libomp.dylib tidak dapat dimuat.

Dibuat pada 1 Mei 2019 · 27Komentar · Sumber: pytorch/pytorch

Bug

Saya mencoba menginstal PyTorch, tetapi saya tidak dapat menggunakannya. Itu tidak dapat menautkan perpustakaan dinamis libomp.dylib

Untuk Mereproduksi

Langkah-langkah untuk mereproduksi perilaku:

pipenv memasang obor torchvision
from torch.utils.data import Dataset

Traceback (most recent call last):
  File "/Users/kaspersapala/Documents/Airly/new-pollution-forecast/Datasets/__init__.py", line 3, in <module>
    from torch.utils.data import Dataset
  File "/Users/kaspersapala/.local/share/virtualenvs/new-pollution-forecast-BSetKF9E/lib/python3.7/site-packages/torch/__init__.py", line 79, in <module>
    from torch._C import *
ImportError: dlopen(/Users/kaspersapala/.local/share/virtualenvs/new-pollution-forecast-BSetKF9E/lib/python3.7/site-packages/torch/_C.cpython-37m-darwin.so, 9): Library not loaded: /usr/local/opt/libomp/lib/libomp.dylib
  Referenced from: /Users/kaspersapala/.local/share/virtualenvs/new-pollution-forecast-BSetKF9E/lib/python3.7/site-packages/torch/lib/libshm.dylib
  Reason: image not found

Perilaku yang diharapkan

Mampu menggunakan dan mengimpor PyTorch

Lingkungan

Versi PyTorch (misalnya, 1.0): 1.1.0
OS (misalnya, Linux): Mac OS Mojave
Bagaimana Anda menginstal PyTorch ( conda , pip , sumber): pipenv
Versi Python: 3.7.1

high priority binaries build triaged

Sumber

kaszperro

👍27

Komentar yang paling membantu

brew install libomp memecahkan masalah.

kaszperro pada 1 Mei 2019

👍262 🎉47 🚀34 ❤18 👎8 👀1

Semua 27 komentar

brew install libomp memecahkan masalah.

kaszperro pada 1 Mei 2019

👍262 🎉47 🚀34 ❤18 👎8 👀1

cc @JerryShih

ezyang pada 6 Mei 2019

cc @ pjh5 @kostmo

ezyang pada 6 Mei 2019

brew install libomp memecahkan masalah.

@ezyang
Bagaimana cara menambahkan ketergantungan libomp dalam instalasi pytorch pip?

Apakah semua pustaka yang bergantung pada pytorch akan didukung ke dalam paket wheel?
Jika ya, saya akan menambahkan file libomp seperti kode ini: https://github.com/pytorch/pytorch/blob/2356fac9a5205a2e11f1abf6105fdb3124246d41/setup.py#L738 -L825

Bagaimana dengan perpustakaan dependen lainnya? Apakah semuanya ada di folder third_party dan dibuat dari sumber?

JerryShih pada 7 Mei 2019

pip tidak tahu apa-apa tentang brew, Anda tidak bisa memintanya untuk brew install a package. Juga, sementara resolusi ini "memecahkan" masalah, saya ingin lebih memahami bagaimana ketergantungan ini muncul (khususnya, mengapa kita membangun binari dengan ketergantungan pada perpustakaan buatan? Kedengarannya buruk.)

Dalam beberapa kasus di mana kami tidak dapat menganggap pengguna akhir memiliki perpustakaan yang diinstal, kami mendistribusikan perpustakaan dengan binari kami. Namun, saya tidak yakin bahwa kita harus melakukan ini untuk libomp.dylib. cc @soumith

ezyang pada 7 Mei 2019

👍5

ini adalah sesuatu yang perlu diperbaiki. Saya dapat melihat memperbaiki binari dan mengunggah ulang.
Masalahnya adalah macos CI kami menginstal libomp di sini: https://github.com/pytorch/pytorch/blob/0da0c4be48c675d61c39b4554131e1dbe9177cab/.circleci/verbatim-sources/header-section.yml#L294 , saya pikir untuk CI / pengujian. Tetapi build biner juga mengambilnya dan menggunakannya.

soumith pada 7 Mei 2019

👍3

Saya dapat menghapus ketergantungan ini untuk binari. Saya akan segera mengerjakan PR

pjh5 pada 7 Mei 2019

👍2 🎉1

brew install libomp memecahkan masalah
ini menyelesaikan masalah saya

dudongge pada 13 Mei 2019

Saya setuju dengan @ezyang bahwa instalasi pytorch melalui pip tidak boleh bergantung pada minuman. PyTorch adalah ketergantungan untuk perpustakaan saya dan pengguna saya mungkin atau mungkin-tidak peduli tentang minuman.

Jadi hanya untuk memperjelas, solusinya adalah menghapus langkah brew install libomp && dengan benar mengemas perpustakaan platform khusus libomp (.dylib, .so, dll) ? Apakah itu benar?
Jika saya ingin mengambil malam terbaru dengan perbaikan ini...itu akan menjadi pip install torch_nightly -f blah.html ?

ruohoruotsi pada 17 Mei 2019

👍1

@ruohoruotsi semuanya benar

pjh5 pada 17 Mei 2019

👍1

Hanya untuk referensi: Jika menggunakan macports masalah ini dapat diatasi dengan membuat symlink menggunakan sudo ln -s /opt/local/lib/libomp/libomp.dylib di /usr/local/opt/libomp/lib/ .

ghost pada 23 Mei 2019

👍4

Hanya untuk referensi: Jika menggunakan macports masalah ini dapat diatasi dengan membuat symlink menggunakan sudo ln -s /opt/local/lib/libomp/libomp.dylib di /usr/local/opt/libomp/lib/ .

masalah harus diperbaiki dari PyTorch dengan melihat sistem formulir perpustakaan alih-alih hanya memeriksa /usr/local/opt/

ruivapps pada 29 Mei 2019

👍1

brew install libomp memecahkan masalah.

Ini bekerja!

gongenbo pada 31 Mei 2019

ketika mencoba memutakhirkan pytorch dari 1.0.1 ke 1.1, saya mengalami masalah yang sama dan menemukan utas ini

pembaruan di server linux berfungsi dengan baik tetapi tidak di macbook (OSX) saya

Saya mencoba brew install libomp tetapi formula brew tidak dapat ditemukan, karenanya ini tidak memperbaiki masalah dan saya harus menurunkan versi kembali ke 1.0.1 di OSX untuk dapat mengimpor obor lagi

adakah yang memiliki masalah yang sama mengenai pemasangan pip pytorch dan pemasangan minuman libomp?

adrienchaton pada 5 Jun 2019

@soumith

Saya dapat melihat memperbaiki binari dan mengunggah ulang.

Apakah masih ada rencana untuk melakukan ini, atau apakah rilis biner baru akan menunggu rilis PyTorch berikutnya?

alex-xnor pada 5 Jun 2019

ketika mencoba memutakhirkan pytorch dari 1.0.1 ke 1.1, saya mengalami masalah yang sama dan menemukan utas ini
pembaruan di server linux berfungsi dengan baik tetapi tidak di macbook (OSX) saya
Saya mencoba brew install libomp tetapi formula brew tidak dapat ditemukan, karenanya ini tidak memperbaiki masalah dan saya harus menurunkan versi kembali ke 1.0.1 di OSX untuk dapat mengimpor obor lagi
adakah yang memiliki masalah yang sama mengenai pemasangan pip pytorch dan pemasangan minuman libomp?

Anda perlu menginstal brew terlebih dahulu, buka situs brew dan ikuti petunjuk pemasangan.

kaszperro pada 5 Jun 2019

terima kasih atas balasan Anda, saya telah menginstal brew tetapi tidak cukup up to date
jadi saya memperbarui semuanya dan sekarang berfungsi

catatan untuk pengguna lain, ketika saya melakukan brew install libomp, itu berhasil tetapi aplikasi lain tidak berfungsi lagi (Spyder IDE); saat ini OS saya masih 10.11 (Capitan) dan saya harus mengupgrade ke 10.12 (Sierra) untuk dapat menyelesaikan masalah tersebut

jadi dari pengalaman saya, saya akan merekomendasikan memutakhirkan ke Sierra setidaknya sebelum menginstal pytorch 1.1 dan libomp (saya menggunakan pip dan brew untuk semua instalasi)

adrienchaton pada 6 Jun 2019

mengupload binari baru yang menghapus ketergantungan pada libomp.dylib

soumith pada 22 Jun 2019

👍5 🚀2 ❤1 🎉1 😄1

Sekarang saya mendapatkan kesalahan clang: error: unsupported option '-fopenmp' .

sukuya pada 11 Jul 2019

👍1

@sukuya Kedengarannya seperti masalah yang berbeda, karena sepertinya Anda mencoba mengkompilasi PyTorch sendiri, tetapi masalah ini berkaitan dengan masalah dengan binari yang telah dikompilasi sebelumnya.

alex-xnor pada 11 Jul 2019

👍2

masalah ini masih ada di torch 1.1.0.post2, apakah Anda tahu kapan perbaikan akan tersedia pada rilis stabil?

torrmal pada 13 Jul 2019

@torrmal Bagaimana Anda memastikan bahwa Anda menggunakan 1.1.0.post2? Dalam pengujian saya, perubahan yang diperkenalkan oleh 1.1.0.post2 memperbaiki masalah ini sepenuhnya, jadi saya ingin tahu apakah Anda memiliki 1.1.0 non-post2 tergeletak di suatu tempat yang diambil secara tidak sengaja.

alex-xnor pada 13 Jul 2019

@sukuya Kedengarannya seperti masalah yang berbeda, karena sepertinya Anda mencoba mengkompilasi PyTorch sendiri, tetapi masalah ini berkaitan dengan masalah dengan binari yang telah dikompilasi sebelumnya.

@alex-xnor Saya mengkompilasi program c++ yang menggunakan libtorch prebuilt dan saya mendapatkan kesalahan itu.

sukuya pada 13 Jul 2019

@sukuya dapatkah Anda membuat masalah baru dengan detail lebih lanjut tentang masalah Anda? Secara khusus, dapatkah Anda menyertakan cmake/makefile yang Anda jalankan dan perintah kompiler yang Anda gunakan?

pjh5 pada 15 Jul 2019

brew install libomp memecahkan masalah.

Thx gan masalah saya sudah teratasi

GPPyeye pada 12 Mei 2020

Adakah yang punya saran kapan brew install libomp tidak berfungsi? Saya telah menginstal ulang, menautkan kembali, tetapi tidak berhasil.

leedrake5 pada 20 Jun 2020

letakkan ini di terminal, semoga berhasil. Butuh waktu 2 jam untuk memperbaikinya dan saya harap Anda bisa memperbaikinya lebih cepat, ya ampun...

install_name_tool -ubah @rpath/libc++.1.dylib /usr/lib/libc++.1.dylib /Library/Frameworks/Python.framework/Versions/3.7/lib/python3.7/site-packages/_cvxcore.cpython-37m- darwin.so