Debian-facile

Bienvenue sur Debian-Facile, site d'aide pour les nouveaux utilisateurs de Debian.

Vous n'êtes pas identifié(e).

#1 21-02-2018 11:18:49

hyrr0
Membre
Distrib. : Debain stable
Noyau : 4.9
(G)UI : KDE 5.8 LTS
Inscription : 12-01-2018

Installer OpenCL sur un driver AMDGPU

Bonjour à tous!

Dans mon job, je dois faire tourner des algorithmes de deep-learning. Ceux-ci consomment beaucoup de ressources. A ce titre, les librairies qui permettent la réalisation de ces algorithmes utilisent les cartes graphiques. Certaines passent par CUDA de Nvidia. D'autres, par OpenCL.

J'ai une carte RX480 sur mon PC fixe. J'en suis fort content d'ailleurs! Pas cher, et efficace! C'est la Maaf que j'préfère big_smile J'utilise donc les drivers AMDGPU (non-free). OpenCL est fournit par AMD via son package AMDGPU-PRO (qui n'est pas compatible avec Stretch, j'ai essayé!)

Bref, je sais pas trop comment m'y prendre pour être honnête. J'ai un peu l'impression d'être coincé et ça m’embêterai d'avoir à installer une Ubuntu juste pour ça! Je suis bien avec ma Debian.

Si certaines d'entre-vous ont eu un souci similaire et ont trouvé une solution qui soit stable et perenne : je suis fortement preneur !

Merci par avance smile

Hors ligne

#2 21-02-2018 11:32:34

hyrr0
Membre
Distrib. : Debain stable
Noyau : 4.9
(G)UI : KDE 5.8 LTS
Inscription : 12-01-2018

Re : Installer OpenCL sur un driver AMDGPU

J'ai trouvé ça sur internet... faudra que je teste en rentrant chez moi.

https://math.dartmouth.edu/%7Esarunas/amdgpu.html

Hors ligne

#3 25-02-2018 13:49:50

robert2a
Membre
Lieu : France
Inscription : 15-11-2014

Re : Installer OpenCL sur un driver AMDGPU

Bonjour
ton post est intéressant , j'utilise aussi Cuda , OpenCL , OpenGL

pour Nvidia l'utilisation du driver nonfree permet d'utiliser le gpu comme moteur de calcul  (pour moi cuda est appelé par OpenCL (les deux sont lié )
mes connaissances sont très limitées , a prendre comme tel , je peu écrire des bètises   tongue

pour AMD sur debian , il n'y a pas de drivers nonfree et l'utilisation de Mesa et autres ne permet pas de faire fonctionner correctement les applications en OpenCL (libre)

tu a une commande "clinfo" (paquet a installer)
ce que ça donne avec le driver nonfree nvidia


clinfo
 


retour


Number of platforms                               1
  Platform Name                                   NVIDIA CUDA
  Platform Vendor                                 NVIDIA Corporation
  Platform Version                                OpenCL 1.2 CUDA 8.0.0
  Platform Profile                                FULL_PROFILE
  Platform Extensions                             cl_khr_global_int32_base_atomics cl_khr_global_int32_extended_atomics cl_khr_local_int32_base_atomics cl_khr_local_int32_extended_atomics cl_khr_fp64 cl_khr_byte_addressable_store cl_khr_icd cl_khr_gl_sharing cl_nv_compiler_options cl_nv_device_attribute_query cl_nv_pragma_unroll cl_nv_copy_opts cl_nv_create_buffer
  Platform Extensions function suffix             NV

  Platform Name                                   NVIDIA CUDA
Number of devices                                 1
  Device Name                                     GeForce GTX 750 Ti
  Device Vendor                                   NVIDIA Corporation
  Device Vendor ID                                0x10de
  Device Version                                  OpenCL 1.2 CUDA
  Driver Version                                  375.82
  Device OpenCL C Version                         OpenCL C 1.2
  Device Type                                     GPU
  Device Profile                                  FULL_PROFILE
  Device Topology (NV)                            PCI-E, 01:00.0
  Max compute units                               5
  Max clock frequency                             1137MHz
  Compute Capability (NV)                         5.0
  Device Partition                                (core)
    Max number of sub-devices                     1
    Supported partition types                     None
  Max work item dimensions                        3
  Max work item sizes                             1024x1024x64
  Max work group size                             1024
  Preferred work group size multiple              32
  Warp size (NV)                                  32
  Preferred / native vector sizes                
    char                                                 1 / 1      
    short                                                1 / 1      
    int                                                  1 / 1      
    long                                                 1 / 1      
    half                                                 0 / 0        (n/a)
    float                                                1 / 1      
    double                                               1 / 1        (cl_khr_fp64)
  Half-precision Floating-point support           (n/a)
  Single-precision Floating-point support         (core)
    Denormals                                     Yes
    Infinity and NANs                             Yes
    Round to nearest                              Yes
    Round to zero                                 Yes
    Round to infinity                             Yes
    IEEE754-2008 fused multiply-add               Yes
    Support is emulated in software               No
    Correctly-rounded divide and sqrt operations  Yes
  Double-precision Floating-point support         (cl_khr_fp64)
    Denormals                                     Yes
    Infinity and NANs                             Yes
    Round to nearest                              Yes
    Round to zero                                 Yes
    Round to infinity                             Yes
    IEEE754-2008 fused multiply-add               Yes
    Support is emulated in software               No
    Correctly-rounded divide and sqrt operations  No
  Address bits                                    64, Little-Endian
  Global memory size                              2097414144 (1.953GiB)
  Error Correction support                        No
  Max memory allocation                           524353536 (500.1MiB)
  Unified memory for Host and Device              No
  Integrated memory (NV)                          No
  Minimum alignment for any data type             128 bytes
  Alignment of base address                       4096 bits (512 bytes)
  Global Memory cache type                        Read/Write
  Global Memory cache size                        81920
  Global Memory cache line                        128 bytes
  Image support                                   Yes
    Max number of samplers per kernel             32
    Max size for 1D images from buffer            134217728 pixels
    Max 1D or 2D image array size                 2048 images
    Max 2D image size                             16384x16384 pixels
    Max 3D image size                             4096x4096x4096 pixels
    Max number of read image args                 256
    Max number of write image args                16
  Local memory type                               Local
  Local memory size                               49152 (48KiB)
  Registers per block (NV)                        65536
  Max constant buffer size                        65536 (64KiB)
  Max number of constant args                     9
  Max size of kernel argument                     4352 (4.25KiB)
  Queue properties                                
    Out-of-order execution                        Yes
    Profiling                                     Yes
  Prefer user sync for interop                    No
  Profiling timer resolution                      1000ns
  Execution capabilities                          
    Run OpenCL kernels                            Yes
    Run native kernels                            No
    Kernel execution timeout (NV)                 Yes
  Concurrent copy and kernel execution (NV)       Yes
    Number of async copy engines                  1
  printf() buffer size                            1048576 (1024KiB)
  Built-in kernels                                
  Device Available                                Yes
  Compiler Available                              Yes
  Linker Available                                Yes
  Device Extensions                               cl_khr_global_int32_base_atomics cl_khr_global_int32_extended_atomics cl_khr_local_int32_base_atomics cl_khr_local_int32_extended_atomics cl_khr_fp64 cl_khr_byte_addressable_store cl_khr_icd cl_khr_gl_sharing cl_nv_compiler_options cl_nv_device_attribute_query cl_nv_pragma_unroll cl_nv_copy_opts cl_nv_create_buffer

NULL platform behavior
  clGetPlatformInfo(NULL, CL_PLATFORM_NAME, ...)  No platform
  clGetDeviceIDs(NULL, CL_DEVICE_TYPE_ALL, ...)   No platform
  clCreateContext(NULL, ...) [default]            No platform
  clCreateContext(NULL, ...) [other]              Success [NV]
  clCreateContextFromType(NULL, CL_DEVICE_TYPE_CPU)  No platform
  clCreateContextFromType(NULL, CL_DEVICE_TYPE_GPU)  No platform
  clCreateContextFromType(NULL, CL_DEVICE_TYPE_ACCELERATOR)  No platform
  clCreateContextFromType(NULL, CL_DEVICE_TYPE_CUSTOM)  No platform
  clCreateContextFromType(NULL, CL_DEVICE_TYPE_ALL)  No platform
 



Par exemple Blender ne fonctionne que avec un driver "nonfree" , et pas avec le driver libre (AMD ou NVIDIA) .
j'ai testé sur AMD , je n'ai jamais réussi a faire quelque chose de correct , les paquets pour OpenCL(version libre ) sont présent  , mais l'application ne le prend pas en compte

j'ai pas regardé tes liens encore mais le PRO me fait penser a du propriétaire , a priori qui s'installe bien sur Ubuntu (pour debian il faut tromper l'installateur , mais jamais testé )

en tout cas si tu a trouvé quelque chose qui fonctionne n'hésite pas a poster le retour  wink

pour le CPU tu a une couche OpenCL (pour intel il existe un paquet debian ) mais il faut un gros processeur , et le gpu sera toujours plus performant  hmm

NOTA:
ton lien en #2  installe le driver propriétaire pour AMD , sur debian tu risque d'avoir un truc du genre "OS non pris en charge"

tout ce que tu écrit dans ton #1 je le confirme tongue  (mon habitude de répondre avant de bien lire la question )
j'ai trouvé un tuto (mais pas gardé le lien ) pour forcé le driver AMD a s' installé sur debian , tu peu  faire des recherche dans ce sens.

sinon c'est dommage de ne pas pouvoir utiliser les paquets libres pour OpenCL , je suis allez très loin et un retour de clinfo pas trop mal mais pas moyen de faire fonctionner une application avec.
la cas de Cuda c'est propriétaire  donc obligé de passer par le driver nonfree , mais AMD j'ai toujours espoir de trouver une solution  roll

=>  https://fr.wikipedia.org/wiki/Apprentissage_profond

PS: A mon avis ceux qui travaille sur le projet doivent avoir des configurations  monstrueuses  (en matériel)    tongue

Dernière modification par robert2a (25-02-2018 14:23:53)

Hors ligne

#4 26-02-2018 10:29:36

hyrr0
Membre
Distrib. : Debain stable
Noyau : 4.9
(G)UI : KDE 5.8 LTS
Inscription : 12-01-2018

Re : Installer OpenCL sur un driver AMDGPU

Perso c'est pas tout à fait pareil. J'utilise pas Blender mais des librairies de calcul type TensorFlow. Google (qui gère TensorFlow) utilise pour l'instant Cuda. Des forks ont tenté l'ajout d'OpenCL. ça fonctionne, mais c'est pas au même niveau que Cuda... faut être honnête.

Par rapport à la version CPU tu dois fait x4 en vitesse de rendu. Cuda c'est bien bien plus!

Mais bref, même x4, c'est toujours mieux que la version CPU ou bien se racheter une carte "juste pour ça".

Ta conclusion est juste : Sur Debian, j'ai franchement tout essayé. J'ai pas réussi. J'ai du installer une Ubuntu 16.04 pour pouvoir avoir accès aux drivers propriétaires et pouvoir configurer OpenCL et TensorFlow par la suite.

TensorFlow est un projet opensource. Je comprends pas qu'on utilise pas les drivers OpenSource plutôt que Cuda... Si des jeux arrivent à tourner dessus (surtout sur amdgpu), y'a aucune raison que des calculs ne le puissent pas.

Petit coup de gueule... désolé.

Hors ligne

#5 26-02-2018 13:28:35

kao
Modérateur
Distrib. : Testing
Noyau : Linux 4.quelquechose
(G)UI : Gnome 3
Inscription : 28-09-2012
Site Web

Re : Installer OpenCL sur un driver AMDGPU

Salut,

Perso j'ai un constat en demi teinte avec Intel.
Depuis une mise à jour récente du paquet Beignet, la commande clinfo semble contente avec le serveurX (pas avec Wayland).
Mais la GPU interne du processeur n'est toujours pas reconnu par Blender....
Mais, encore un mais, le moteur cycle de Blender semble très bien fonctionner sur le processeur directement.... yes.gif
J'ai des vitesses de rendu raisonnable, je vais pouvoir enfin tester ce moteur.....

C'est à la relecture de ce sujet que j'ai compris que je pouvais me passer du GPU, et que je me compliquais la vie pour rien, donc merci pour la piste....

Hors ligne

#6 26-02-2018 16:39:11

robert2a
Membre
Lieu : France
Inscription : 15-11-2014

Re : Installer OpenCL sur un driver AMDGPU

Bonjour
c'est les unités de calcul qui comptes , un cpu est pauvre en calcul , un gpu est fait pour cela , calculer des images etc ......
AMD et Nvidia ne nomme pas de la meme manière , cuda parle de "coeur cuda" , Amd d'unités de calcul il me semble (avec OpenCL)

ce qui est dommage c'est que des programmes libre n'utilise pas des drivers vidéo libre , du moins je sais pas faire ...  roll

si tu a un résultat correct avec le cpu et blender tant mieux  smile

tu a trois paquets "beignet" pour opencl sur cpu intel  =>  https://packages.debian.org/fr/stretch/beignet

=>  https://packages.debian.org/stretch/beignet-opencl-icd

Dernière modification par robert2a (26-02-2018 16:44:51)

Hors ligne

#7 26-02-2018 18:04:07

hyrr0
Membre
Distrib. : Debain stable
Noyau : 4.9
(G)UI : KDE 5.8 LTS
Inscription : 12-01-2018

Re : Installer OpenCL sur un driver AMDGPU

robert2a a écrit :

ce qui est dommage c'est que des programmes libre n'utilise pas des drivers vidéo libre , du moins je sais pas faire ...  roll



T'inquiètes... c'est pas que tu sais pas. C'est qu'on peut pas! Y'a AMD qui fait un kernel spécifique nommé ROCm. Avec ça, tu peux (théoriquement). Mais j'ai jamais testé. J'aime pas trop l'idée d'utiliser un Kernel compilé par une boîte externe... pas confiance.

Pourtant ç'aurait été une bonne solution à mon problème. Ils utilisent un truc qui s'appelle HIP pour transcoder des appels Cuda vers OpenCL. Les librairies et logiciels reposants sur Cuda sont donc potentiellement compatibles (sous réserve que HIP intègre les appels. Apparemment l'API est pas encore 100% fonctionnelle).

Hors ligne

#8 27-02-2018 20:52:38

kao
Modérateur
Distrib. : Testing
Noyau : Linux 4.quelquechose
(G)UI : Gnome 3
Inscription : 28-09-2012
Site Web

Re : Installer OpenCL sur un driver AMDGPU

robert2a a écrit :

si tu a un résultat correct avec le cpu et blender tant mieux  smile


Je verrais à l'usage mais pour l'instant mon processeur tient bien la route. (Intel® Core™ i7-4790S CPU @ 3.20GHz × 8)
En plus j'ai que des imagettes  (128x128px) à faire pour le moment, ça devrait le faire.

Hors ligne

Pied de page des forums