Köszi Abu
hozzászólások
CRTs
(tag)
Chat with RTX
attyaúristen xD
remélem Carmacknek bejön az AI aztán kenterbeveri ezeket xD
arn
(félisten)
Ezek a 7b modellek llama.cppvel pl egy 10 wattos apple m1en rohogve futnak jo ideje 16g rammal, passzivan.
[ Szerkesztve ]
5150
(aktív tag)
Az igaz, vioszont ahhoz M-es (szerintem legalább 2) apple motyó kell. Amúgy a 7B-s modellek (többsége) használhatatln vacak, a nagyobbak pedig se ebbe, se az M-es apple cuccokba nem férnek bele. ahogy olvasom még az ms féle copilot-hoz is új segédchip kell sz'al.. (és ez még a relative "kezdet")
arn
(félisten)
De legalabb megy… a nagyobb modellekhez eleg sok (video) ram kell. En inkabb ezt erzem a szuk keresztmetszetnek, nem a dedikalt ai chipet. Metalon szepen elfut.
[ Szerkesztve ]
5150
(aktív tag)
Inteleseken is a dolgozgató népet szolgálgatja? Vagy ez csak ARM-os macekre vonatkozik? Csak mer' metal ott is van. Más meg nem.