Wyświetlenie artykułów z etykietą: Google
Sztuczna inteligencja w praktyce: Jak uruchamiać LLM tanio i efektywnie? - praktyczny poradnik
Wzrost popularności dużych modeli językowych (LLM) sprawia, że coraz więcej firm chce wdrażać je w swoich rozwiązaniach inżynierskich. Problem pojawia się, gdy trzeba uruchomić je tanio i efektywnie. Modele te są zasobożerne, a koszty ich działania często przekraczają budżety zespołów projektowych. Mimo to istnieją sposoby znaczącego obniżenia wydatków operacyjnych bez utraty jakości działania. W artykule przedstawione zostaną konkretne techniki optymalizacji procesu inferencji modeli LLM, takie jak kwantyzacja, zarządzanie pamięcią czy ciągłe batchowanie. Pokazane zostaną też praktyczne przykłady wdrożeń opartych o dostępne technologie open source oraz rozwiązania stosowane przez liderów branży. Celem jest przedstawienie sprawdzonych metod, które można zastosować od razu w projektach inżynierskich.
Jak chłodzi się centra danych sztucznej inteligencji?
W erze gwałtownego rozwoju sztucznej inteligencji rosnące zapotrzebowanie na moc obliczeniową oznacza także wzrost wydzielanego ciepła. Centra danych działają dziś jak ogromne piece danych - procesory i akceleratory pracują w warunkach ekstremalnych temperatur. Największym wyzwaniem nie jest już sama moc obliczeniowa, ale kontrola ciepła, które wytwarzają urządzenia pracujące bez przerwy. To właśnie temperatura staje się nową granicą dla rozwoju AI. W kolejnych częściach artykułu przedstawiono, jak inżynierowie opracowują coraz skuteczniejsze sposoby chłodzenia maszyn napędzających sztuczną inteligencję, od klasycznych systemów cieczy po nowoczesne rozwiązania imersyjne.
- chłodzenie cieczą
- chłodzenie
- chłodzenie imersyjne
- centra danych
- sztuczna inteligencja
- AI
- PUE
- WUE
- Lenovo Neptune
- HPE Apollo
- Dell
- Submer
- GRC
- Microsoft
- Meta
- OVH
- LUMI
- Asperitas
- Finlandia
- Holandia
- Francja
- Amsterdam
- Kajaani
- Europa
- energia
- efektywność energetyczna
- zrównoważony rozwój
- inżynieria chłodzenia
- technologia
- technika
- temperatura
Google kontra Departament Sprawiedliwości
Google stoi przed wielkim wyzwaniem. Departament Sprawiedliwości Stanów Zjednoczonych oskarża firmę o działania monopolistyczne. Firma przedstawia swoje propozycje zmian, aby uniknąć wymuszonego podziału.
Google Maps: Dane o trasach użytkowników znikną w 2025 roku
Użytkownicy Google Maps powinni natychmiast podjąć działania, aby zapobiec utracie ważnych danych. Od czerwca 2025 roku aplikacja nawigacyjna usunie historię lokalizacji użytkowników ze swoich serwerów, oferując nowy system przechowywania danych.
Volvo S60 2024
Volvo wprowadziło nową edycję Black Edition z hybrydą plug-in (PHEV) do modelu S60, który stanowi doskonały wybór dla biznesmenów ceniących wydajność i styl.
Nowa Toyota LandCruiser Prado 2025
Toyota ogłosiła ceny nowego modelu LandCruiser Prado 2025 (250 Series) w Australii, które wzrosły od 9670 do 12 522 dolarów australijskich w porównaniu do poprzedniego modelu. Nowy model trafi do sprzedaży pod koniec 2024 roku.
Nowa wersja Chrome`a
Czy zdarza ci się irytować wygląd Google Chrome? Masz wrażenie, że czegoś mu brakuje, co podkreślałoby jego pozycję lidera na rynku? Wreszcie nadchodzi zmiana, która choć subtelna, diametralnie zmieni twoje postrzeganie przeglądarki.