Moje top płyt w kolejności losowej

Słowem wstępu, niestety, ale wraz z biegiem lat, na słuchanie muzyki jest coraz mniej czasu. W pracy raczej słucham białego szumu i jakiś energetycznych nagrań bez tekstu, po pracy, zwykle włączę na chwilę Radio Swiss. Na odtwarzaczu mp3 mam tylko audiobooki Stevena Coveya, Briana Tracy i Jima Rohna, a i tak, prawie go nie używam. Zwykłego radia prawie nie słucham, nie gromadzę mp3. 

Z wykonawców mogę polecić całą dyskografię:

• Boba Dylana
• Jacka Kaczmarskiego i Tria Kaczmarski / Gintrowski / Łapiński i wszystkie zespoły grające obecnie ich muzykę
• Toola, Porcupine Tree, Opeth
• No i popularne zespoły rockowo/metalowe, a także te nieco mniej popularne, jak Saxons czy Vortex, Diamond Head.
• Stare i dobre polskie zespoły, ale także te nowe (pewnie nie dla każdego), jak Happysad czy Coma.

Wszystko, co uczyniły było dobre.

Często słucham też muzyki Fado, czyli takiego portugalskiego, smutnego flamenco. 

No i muzyki klasycznej, ale ją można podzielić głównie na kompozytorów, nie na konkretne płyty. Ostatnio słucham najwięcej:

• Haydna
• Brahmsa
• Antona Brucknera
• Haendla 

Inną muzykę słucham rzadko, ale parę płyt na zawsze zapadło mi w pamięci.  

👨‍💻Automatyczne podbijanie wersji w npm

Aby automatycznie podbić wersję w package.json, można wykorzystać wbudowane komendy:

• npm version major 
• npm version minor
• npm version patch

Koniec męczenia się z manualnym zmienianiem package.json :) Narzędzie podbija także tagi w gicie.

https://docs.npmjs.com/cli/v8/commands/npm-version 

💻Azure Spot Instances

Azure Spot Instances to VM-ki, które można kupić w znacznie niższej cenie. Nie ma darmowych obiadów - takie VM mogą być wyłączone przez Azure, jeśli potrzebuje on dodatkowej pojemności. Administrator ustawia cenę, jaką chce zapłacić za zasób i jeśli jest ona zbyt niska, wzrasta ryzyko wyłączenia maszyny.

To trochę tak, jakby kupić bilet na pociąg, ale nie mieć pewności miejsca siedzącego. Jeśli ktoś wysiądzie, to możemy wtedy zająć jego miejsce. Jeśli wsiądzie ktoś z droższym biletem, może znowu nas wygonić z miejsca. 

Administrator Spot Instances dostaje powiadomienie 30 sekund przed ich wyłączeniem, przez co nie można ich używać do celów produkcyjnych. Nadają się za to do ML, przetwarzania wsadowego czy renderowania. Może się świetnie nadać do nauki Azure.

Utrudnianie sobie życia z AI

 

Parę lat temu do sprzedaży weszły smartwatche. Moim zdaniem, służą one jedynie pogłębianiu uzależnienia użytkowników od powiadomień, śledzenia zbędnych rzeczy i produkcji elektrośmieci. Powodują też dodatkowe problemy, typu konieczność częstego ładowania i szereg błędów z którymi musimy walczyć jako użytkownicy. Nigdy nie zdarzyło mi się, żeby moje Casio nie chciało się sparować z Iphonem.

Teraz widzimy inne szaleństwo, czyli AI-izacja życia. Ludzie w sieci opisują, jak stawiają jakieś niebezpieczne systemy, które analizują ich całe życie za pomocą płatnych tokenów (OpenClaw). Wpisują tam co tylko im przyjdzie do głowy, jak na przykład co zjedli, kogo widzieli i co z tego wynika. 

AI umożliwia też spamowanie na wcześniej nieznaną skalę. 

🌡️Jak działa temperatura w LLM

🎰Jak działa parametr Top P w LLM

Parametr top-p jest techniką wykorzystywaną przez modele językowe, do kontrolowania tego, jak bardzo kreatywny i przewidywalny jest tekst. Inaczej nazywany jest próbkowaniem jądrowym (Nucleus Sampling).

Jak to działa?

Gdy wpisujemy prompt, model stara się nam odpowiedzieć, wybierając kolejne słowa. Przykładowy prompt:

Dojeżdżam do pracy...

Model musi wybrać, jakie kolejne słowo nam podpowie i jaką ma ono prawdopodobieństwo:

• samochodem (0.35)
• rowerem (0.25)
• autobusem (0.25)
• telekomunikacją miejską (0.14)
• bentlejem (0.01)

🖥️Nauka z YouTube

Chyba nie publikowałem jeszcze posta o tym, jak uczyć się z YouTube, raczej tylko narzekałem, że trudno jest się skupić jak próbujemy to robić i że to nauka pasywna. Nie mniej jednak, YT jest ogromnym źródłem wartościowej, darmowej wiedzy.

Sam często łapię się na tym, że wchodzę na YT by się czegoś pouczyć. Za chwilę jednak widzę że ktoś dodał jakiś durny filmik, który muszę właśnie koniecznie zobaczyć i z nauki zostają nici. Albo filmik od pana Hindusa zaczyna lecieć w tle, a ja zaczynam robić coś innego i potem nic nie pamiętam z tego nagrania. Często też zaczynam jakieś 13 godzinne nagranie od freeCodeCamp i kończę je po 5 minutach. Jeśli też tak masz to czytaj dalej.

AI Vision - Custom Vision w Azure

Rozpoznawanie obrazów w sztucznej inteligencji działa całkiem nieźle, o ile nie potrzebujemy bardzo specjalistycznych wyników.

 

Wg Gemini to zdjęcie przedstawia konwalie majowe.

Azure Custom Vision pozwala na wytrenowanie modelu na podstawie naszych obrazów, dzięki czemu będziemy mogli otrzymywać znacznie dokładniejsze wyniki w naszej dziedzinie. W usłudze dostępne jest zarówno klasyfikowanie obrazów, jak i ich wykrywanie.

https://learn.microsoft.com/en-us/azure/ai-services/custom-vision-service/overview 

💋Wizaże (Visemy) w Azure Speech

Kolejne po prosodii trudne słowo, na które napotkamy się w dokumentacji Azure Speech. Viseme (Wizaż) to termin oznaczający pozycję twarzy i ust, gdy ktoś wypowiada daną głoskę. Może być to pomocne dla osób, które czytają z ruchu ust, albo gdy uczymy się prawidłowej wymowy języka obcego.

Nie pogardzą nią też firmy tworzące cyfrowych asystentów, gry wideo czy animujące postacie. 

Implementacja tej usługi wygląda dość prosto, każdy fonem posiada swój obrazek w SVG i można z nich zrobić animację.

Wydaje mi się, że kiedyś widziałem taką usługę w Google, ale teraz nie mogę jej znaleźć. 

 

https://learn.microsoft.com/en-us/azure/ai-services/speech-service/how-to-speech-synthesis-viseme?tabs=visemeid&pivots=programming-language-csharp

📢Prosodia w Azure Speech Service

Prosodia to jeden z parametrów audio, który może być wygenerowany przez Azure AI Text to Speech. W uproszczeniu, są to elementy mowy składające się na to, jak wypowiadamy słowa, które możemy sobie dostosować. 

Prosodia oferuje dostosowanie takich elementów, jak:

• Wysokość głosu
• Tempo mówienia
• Głośność
• Kontur - zmiana wysokości tonu w obrębie zdania

Azure Speech dostosowujemy za pomocą plików SSML, opartych na formacie XML.

Oczywiście, możemy wykorzystać też gotowe modele, które mają wbudowane Speech Styles, różnicujące prosodię. Można wybrać zarówno ton radosny, jak i profesjonalny i spokojny, czy nawet szepczący.

🎤Diaryzacja w Azure Speech

Diaryzacja to proces dzielenia audio na segmenty, które odpowiadają temu, kto w danym momencie wypowiadał swoje kwestie. 

Gdzie stosuje się diaryzację? 

Zastosowań jest wiele, między innymi:

• Transkrypcja spotkań biznesowych
• Spisywanie wywiadów przez dziennikarzy
• Odróżnianie głosu klienta od głosu konsultanta w obsłudze klienta
• Sądownictwo - tworzenie stenogramów rozpraw

Problem może stanowić tu mówienie wielu osób w tym samym czasie.

MS Foundry > Speech Service

🤖🗂️Azure Custom Text Classification

Azure Custom Text Classification jest dostępna w narzędziach Azure Language, stanowiących część Foundry Tools. Dzięki niej, można dokonać kategoryzacji tekstu do jednej z wybranych przez użytkownika kategorii. 

Dostępne są do wyboru 2 typy projektów:

• Single Label Classification
• Multi Label Classification 

Zastosowania Custom Text Classification

• Automatyczne klasyfikowanie wiadomości lub ticketów
• Moderacja treści, wykrywanie spamu 
• Tagowanie dokumentów 
• Knowledge mining - przeszukiwanie i kategoryzowanie dużej ilości dokumentów
• Analiza sentymentu

Dlaczego warto wybrać Custom Text Classification, zamiast wbudowanych opcji? Podobnie jak w przypadku Custom Image Recognition, Custom Text Classification pozwala na nauczenie modelu na Twoich przykładach. Przekłada się to na osiąganie znacznie lepszych wyników. 
Przykładowo, możesz oznaczyć tekst na temat akwarystyki jako taki, który mówi o pielęgnicach z jeziora Malawi i nauczyć model, że takiej kategorii może używać.

https://learn.microsoft.com/en-us/azure/ai-services/language-service/custom-text-classification/overview

💪Ownership

Kwestią, bez której nie można osiągnać sukcesu, jest ownership. Można przetłumaczyć je na polski jako branie odpowiedzialność albo traktowanie czegoś, jako własnego. 

Tak z 99% ludzi na ulicy ma zerowy ownership.

"Świadectwa nie widziałem, powiedział, że zgubił
Po pracy sił nie miałem, aby z nim pomówić"

Tata Dilera, Kazik

Seria Kuchenne rewolucje jest pełna przykładów braku ownership nawet w przypadku właścicieli firm. Niemal w każdej rewolucji słyszymy, że zastany porządek, czyli syf był taki od zawsze, menu jest od poprzedniego właściciela restauracji i zawsze było super, a za błędy odpowiada jakiś inny, bliżej nie określony byt. Kuchnia zwala na obsługę, obsługa na kuchnię, wszystkiemu winni są wszyscy inni tylko nie oni. 

🔥Motywacja wewnętrzna i sztuczna

Teza - Istnieją 2 rodzaje motywacji, sztuczna, narzucona, oraz wewnętrzna. Motywacja wewnętrzna daje znacznie lepsze rezultaty.

Wiele lat temu poznałem faceta, który zafascynowany był tematem grywalizacji. Lubił on mówić o tym, jak gry namawiają nas do robienia nudnych, powtarzalnych czynności. Cytuje - WoW jest symulatorem zapieprzania. Sam pamiętam, jak grałem w liceum w Gothica część 1 i miałem ogromną motywację do wybicia niemal całej kolonii tylko po to, by wbić pod koniec gry 4 poziomy i zdobyć zaklęcie Tchnienie śmierci. Poświęciłem kilkanaście godzin tylko po to, by zaspokoić sztuczną motywację twórców gry.

🔍Azure AI Search - post zbiorczy

•  Semantic ranking

🧑‍🏫Azure AutoML

Każdy, kto próbował swoich sił z bibliotekami do ML typu Pytorch czy Tensorflow wie, że prawidłowe ich ustawienie jest skomplikowane. Musimy wybrać odpowiednie features i labels, następnie zrobić feature engineering, potestować różne modele, robić split danych itd. Wszystko to wymaga znajomości zarówno Pythona, jak i kilku bibliotek.

Kiedyś nawet miałem pomysł, aby napisać nakładkę na Tensorflow w JS, która pozwalała by to wszystko robić w formie wizualnej. Azure ML to właśnie taka nakładka na skomplikowane algorytmy, która pozwala na trenowanie modeli w najprostszy możliwy sposób.

Azure AutoML sprawdza się w sytuacji, gdy chcemy wytrenować własny model do klasyfikacji, regresji lub clusteringu. 

Ważną opcją jest zaawansowana featuryzacja, która pozwala na:

• uzupełnienie brakujących danych
• enkodowanie tekstu na liczby
• normalizację wag
• embedowanie tekstu

Azure AutoML umożliwia także na używanie kodu w SciKit Learn, Pytorch i TensorFlow.

 https://azure.microsoft.com/en-us/solutions/automated-machine-learning

⛏️Azure Knowledge Mining⛏️

Knowledge mining to bardzo szeroka dziedzina AI, która umożliwia inteligentne wykorzystywanie zbiorów danych w różnym formacie. Dane są wzbogacane, sztuczna inteligencja wyszukuje w nich wzorce, analizuje je i pozwala na ich łatwiejsze przeszukiwanie.

Knowledge Mining w Azure przebiega w 3 krokach:

• Pozyskiwanie danych
• Wzbogacanie danych
• Eksploracja

Dzięki temu, można na przykład znaleźć niewidoczne wcześniej powiązania między dokumentami. Knowledge mining pomaga w automatyzacji wielu czynności i pozwala przełożyć dokumenty bez struktury w wiedzę biznesową. 

Przykładowo, w system można wrzucić tysiące transkrypcji rozmów konsultantów z klientami i dzięki knowledge mining, określić główne problemy. 

Knowledge mining jest podstawą wielu innych procesów, takich jak AI Search. 

📸Azure Smart Cropping

Azure Smart Cropping to prosty i przydatny feature, ułatwiający edycję zdjęć i tworzenie miniaturek. Załóżmy, że mamy zdjęcie zawierające jakiś główny obiekt i trochę tła.

 

Trochę dużo tutaj tła, a główny temat zdjęcia gubi się. Image Cropper, należący do Computer Vision, mógłby to zdjęcie przerobić na ładną miniaturkę. AI wykrywa Area of Interest (obszar zainteresowania) i usuwa resztę.

 

Trochę się rozmazało, ale to nic. Taka usługa może być zastosowana na przykład w aplikacji, gdzie użytkownicy mogą tworzyć własne awatary, jak Linkedin, albo do edytowania dużej ilości zdjęć. Można w niej ustawić także proporcje zdjęć. PS - zdjęcie z wróblami jest mojego autorstwa i przyciąłem je manualnie :)

 https://learn.microsoft.com/en-us/azure/ai-services/computer-vision/concept-generating-thumbnails

👨Sentiment Analysis i Opinion Mining, czyli jakie są nastroje społeczne (Azure)

Sentiment Analysis 

Azure Language w swoich zbiorach zawiera usługę Sentinent Analysis, której nazwa właściwie wyjaśnia wszystko. Dzięki niej, możemy przypisać do tekstu jedną z etykiet:

• negatywna
• neutralna
• pozytywna

Serwis wskazuje nam confidence score dla każdej z tych etykiet i oczywiście, sugerujemy się tą z najwyższą punktacją. Jako wejście dla serwisu możemy użyć zarówno dokumentu, jak i pojedynczych zdań.

Opinion Mining

To opcja dostępna w Sentiment Analysis. Dzięki niej możemy otrzymać jeszcze dokładniejsze informacje na temat nastroju danego tekstu. 

Screen pożyczony z YT

Jak widać na załączonym obrazku, model wybrał sobie kilka aspektów recenzji restauracji i ocenił je osobno. Takie dane mogą być bezcenne w biznesie. Przykładowo, jeśli restauracja ma dużo negatywnych recenzji dotyczących obsługi, może coś z tym zrobić. 

Innym przykładem może być Steam. Ostatnio często dochodzi do zjawiska Review Bombing, bo społeczności graczy nie spodobał się jakiś aspekt studia tworzącego grę, ale nie związanego z samą grą. W takiej sytuacji, Steam może przeanalizować opinie i usunąć te skrajnie negatywne, dodane w specyficznym czasie od wydania gry.  

 

🌐Azure Language Detection

Language detection to usługa Azure dostępna w Microsoft Foundry. Jest to jedna z prostszych usług AI, ponieważ wysyłamy do niej tekst i otrzymujemy odpowiedź. Jako deweloper możemy wybrać model użyty do wykrywania języka.

Jako zwrotkę otrzymujemy:

• kod ISO 6391
• nazwę czytelną dla użytkownika
• confidence score - czyli jak model jest pewny swojego wyboru
• script code ISO 15924

Można wymyślić wiele zastosowań takiej usługi, jak na przykład kategoryzowanie komentarzy użytkowników, przed ich przetłumaczeniem.   

🎭Azure AI Face

Azure AI Face, to serwis umożliwiający wykrywanie, rozpoznawanie i analizowanie ludzkich twarzy. 

Jakie są zastosowania takich usług? Przede wszystkim, jest to weryfikacja użytkowników. Już wiele lat temu laptopy Lenovo oferowały logowanie za pomocą twarzy. Dziś można w ten sposób logować się do konta bankowego, mieć dostęp do określonych części budynku, czy potwierdzić, że jesteśmy tą samą osobą co na zdjęciu w dowodzie osobistym.

Systemy rozpoznawania twarzy stosuje się także na lotniskach, podczas wydarzeń sportowych, w szpitalach i tak dalej.

Twarz rozpoznawana jest za pomocą wielu punktów orientacyjnych, takich jak nos, oczy czy usta.  

Z twarzy można wyczytać takie szczegóły, jak:

• pozycję głowy
• wiek
• stan emocjonalny (obecnie nie jest dostępne)
• włosy
• czy osoba nosi okulary 
• czy zdjęcie jest nieostre
• czy użytkownik nosi maskę (btw nie zapominajmy o 2020 :() 

Można by się zastanowić, czy logowanie ludzką twarzą można obejść za pomocą wydrukowanego zdjęcia. Otóż - jeśli używana jest usługa AI Face, może być to trudne. Podczas wykrywania twarzy przez wideo, określany jest parametr livenes, dzięki czemu system łatwo rozpozna, że próbujemy go oszukać. 

Stosowanie Azure AI wymaga wypełnienia specjalnego formularza i jest możliwe jedynie dla klientów i partnerów zarządzanych przez firmę Microsoft. 

Bardzo ciekawe jest to, że Microsoft NIE udostępnia danych policji USA i nie dopuszcza takich zastosowań swojej usługi. Co więcej, usługa nie pozwala na wykrywanie płci użytkownika.

 https://learn.microsoft.com/en-us/azure/ai-services/computer-vision/overview-identity

🎸Azure Custom Question Answering - sposób na proste utworzenie FAQ

Kiedyś kiedyś dostałem takie zadanie, by przetłumaczyć instrukcje do około 20 efektó gitarowych. W tamtych czasach (2015) używało się programów CAD (Computer Aided Translation) - Omega T. W program wrzucało się wszystkie pliki i tłumaczyło tekst fragment po fragmencie. Z czasem aplikacja podpowiadała nam coraz więcej zdań i tłumaczenie szło szybciej.

Pomyślałem sobie dzisiaj, co by było, gdyby dziś klient poprosił o utworzenie FAQ do każdego z tych efektów. Można by zrobić to na chłopski rozum, wrzucając teksty do LLM i dając w promptcie prośbę o wygenerowanie FAQ. Można jednak sobie jeszcze bardziej uprościć życie, ponieważ mamy dostępny Azure Custom Question Answering, która znajduje się w AI Language.

🤖Azure AI Bot Service

Około roku 2023 wiele firm promowało wdrażanie własnych botów, utrudniających ułatwiających obsługę stron internetowych. Były to czasy przed premierą wydajnych modeli LLM i miejmy nadzieję, że firmy przeszły na nowocześniejsze rozwiązania.

Jeśli w swoim projekcie chciałbyś wdrożyć bota któremu można zadawać pytania, możesz zajrzeć do Azure AI Bot Service i Microsoft Bot Framework.

🖼Image Semantic Segmentation

Azure zawiera usługę Image Analysis, która pozwala na przykład, na wyszukanie obrazu i zaznaczenie go standardową ramką.

Semantic Segmentation to usługa nieco bardziej zaawansowana, bo pozwala na wykrywanie obiektów na poziomie pikseli. Dzięki temu maszyna wie, gdzie dokładnie znajduje się dany obiekt.

 

💹Azure Anomaly detector

Kontynuujemy naukę AI w Azure.

Załóżmy, że mamy serię danych, w której chcemy wychwycić jakieś nieprawidłowości. Przykładowo, mogą być to logi z prób zalogowania się do serwisu. Chcemy upewnić się, że konta użytkowników nie zostaną przejęte i nie zaczną się oni logować przykładowo, z Chin. 

Albo mamy listę transakcji kartą i chcemy wychwycić płatności odbiegające od normy. Użytkownik zawsze płacił małe kwoty, ale jednego dnia, zrobił płatność na kilkadziesiąt tysięcy. W takiej sytuacji, warto do niego zadzwonić i się upewnić, że nie kupuje kryptowalut na polecenie scamera.

Azure Anomaly Detector to usługa stworzona pod takie scenariusze. Dzięki niej, można wychwytywać anomalie zarówno w danych jedno, jak i wielowymiarowych. 

Wykrywanie wielowymiarowe jest ciekawsze, ponieważ możemy analizować kilka parametrów. Weźmy pod uwagę czujniki badające pracę silnika. Badanie parametrów jego pracy jako każdy z osobna, może nie pokazać anomalii, ale jeśli np. wibracje i temperatura będą zbyt wysokie jednocześnie, może to oznaczać anomalię.