Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci
- Autor:
- Jan Mager
- Ocena:
- 2.0/6 1 opinii
- Wersja:
- Online
- Czas trwania:
- 03:05:14
- Technologia:
- Bootstrap 5, CSS3, HTML5, Chart.js 3.7, Visual Studio Code, JavaScript ES6, JQuery 3.6
Opis kursu video Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci
Obierz kurs na... pozyskiwanie danych z sieci
Wiesz, że ponad połowa aktywności w sieci jest podejmowana przez boty? Powód ich popularności nie powinien być zaskoczeniem - w świecie usług i biznesu chodzi przede wszystkim o poznanie rynku i konkurencji. W tym wypadku kto ma technologię, ten ma przewagę, a daje ją web scraping. Dosłownie tłumaczony jako zdrapywanie sieci, web scraping służy do wydobywania ustrukturyzowanych danych ze stron internetowych. Jeśli właśnie zastanawiasz się gdzie w sieci można spotkać web scraping, to stosuje się go do przeprowadzania badań rynkowych, w botach wyszukiwarek i porównywarkach cenowych. W uproszczeniu - by skutecznie pozyskiwać dane z sieci, należy wykonać kilka kroków: nawiązać połączenie z API, a następnie odebrać i zwalidować dane, by odpowiednio wyodrębnić interesujące informacje.
Spróbuj swoich sił i przekonaj się w praktyce, że droga do tego, by zostać web scraperem, jest prosta!
W trakcie naszego profesjonalnego szkolenia:
- Przygotujesz poprawną strukturę folderów dla aplikacji webowej
- Stworzysz podstawowy szablon aplikacji oparty na bibliotece Bootstrap
- Utrwalisz wiedzę na temat dodawania stylów CSS
- Dowiesz się, jak pobrać dane z zewnętrznego API
- Nauczysz się wysyłać dynamiczne zapytania do API
- Poznasz bibliotekę Chart.js i API CoinGecko
- Nauczysz się wysyłać zapytania przy użyciu AJAX
- Zbudujesz responsywną i dynamiczną aplikację internetową
- Stworzysz interaktywne wykresy
- Naniesiesz dynamiczne zmiany na wykresie
- Dowiesz się, jak przechwytywać błędy podczas komunikacji z API
- Wprowadzisz dynamiczne zmiany na stronie bez konieczności jej odświeżania
Co więcej...
- Przeprowadzisz walidację zapytań wysłanych do API i walidację zapytań odbieranych z API
- Nauczysz się pobierać dane z zewnętrznych baz danych i wykonywać operacje na pobranych danych
Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci ukończysz na poziomie podstawowym. W trakcie szkolenia wspólnie zbudujemy dwa projekty w języku JavaScript. Na początku omówimy plan całego kursu i niezbędne narzędzia. Następnie płynnie przejdziemy do projektu pierwszej miniaplikacji - Populacja Świata. Podczas tego modułu nauczysz się wysyłać zapytania do API, przetwarzać odebrane wartości, sprawdzać ich poprawność, wyświetlać i operować nimi na stronie. Z tak uporządkowanych danych stworzysz dynamiczny wykres oparty na bibliotece Chart.js. Drugim projektem będzie aplikacja o budzącej emocje nazwie Kryptowaluty. W tej części kursu utworzysz dynamiczną tabelę generującą ranking kryptowalut z aktualnymi kursami pobranymi z API CoinGecko. Dzięki połączeniu z API CoinGecko mamy dostęp do aktualnych co do minuty kursów wszystkich możliwych kryptowalut opublikowanych na stronie CoinGecko. Bez trudu więc zaprogramujesz dynamiczny wykres do wyświetlania kursów kryptowalut na przestrzeni czasu zadanego przez użytkownika. Aplikacja będzie w pełni responsywna na wszystkich dostępnych mobilnych i stacjonarnych urządzeniach. W ramach ostatnich lekcji przedstawimy pomysły na rozwój aplikacji rankingu kryptowalut. Ten kurs dostarczy Ci inspiracji do indywidualnych projektów, a także pokaże nowe możliwości wykorzystania znanych Ci dotychczas tematów. Po zakończeniu szkolenia będziesz w stanie samodzielnie wykonać swój prywatny portfel kryptowalut, łącznie z wykresami i analizowaniem statystyk dzięki zastosowaniu wykresów Chart.js.
Wybrane bestsellery
-
W dzisiejszej praktyce biznesowej duże znaczenie mają dane i ich analiza. W analizie zastosowanie znajduje wiele modeli statystycznych, implementowanych w różnych programach komputerowych. Na przykład Excel ma specjalny dodatek, nazwany po prostu Analiza Danych. Bardzo popularne narzędzie stanowi program R, którego zaletą jest łatwe tworzenie dashb
(39,90 zł najniższa cena z 30 dni)
67.05 zł
149.00 zł (-55%) -
Czy zastanawiasz się czasem nad tym, jak to możliwe, że jesteśmy w stanie „rozmawiać” z maszynami? Że coś mówimy, a one nas rozumieją i odpowiadają na nasze pytania, realizują polecenia, wykonują zadania? I na odwrót – to one mówią (i piszą) do nas słowami, które są dla nas jasne? Przetwarzaniem języka naturalnego (ang. natural language processing,
(39,90 zł najniższa cena z 30 dni)
67.05 zł
149.00 zł (-55%) -
Dzisiejszą gospodarką rządzi informacja. Kto potrafi ją wyłuskać z zalewu danych, ten zyskuje konkurencyjną przewagę. Świadomi tego twórcy oprogramowania komputerowego stworzyli szereg narzędzi służących wyszukiwaniu informacji, ich przetwarzaniu, analizowaniu i prezentowaniu w sposób dostępny dla odbiorców. Jednym z nich jest Elasticsearch – techn
(39,90 zł najniższa cena z 30 dni)
112.05 zł
249.00 zł (-55%) -
Znany i uwielbiany przez programistów React doczekał się potomka. Tak bowiem można by nazwać Gatsby.js – generator stron statycznych bazujący na bibliotece React. Gatsby używa jej jako swojej podstawy do budowania interfejsów użytkownika. Dalsze podobieństwa to między innymi struktura projektu i zastosowanie komponentów zapewniających modularność i
(39,90 zł najniższa cena z 30 dni)
81.95 zł
149.00 zł (-45%) -
Czy znane są Ci nazwy Apache Spark i PySpark? Jeśli pracujesz z danymi i do tej pory nie poznałeś tej technologii, najwyższy czas to nadrobić – na przykład w trakcie proponowanego przez nas szkolenia wideo. Apache Spark to otwarta platforma programistyczna służąca do obliczeń rozproszonych. Opracowana i rozwijana początkowo na Uniwersytecie Kalifor
(39,90 zł najniższa cena z 30 dni)
67.05 zł
149.00 zł (-55%) -
Rola danych stale rośnie. Dziś są one nowym złotem, najcenniejszym zasobem, zdolność do ich kolekcjonowania, przetwarzania i eksplorowania zgodnie z zapotrzebowaniem zaś cenną umiejętnością. Tym cenniejszą, że dostęp do nich stanowi warunek rozwoju sztucznej inteligencji, czyli najgorętszej dziś dziedziny IT. Wszak modele SI są trenowane dzięki kar
(39,90 zł najniższa cena z 30 dni)
59.59 zł
149.00 zł (-60%) -
Mimo intensywnego rozwoju mediów społecznościowych, a co za tym idzie – nowego modelu kontaktu z klientami i „followersami”, zapotrzebowanie na profesjonalne, nowoczesne strony WWW nie maleje. Firmy i osoby prywatne wciąż poszukują twórców witryn w pełni responsywnych i maksymalnie interaktywnych, po których poruszanie się będzie dla użytkownika pr
(39,90 zł najniższa cena z 30 dni)
92.95 zł
169.00 zł (-45%) -
Duński fizyk, laureat Nagrody Nobla, zauważył kiedyś, że „przewidywanie jest bardzo trudne, szczególnie jeśli idzie o przyszłość”. To prawda, przewidywanie przyszłości to nieco karkołomne zajęcie, jednak, o ile posiada się wystarczająco dużo danych z przeszłości, można ją do pewnego stopnia zaprognozować. Na tym dokładnie polega prognozowanie szere
(39,90 zł najniższa cena z 30 dni)
59.59 zł
149.00 zł (-60%) -
Jeśli myślisz o rozpoczęciu pracy w sektorze IT i czujesz wyraźny pociąg do front-endu – proponowany przez nas kurs zdecydowanie jest dla Ciebie. W jego trakcie zdobędziesz praktyczną wiedzę o tym, jak powstaje nowoczesna i profesjonalna aplikacja internetowa. Podczas szkolenia odtworzysz dla siebie przygotowany wcześniej projekt, poznasz jego tajn
(39,90 zł najniższa cena z 30 dni)
70.95 zł
129.00 zł (-45%) -
Vue.js to jeden z trzech najpopularniejszych frameworków JavaScript. Od Reacta i Angulara odróżnia go zwiększona szybkość i elastyczność, a przede wszystkim prostota. Z obsługą tego frameworka nie powinna mieć problemu nawet osoba początkująca; jego twórcy dołożyli wszelkich starań, by praca z nim była przyjemna i efektywna. Przyjrzyjmy się cechom
(39,90 zł najniższa cena z 30 dni)
74.50 zł
149.00 zł (-50%)
O autorze kursu video
Jan Mager - student informatyki na jednej z poznańskich uczelni wyższych. Na co dzień pracuje jako frontend developer dla znanej giełdy kryptowalut. Od ponad siedmiu lat tworzy strony i aplikacje internetowe, w projektach najczęściej używa technologii takich jak HTML, CSS, Bootstrap, JavaScript, PHP, ReactJS. Zawodowo zajmuje się również grafiką komputerową, w tym projektowaniem logotypów, ulotek, plakatów, banerów reklamowych, grafik na potrzeby social mediów, wizualizacji stron internetowych - i na tym nie poprzestaje. Jak sam mówi: nie ma dla niego projektu graficznego, który byłby niemożliwy do wykonania. Poza programowaniem i grafiką komputerową hobbystycznie zajmuje się montażem filmów i fotografią, robi zdjęcia głównie przy użyciu drona. Kiedy tylko może, pozostały wolny czas spędza na siłowni.
Nauka przez tworzenie realistycznych i praktycznych projektów jest najskuteczniejszą, a jednocześnie przyjemną i satysfakcjonującą przygodą.
Spis lekcji (odkodowane lekcje)
-
1. Wstęp 00:27:36
- 1.1. Struktura folderów 00:01:56
- 1.2. Podstawowy kod stron, implementacja bilbiotek i stylów 00:07:07
- 1.3. Stworzenie bazowej struktury Bootstrap 00:01:44
- 1.4. Nawigacja aplikacji 00:05:41
- 1.5. Zakodowanie modułu do wyszukiwania państw 00:05:47
- 1.6. Przygotowanie modułu pod generowanie wykresu 00:03:40
- 1.7. Stopka aplikacji 00:01:41
-
2. Aplikacja 'Populacja Świata' 00:50:30
- 2.1. Przechwytywanie wypełnienia pola tekstowego i walidacja jego danych 00:04:34
- 2.2. Wysyłanie zapytania do API, odczytywanie wiadomości zwrotnej i 'łapanie' błędów 00:05:53
- 2.3. Stylowanie na podstawie zwrotu z zapytania do API populacji 00:02:53
- 2.4. Wyświetlanie w aplikacji zakresów zależnie od wiadomości zwrotnej z zapytania do API 00:06:23
- 2.5. Generowanie wykresu populacji w danym kraju 00:13:11
- 2.6. Przystosowanie wykresu do wyświetlania kilku państw na jednym wykresie 00:03:10
- 2.7. Poprawki stylistyczne aplikacji 00:08:51
- 2.8. Usuwanie błędów 00:05:35
-
3. Aplikacja 'Kryptowaluty' 01:42:03
- 3.1. Przygotowanie szkieletu strony pod aplikację 'Kryptowaluty' 00:02:49
- 3.2. Przygotowanie modułu odpowiedzialnego za wyszukiwanie kryptowaluty 00:07:51
- 3.3. Napisanie funkcji pobierającej nazwę szukanej monety oraz jej walidacja 00:06:40
- 3.4. Wysyłanie zapytania do API CoinGecko i odczytywanie wiadomości zwrotnej 00:05:32
- 3.5. Przygotowanie struktury kodu pod generowanie wykresu (oś X, zakres dat) 00:06:59
- 3.6. Przygotowanie struktury kodu pod generowanie wykresu (oś Y, kursy walut) 00:06:08
- 3.7. Przygotowanie całego modułu pod generowanie wykresu 00:06:12
- 3.8. Wyświetlanie w aplikacji wartości otrzymanych z odpowiedzi zapytania do API 00:04:27
- 3.9. Walidacja danych w formularzu. Dynamiczne przesyłanie zapytań i odbieranie wyników z użyciem AJAX 00:06:36
- 3.10. Generowanie wykresu na podstawie otrzymanych wcześniej wartości 00:08:27
- 3.11. Przygotowanie modułu pod ranking kryptowalut 00:06:36
- 3.12. Dynamiczne wprowadzanie i walidacja liczby wierszy do wyświetlenia w rankingu 00:03:16
- 3.13. Wysyłanie zapytania o aktualny ranknig tokenów do API 00:05:06
- 3.14. Generowanie tabelki z rankingiem kryptowalut 00:09:00
- 3.15. Poprawki techniczne i wizualne rankingu kryptowalut 00:16:24
-
4. Pomysły na dalszy rozwój aplikacji 00:05:05
Kurs Video "Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły kursu
- Ilość lekcji:
- 33
- Czas trwania:
- 3 godz. 5 min.
- Format:
- Online
- Rok nagrania:
- 2022-10-07
- ISBN :
- 978-83-283-9023-2, 9788328390232
- Data wydania :
- 2022-10-07
- Numer z katalogu:
- 167891
- Do kursu dołączone są materiały dodatkowe, znajdziesz je w Twojej Bibliotece
- Kategorie:
Web development » JavaScript
Web development » Bootstrap
Data Science » Analiza danych
Videopoint - inne kursy
-
Czy znasz Angulara? Warto się z nim bliżej zaznajomić, ponieważ należy do najważniejszych frameworków służących do budowania interfejsów użytkownika w aplikacjach internetowych. Stworzony i wspierany przez Google, ma niezwykle spójny ekosystem i oferuje pełny zestaw narzędzi do tworzenia skalowalnych i kompleksowych aplikacji. Co istotne, tworząc z
(39,90 zł najniższa cena z 30 dni)
77.35 zł
119.00 zł (-35%) -
Proponowany przez nas kurs video jest poświęcony grupie produktów typu open source, występujących pod wspólną nazwą Elastic Stack. Składają się na nią Elasticsearch, Kibana, Beats i – dla bardziej zaawansowanych – Logstash. Razem stanowią one zestaw narzędzi służących analizie i wizualizacji danych. Celem jest tu przede wszystkim monitorowanie poja
(39,59 zł najniższa cena z 30 dni)
64.35 zł
99.00 zł (-35%) -
Czas na negocjacje! Są ludzie stworzeni do tego, by dyskutować o biznesowej współpracy, przygotowywać warunki kontraktów, dopinać większe lub mniejsze transakcje i rozbrajać bomby pretensji, jeśli na którymś etapie procesu coś się nie uda. Są, i chwała im za to. Wielu osobom jednak już na samą myśl o tym, że miałyby cokolwiek z kimkolwiek negocjowa
(35,55 zł najniższa cena z 30 dni)
31.60 zł
79.00 zł (-60%) -
Sztuczna inteligencja, ChatGPT, sieci neuronowe, uczenie maszynowe, uczenie głębokie... Oto hasła, które elektryzują nie tylko branżę informatyczną na całym świecie. Wraz z rozwojem tej dziedziny wiedzy i w rytmie prezentowania kolejnych narzędzi rosną nadzieje na praktyczne, naukowe i biznesowe zastosowanie drzemiących w niej możliwości. Okazuje s
(39,90 zł najniższa cena z 30 dni)
64.50 zł
129.00 zł (-50%) -
Power Apps to platforma stworzona przez Microsoft, umożliwiająca łatwe projektowanie, tworzenie i dostosowywanie aplikacji bez konieczności posiadania głębokiej wiedzy programistycznej. Z użyciem Power Apps można budować niestandardowe aplikacje, które efektywnie wspierają i automatyzują różne procesy w organizacji. Co ciekawe, do tego, by to robić
(39,90 zł najniższa cena z 30 dni)
129.35 zł
199.00 zł (-35%) -
Programowanie wieloma językami stoi. Jednym z nich, może jeszcze nie najbardziej znanym, ale zdecydowanie coraz popularniejszym, jest Rust. Słynący z wydajności, bezpieczeństwa i przejrzystości, należy do języków chętnie wybieranych przez nowoczesnych programistów. Szczególnie dobrze sprawdza się podczas projektowania aplikacji sieciowych, gier, sy
(39,90 zł najniższa cena z 30 dni)
96.85 zł
149.00 zł (-35%) -
Według greckiej mitologii Prometeusz był tytanem, twórcą ludzkości – ulepił człowieka z gliny i łez, a następnie wyposażył go w ogień w celu ochrony. Jego imię zapożyczyli dla swojego projektu twórcy darmowej aplikacji służącej do monitorowania systemów i wykrywania ich nieprawidłowości. Przygotowując ją, trafili w dziesiątkę: stopień skomplikowani
(39,90 zł najniższa cena z 30 dni)
103.34 zł
159.00 zł (-35%) -
Oprogramowanie Apache Kafka powstało jako broker wiadomości w LinkedIn. Obecnie pełni funkcję rozproszonego systemu przetwarzania strumieniowego danych, używanego do budowania aplikacji opracowujących duże ilości danych w czasie rzeczywistym. Z zalet tego oprogramowania korzystają firmy na całym świecie – jest kluczowym narzędziem w takich sektorac
(39,90 zł najniższa cena z 30 dni)
57.85 zł
89.00 zł (-35%) -
Wraz z rozwojem sztucznej inteligencji i modeli językowych – a niewątpliwie żyjemy w czasach eksplozji AI – rośnie znaczenie osób będących w stanie w praktyce sięgać po zasoby, jakie oferuje nam ta nowoczesna technologia. Okazuje się, że pośród rozmaitych innych umiejętności potrafi ona także programować i analizować dane, przenika również na obsza
(39,90 zł najniższa cena z 30 dni)
84.50 zł
169.00 zł (-50%) -
Czy znany Ci jest termin pentesting? Jeśli nie, oto jego krótka definicja: pentestingiem nazywamy proces badawczy mający na celu identyfikację słabych punktów w systemach komputerowych, sieciach i aplikacjach. W ostatnim czasie zapotrzebowanie na specjalistów od pentestingu i etycznego hakingu, pozwalającego używać technik hakerów do przetestowania
(39,90 zł najniższa cena z 30 dni)
109.85 zł
169.00 zł (-35%)
Dzięki opcji "Druk na żądanie" do sprzedaży wracają tytuły Grupy Helion, które cieszyły sie dużym zainteresowaniem, a których nakład został wyprzedany.
Dla naszych Czytelników wydrukowaliśmy dodatkową pulę egzemplarzy w technice druku cyfrowego.
Co powinieneś wiedzieć o usłudze "Druk na żądanie":
- usługa obejmuje tylko widoczną poniżej listę tytułów, którą na bieżąco aktualizujemy;
- cena książki może być wyższa od początkowej ceny detalicznej, co jest spowodowane kosztami druku cyfrowego (wyższymi niż koszty tradycyjnego druku offsetowego). Obowiązująca cena jest zawsze podawana na stronie WWW książki;
- zawartość książki wraz z dodatkami (płyta CD, DVD) odpowiada jej pierwotnemu wydaniu i jest w pełni komplementarna;
- usługa nie obejmuje książek w kolorze.
Masz pytanie o konkretny tytuł? Napisz do nas:
Kurs video
Oceny i opinie klientów: Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci Jan Mager (1) Weryfikacja opinii następuje na podstawie historii zamowień na koncie Użytkownika umiejszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniającej do uzyskania rabatu w ramach Programu Kadr.
(0)
(0)
(0)
(0)
(1)
(0)