Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci
- Autor:
- Jan Mager
- Ocena:
- 2.0/6 1 opinii
- Wersja:
- Online
- Czas trwania:
- 03:05:14
- Technologia:
- Bootstrap 5, CSS3, HTML5, Chart.js 3.7, Visual Studio Code, JavaScript ES6, JQuery 3.6
Opis kursu video Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci
Obierz kurs na... pozyskiwanie danych z sieci
Wiesz, że ponad połowa aktywności w sieci jest podejmowana przez boty? Powód ich popularności nie powinien być zaskoczeniem - w świecie usług i biznesu chodzi przede wszystkim o poznanie rynku i konkurencji. W tym wypadku kto ma technologię, ten ma przewagę, a daje ją web scraping. Dosłownie tłumaczony jako zdrapywanie sieci, web scraping służy do wydobywania ustrukturyzowanych danych ze stron internetowych. Jeśli właśnie zastanawiasz się gdzie w sieci można spotkać web scraping, to stosuje się go do przeprowadzania badań rynkowych, w botach wyszukiwarek i porównywarkach cenowych. W uproszczeniu - by skutecznie pozyskiwać dane z sieci, należy wykonać kilka kroków: nawiązać połączenie z API, a następnie odebrać i zwalidować dane, by odpowiednio wyodrębnić interesujące informacje.
Spróbuj swoich sił i przekonaj się w praktyce, że droga do tego, by zostać web scraperem, jest prosta!
W trakcie naszego profesjonalnego szkolenia:
- Przygotujesz poprawną strukturę folderów dla aplikacji webowej
- Stworzysz podstawowy szablon aplikacji oparty na bibliotece Bootstrap
- Utrwalisz wiedzę na temat dodawania stylów CSS
- Dowiesz się, jak pobrać dane z zewnętrznego API
- Nauczysz się wysyłać dynamiczne zapytania do API
- Poznasz bibliotekę Chart.js i API CoinGecko
- Nauczysz się wysyłać zapytania przy użyciu AJAX
- Zbudujesz responsywną i dynamiczną aplikację internetową
- Stworzysz interaktywne wykresy
- Naniesiesz dynamiczne zmiany na wykresie
- Dowiesz się, jak przechwytywać błędy podczas komunikacji z API
- Wprowadzisz dynamiczne zmiany na stronie bez konieczności jej odświeżania
Co więcej...
- Przeprowadzisz walidację zapytań wysłanych do API i walidację zapytań odbieranych z API
- Nauczysz się pobierać dane z zewnętrznych baz danych i wykonywać operacje na pobranych danych
Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci ukończysz na poziomie podstawowym. W trakcie szkolenia wspólnie zbudujemy dwa projekty w języku JavaScript. Na początku omówimy plan całego kursu i niezbędne narzędzia. Następnie płynnie przejdziemy do projektu pierwszej miniaplikacji - Populacja Świata. Podczas tego modułu nauczysz się wysyłać zapytania do API, przetwarzać odebrane wartości, sprawdzać ich poprawność, wyświetlać i operować nimi na stronie. Z tak uporządkowanych danych stworzysz dynamiczny wykres oparty na bibliotece Chart.js. Drugim projektem będzie aplikacja o budzącej emocje nazwie Kryptowaluty. W tej części kursu utworzysz dynamiczną tabelę generującą ranking kryptowalut z aktualnymi kursami pobranymi z API CoinGecko. Dzięki połączeniu z API CoinGecko mamy dostęp do aktualnych co do minuty kursów wszystkich możliwych kryptowalut opublikowanych na stronie CoinGecko. Bez trudu więc zaprogramujesz dynamiczny wykres do wyświetlania kursów kryptowalut na przestrzeni czasu zadanego przez użytkownika. Aplikacja będzie w pełni responsywna na wszystkich dostępnych mobilnych i stacjonarnych urządzeniach. W ramach ostatnich lekcji przedstawimy pomysły na rozwój aplikacji rankingu kryptowalut. Ten kurs dostarczy Ci inspiracji do indywidualnych projektów, a także pokaże nowe możliwości wykorzystania znanych Ci dotychczas tematów. Po zakończeniu szkolenia będziesz w stanie samodzielnie wykonać swój prywatny portfel kryptowalut, łącznie z wykresami i analizowaniem statystyk dzięki zastosowaniu wykresów Chart.js.
Wybrane bestsellery
-
W dzisiejszej praktyce biznesowej duże znaczenie mają dane i ich analiza. W analizie zastosowanie znajduje wiele modeli statystycznych, implementowanych w różnych programach komputerowych. Na przykład Excel ma specjalny dodatek, nazwany po prostu Analiza Danych. Bardzo popularne narzędzie stanowi program R, którego zaletą jest łatwe tworzenie dashb
(52,15 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Czy zastanawiasz się czasem nad tym, jak to możliwe, że jesteśmy w stanie „rozmawiać” z maszynami? Że coś mówimy, a one nas rozumieją i odpowiadają na nasze pytania, realizują polecenia, wykonują zadania? I na odwrót – to one mówią (i piszą) do nas słowami, które są dla nas jasne? Przetwarzaniem języka naturalnego (ang. natural language processing,
(52,15 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Czy znane są Ci nazwy Apache Spark i PySpark? Jeśli pracujesz z danymi i do tej pory nie poznałeś tej technologii, najwyższy czas to nadrobić – na przykład w trakcie proponowanego przez nas szkolenia wideo. Apache Spark to otwarta platforma programistyczna służąca do obliczeń rozproszonych. Opracowana i rozwijana początkowo na Uniwersytecie Kalifor
(52,15 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Znany i uwielbiany przez programistów React doczekał się potomka. Tak bowiem można by nazwać Gatsby.js – generator stron statycznych bazujący na bibliotece React. Gatsby używa jej jako swojej podstawy do budowania interfejsów użytkownika. Dalsze podobieństwa to między innymi struktura projektu i zastosowanie komponentów zapewniających modularność i
(67,05 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Rola danych stale rośnie. Dziś są one nowym złotem, najcenniejszym zasobem, zdolność do ich kolekcjonowania, przetwarzania i eksplorowania zgodnie z zapotrzebowaniem zaś cenną umiejętnością. Tym cenniejszą, że dostęp do nich stanowi warunek rozwoju sztucznej inteligencji, czyli najgorętszej dziś dziedziny IT. Wszak modele SI są trenowane dzięki kar
(67,05 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Mimo intensywnego rozwoju mediów społecznościowych, a co za tym idzie – nowego modelu kontaktu z klientami i „followersami”, zapotrzebowanie na profesjonalne, nowoczesne strony WWW nie maleje. Firmy i osoby prywatne wciąż poszukują twórców witryn w pełni responsywnych i maksymalnie interaktywnych, po których poruszanie się będzie dla użytkownika pr
(67,60 zł najniższa cena z 30 dni)
39.90 zł
169.00 zł (-76%) -
Duński fizyk, laureat Nagrody Nobla, zauważył kiedyś, że „przewidywanie jest bardzo trudne, szczególnie jeśli idzie o przyszłość”. To prawda, przewidywanie przyszłości to nieco karkołomne zajęcie, jednak, o ile posiada się wystarczająco dużo danych z przeszłości, można ją do pewnego stopnia zaprognozować. Na tym dokładnie polega prognozowanie szere
(52,15 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
Jeśli myślisz o rozpoczęciu pracy w sektorze IT i czujesz wyraźny pociąg do front-endu – proponowany przez nas kurs zdecydowanie jest dla Ciebie. W jego trakcie zdobędziesz praktyczną wiedzę o tym, jak powstaje nowoczesna i profesjonalna aplikacja internetowa. Podczas szkolenia odtworzysz dla siebie przygotowany wcześniej projekt, poznasz jego tajn
(51,60 zł najniższa cena z 30 dni)
39.90 zł
129.00 zł (-69%) -
Vue.js to jeden z trzech najpopularniejszych frameworków JavaScript. Od Reacta i Angulara odróżnia go zwiększona szybkość i elastyczność, a przede wszystkim prostota. Z obsługą tego frameworka nie powinna mieć problemu nawet osoba początkująca; jego twórcy dołożyli wszelkich starań, by praca z nim była przyjemna i efektywna. Przyjrzyjmy się cechom
(59,59 zł najniższa cena z 30 dni)
39.90 zł
149.00 zł (-73%) -
JavaScript jest językiem programowania, bez którego nie mogłyby istnieć używane dziś strony internetowe i aplikacje. Za przeważającą większością z nich bowiem stoi kod pisany właśnie w tym języku. Jego skrypty służą najczęściej do zapewniania interakcji. Reagują one na zdarzenia, walidują dane wprowadzane w formularzach, tworzą – czasem bardzo skom
(59,15 zł najniższa cena z 30 dni)
39.90 zł
169.00 zł (-76%)
O autorze kursu video
Jan Mager - student informatyki na jednej z poznańskich uczelni wyższych. Na co dzień pracuje jako frontend developer dla znanej giełdy kryptowalut. Od ponad siedmiu lat tworzy strony i aplikacje internetowe, w projektach najczęściej używa technologii takich jak HTML, CSS, Bootstrap, JavaScript, PHP, ReactJS. Zawodowo zajmuje się również grafiką komputerową, w tym projektowaniem logotypów, ulotek, plakatów, banerów reklamowych, grafik na potrzeby social mediów, wizualizacji stron internetowych - i na tym nie poprzestaje. Jak sam mówi: nie ma dla niego projektu graficznego, który byłby niemożliwy do wykonania. Poza programowaniem i grafiką komputerową hobbystycznie zajmuje się montażem filmów i fotografią, robi zdjęcia głównie przy użyciu drona. Kiedy tylko może, pozostały wolny czas spędza na siłowni.
Nauka przez tworzenie realistycznych i praktycznych projektów jest najskuteczniejszą, a jednocześnie przyjemną i satysfakcjonującą przygodą.
Spis lekcji (odkodowane lekcje)
-
1. Wstęp 00:27:36
- 1.1. Struktura folderów 00:01:56
- 1.2. Podstawowy kod stron, implementacja bilbiotek i stylów 00:07:07
- 1.3. Stworzenie bazowej struktury Bootstrap 00:01:44
- 1.4. Nawigacja aplikacji 00:05:41
- 1.5. Zakodowanie modułu do wyszukiwania państw 00:05:47
- 1.6. Przygotowanie modułu pod generowanie wykresu 00:03:40
- 1.7. Stopka aplikacji 00:01:41
-
2. Aplikacja 'Populacja Świata' 00:50:30
- 2.1. Przechwytywanie wypełnienia pola tekstowego i walidacja jego danych 00:04:34
- 2.2. Wysyłanie zapytania do API, odczytywanie wiadomości zwrotnej i 'łapanie' błędów 00:05:53
- 2.3. Stylowanie na podstawie zwrotu z zapytania do API populacji 00:02:53
- 2.4. Wyświetlanie w aplikacji zakresów zależnie od wiadomości zwrotnej z zapytania do API 00:06:23
- 2.5. Generowanie wykresu populacji w danym kraju 00:13:11
- 2.6. Przystosowanie wykresu do wyświetlania kilku państw na jednym wykresie 00:03:10
- 2.7. Poprawki stylistyczne aplikacji 00:08:51
- 2.8. Usuwanie błędów 00:05:35
-
3. Aplikacja 'Kryptowaluty' 01:42:03
- 3.1. Przygotowanie szkieletu strony pod aplikację 'Kryptowaluty' 00:02:49
- 3.2. Przygotowanie modułu odpowiedzialnego za wyszukiwanie kryptowaluty 00:07:51
- 3.3. Napisanie funkcji pobierającej nazwę szukanej monety oraz jej walidacja 00:06:40
- 3.4. Wysyłanie zapytania do API CoinGecko i odczytywanie wiadomości zwrotnej 00:05:32
- 3.5. Przygotowanie struktury kodu pod generowanie wykresu (oś X, zakres dat) 00:06:59
- 3.6. Przygotowanie struktury kodu pod generowanie wykresu (oś Y, kursy walut) 00:06:08
- 3.7. Przygotowanie całego modułu pod generowanie wykresu 00:06:12
- 3.8. Wyświetlanie w aplikacji wartości otrzymanych z odpowiedzi zapytania do API 00:04:27
- 3.9. Walidacja danych w formularzu. Dynamiczne przesyłanie zapytań i odbieranie wyników z użyciem AJAX 00:06:36
- 3.10. Generowanie wykresu na podstawie otrzymanych wcześniej wartości 00:08:27
- 3.11. Przygotowanie modułu pod ranking kryptowalut 00:06:36
- 3.12. Dynamiczne wprowadzanie i walidacja liczby wierszy do wyświetlenia w rankingu 00:03:16
- 3.13. Wysyłanie zapytania o aktualny ranknig tokenów do API 00:05:06
- 3.14. Generowanie tabelki z rankingiem kryptowalut 00:09:00
- 3.15. Poprawki techniczne i wizualne rankingu kryptowalut 00:16:24
-
4. Pomysły na dalszy rozwój aplikacji 00:05:05
Kurs Video "Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci" zobaczysz:
-
w aplikacjach Ebookpoint i Videopoint na Android, iOS, HarmonyOs
-
na systemach Windows, MacOS i innych z dostępem do najnowszej wersji Twojej przeglądarki internetowej
Szczegóły kursu
- Ilość lekcji:
- 33
- Czas trwania:
- 3 godz. 5 min.
- Format:
- Online
- Rok nagrania:
- 2022-10-07
- ISBN :
- 978-83-283-9023-2, 9788328390232
- Data wydania :
- 2022-10-07
- Numer z katalogu:
- 167891
- Do kursu dołączone są materiały dodatkowe, znajdziesz je w Twojej Bibliotece
- Kategorie:
Web development » JavaScript
Web development » Bootstrap
Data Science » Analiza danych
Videopoint - inne kursy
-
Power Apps to platforma stworzona przez Microsoft, umożliwiająca łatwe projektowanie, tworzenie i dostosowywanie aplikacji bez konieczności posiadania głębokiej wiedzy programistycznej. Z użyciem Power Apps można budować niestandardowe aplikacje, które efektywnie wspierają i automatyzują różne procesy w organizacji. Co ciekawe, do tego, by to robić
(79,60 zł najniższa cena z 30 dni)
39.90 zł
199.00 zł (-80%) -
Rust należy do grupy kompilowanych języków programowania ogólnego przeznaczenia. Stworzył go Graydon Hoare, w 2006 roku, z myślą o bezpieczeństwie, współbieżności i praktyczności. Trzy lata później pieczę nad projektem przejęła Mozilla Foundation, by w 2012 roku wypuścić pierwszą numerowaną wersję alfa. Aktualnie, w ramach Fundacji Rust, język jest
(58,05 zł najniższa cena z 30 dni)
39.90 zł
129.00 zł (-69%) -
Według greckiej mitologii Prometeusz był tytanem, twórcą ludzkości – ulepił człowieka z gliny i łez, a następnie wyposażył go w ogień w celu ochrony. Jego imię zapożyczyli dla swojego projektu twórcy darmowej aplikacji służącej do monitorowania systemów i wykrywania ich nieprawidłowości. Przygotowując ją, trafili w dziesiątkę: stopień skomplikowani
(39,90 zł najniższa cena z 30 dni)
39.90 zł
159.00 zł (-75%) -
Oprogramowanie Apache Kafka powstało jako broker wiadomości w LinkedIn. Obecnie pełni funkcję rozproszonego systemu przetwarzania strumieniowego danych, używanego do budowania aplikacji opracowujących duże ilości danych w czasie rzeczywistym. Z zalet tego oprogramowania korzystają firmy na całym świecie – jest kluczowym narzędziem w takich sektorac
(35,60 zł najniższa cena z 30 dni)
39.90 zł
89.00 zł (-55%) -
Rynek pracy w IT zmienia się dynamicznie, w tempie odpowiadającym rozwojowi stosowanej w informatyce technologii. Ponieważ rośnie zakres wiedzy, liczba języków programowania, środowisk programistycznych i rozmaitych rodzajów oprogramowania wspomagającego, mamy obecnie do czynienia ze zjawiskiem specjalizacji. Dziś ze świecą szukać fullstack develop
(76,05 zł najniższa cena z 30 dni)
39.90 zł
169.00 zł (-76%) -
Python, stanowiący czołowy temat tego kursu, jest jednym z najpopularniejszych języków programowania na świecie. Słynie z wszechstronności, czytelności i dużej społeczności użytkowników. W świecie finansów Python zyskał szczególne uznanie ze względu na swoją efektywność w analizie danych, modelowaniu finansowym i handlu algorytmicznym. Znajomość te
(94,15 zł najniższa cena z 30 dni)
39.90 zł
269.00 zł (-85%) -
Wraz z rozwojem sztucznej inteligencji i modeli językowych – a niewątpliwie żyjemy w czasach eksplozji AI – rośnie znaczenie osób będących w stanie w praktyce sięgać po zasoby, jakie oferuje nam ta nowoczesna technologia. Okazuje się, że pośród rozmaitych innych umiejętności potrafi ona także programować i analizować dane, przenika również na obsza
(39,90 zł najniższa cena z 30 dni)
39.90 zł
169.00 zł (-76%) -
Jeśli zastanawiasz się nad karierą programisty lub już się przygotowujesz do tego, by zostać koderem, poważnie rozważ naukę języka C++. Zaprojektowany w latach 80. XX wieku przez duńskiego informatyka Bjarne Stroustrupa C++ rozszerza język C o obiektowe mechanizmy abstrakcji danych i silną statyczną kontrolę typów. Od samego początku pomyślany jako
(45,15 zł najniższa cena z 30 dni)
39.90 zł
129.00 zł (-69%) -
Czy znany Ci jest termin pentesting? Jeśli nie, oto jego krótka definicja: pentestingiem nazywamy proces badawczy mający na celu identyfikację słabych punktów w systemach komputerowych, sieciach i aplikacjach. W ostatnim czasie zapotrzebowanie na specjalistów od pentestingu i etycznego hakingu, pozwalającego używać technik hakerów do przetestowania
(84,50 zł najniższa cena z 30 dni)
39.90 zł
169.00 zł (-76%) -
Dane to potęga. Kto ma do nich dostęp, kto potrafi je zbierać, przetwarzać i sięgać po nie w momentach, w których jego biznes potrzebuje pewnych odpowiedzi opartych na faktach – ten zyskuje ogromną przewagą konkurencyjną. W dzisiejszej cyfrowej rzeczywistości, kiedy tak wiele procesów biznesowych dzieje się w sieci, jesteśmy wprost zalewani danymi.
(87,60 zł najniższa cena z 30 dni)
39.90 zł
219.00 zł (-82%)
Dzięki opcji "Druk na żądanie" do sprzedaży wracają tytuły Grupy Helion, które cieszyły sie dużym zainteresowaniem, a których nakład został wyprzedany.
Dla naszych Czytelników wydrukowaliśmy dodatkową pulę egzemplarzy w technice druku cyfrowego.
Co powinieneś wiedzieć o usłudze "Druk na żądanie":
- usługa obejmuje tylko widoczną poniżej listę tytułów, którą na bieżąco aktualizujemy;
- cena książki może być wyższa od początkowej ceny detalicznej, co jest spowodowane kosztami druku cyfrowego (wyższymi niż koszty tradycyjnego druku offsetowego). Obowiązująca cena jest zawsze podawana na stronie WWW książki;
- zawartość książki wraz z dodatkami (płyta CD, DVD) odpowiada jej pierwotnemu wydaniu i jest w pełni komplementarna;
- usługa nie obejmuje książek w kolorze.
Masz pytanie o konkretny tytuł? Napisz do nas:
Kurs video
Oceny i opinie klientów: Web scraping. Kurs video. Zautomatyzowane pozyskiwanie danych z sieci Jan Mager (1) Weryfikacja opinii następuje na podstawie historii zamowień na koncie Użytkownika umiejszczającego opinię. Użytkownik mógł otrzymać punkty za opublikowanie opinii uprawniającej do uzyskania rabatu w ramach Programu Kadr.
(0)
(0)
(0)
(0)
(1)
(0)