Web scraping je akt extrahovania údajov, informácií alebo obrázkov z webovej stránky pomocou automatizovanej metódy. Predstavte si^(Think) to ako kopírovanie a prilepenie v plnom automatickom režime.

Buď napíšeme, alebo použijeme aplikáciu, aby sme prešli na webové stránky, ktoré chceme, a vytvorili kópiu konkrétnych vecí, ktoré z týchto webových stránok chceme. Je to oveľa presnejšie ako sťahovanie celej webovej stránky^{(downloading an entire website)} .

Ako každý nástroj, aj zoškrabovanie webu sa dá použiť na dobro alebo zlo. Niektoré z lepších dôvodov na zoškrabovanie webových stránok by bolo ich hodnotenie vo vyhľadávači na základe ich obsahu, porovnávania cien alebo monitorovania informácií o akciovom trhu. Môžete ho dokonca použiť ako určitý druh výskumného nástroja.

Ako môžem zoškrabať webové stránky pomocou Excelu^(Excel) ?

Verte či nie, Excel má schopnosť extrahovať dáta z webových stránok už dlho, minimálne od Excelu 2003^{(Excel 2003)} . Ide len o to, že zoškrabovanie webu je niečo, na čo väčšina ľudí nemyslí, nehovoriac o tom, že by na túto prácu použili tabuľkový procesor. Ale je to prekvapivo jednoduché a výkonné. Poďme sa naučiť, ako sa to robí, vytvorením zbierky klávesových skratiek balíka Microsoft Office .^{(Microsoft Office)}

Nájdite stránky, ktoré chcete zoškrabať

Prvá vec, ktorú urobíme, je nájsť konkrétne webové stránky, z ktorých chceme získať informácie. Poďme k zdroju a hľadajme na https://support.office.com/ . Budeme používať hľadaný výraz „často používané skratky“. Môžeme to spresniť použitím názvu konkrétnej aplikácie, napríklad Outlook , Excel , Word atď. Môže byť dobrý nápad uložiť si stránku s výsledkami ako záložku, aby sme sa tam mohli jednoducho vrátiť.

Kliknite^(Click) na výsledok vyhľadávania „Klávesové skratky v Exceli^(Excel) pre Windows“. Na tejto stránke nájdite zoznam verzií Excelu^(Excel) a kliknite na Novšie verzie^{(Newer Versions)} . Teraz pracujeme s najnovšími a najlepšími.

Mohli by sme sa vrátiť na našu stránku s výsledkami vyhľadávania a otvoriť výsledky pre všetky ostatné aplikácie balíka Office^(Office) na ich vlastných kartách a uložiť ich medzi záložky. Je to dobrý nápad, dokonca aj pre toto cvičenie. Tu by sa väčšina ľudí zastavila pri zbieraní skratiek Office , ale nie my. ^(Office)Vložíme ich do Excelu^(Excel) , aby sme s nimi mohli robiť, čo chceme, kedykoľvek budeme chcieť.

Otvorte Excel a Scrape

Otvorte Excel a začnite nový zošit. Uložte zošit ako skratky balíka Office^{(Office Shortcuts)} . Ak máte OneDrive, uložte si ho tam, aby funkcia automatického ukladania fungovala.^{(AutoSave )}

Po uložení zošita kliknite na kartu Údaje .^(Data)

Na páse s nástrojmi na karte Údaje^(Data) kliknite na položku Z webu^{(From Web)} .

Otvorí sa okno sprievodcu Z webu . ^{(From Web )}Tu umiestnime webovú adresu alebo URL webovej stránky, z ktorej chceme zoškrabať údaje. Prepnite sa do webového prehliadača a skopírujte^(copy) URL.

Prilepte adresu URL do poľa adresy URL^(URL) v sprievodcovi z webu . ^{(From Web)}Mohli by sme sa rozhodnúť použiť to v základnom^(Basic) alebo rozšírenom^(Advanced) režime. Pokročilý^(Advanced) režim nám poskytuje oveľa viac možností, ako pristupovať k údajom z webovej stránky. Na toto cvičenie potrebujeme iba Základný režim. Kliknite ^(Click) na tlačidlo OK^(OK) .

Excel sa teraz pokúsi pripojiť k webovej lokalite. Môže to trvať niekoľko sekúnd. Ak áno, zobrazí sa nám okno postupu.

Otvorí sa okno Navigátor^(Navigator) a naľavo sa zobrazí zoznam tabuliek z webovej lokality. Keď jeden vyberieme, vpravo sa nám zobrazí náhľad tabuľky. Vyberieme tabuľku Často používané skratky .^{(Frequently used shortcuts )}

Ak sa potrebujeme poobzerať po tabuľke, ktorú chceme, môžeme kliknúť na kartu Web View a zobraziť skutočnú webovú stránku. ^{(Web View)}Keď ho nájdeme, môžeme naň kliknúť a vyberie sa na import.

Teraz klikneme na tlačidlo Načítať^(Load) v spodnej časti tohto okna. Existujú aj iné možnosti, ktoré by sme si mohli vybrať, ktoré sú zložitejšie a presahujú rámec nášho prvého škrabania. Len si uvedomte, že sú tam. Možnosti webového zoškrabovania Excelu sú veľmi výkonné.

Webová tabuľka sa po niekoľkých sekundách načíta do Excelu . ^(Excel)Údaje uvidíme vľavo, kde na obrázku nižšie je číslo 1 . Číslo 2 zvýrazňuje dopyt^(Query) použitý na získanie údajov z webovej lokality. Keď máme v zošite viacero dotazov, tu vyberieme ten, ktorý potrebujeme použiť.

Všimnite si^(Notice) , že údaje prichádzajú do tabuľky ako tabuľka programu Excel^(Excel) . Už je to nastavené tak, aby sme mohli dáta filtrovať alebo triediť.

Tento proces môžeme zopakovať pre všetky ostatné webové stránky, ktoré majú požadované skratky balíka Office pre ^(Office)Outlook , Word , Access , PowerPoint a akúkoľvek inú aplikáciu balíka Office^(Office) .

Udržiavanie zoškrabaných údajov aktuálnych^{(Scraped Data Current)} v Exceli^(Excel)

Ako bonus pre vás sa naučíme, ako udržiavať naše zoškrabané údaje v Exceli^(Excel) čerstvé . Je to skvelý spôsob, ako ilustrovať, aký silný je Excel na zoškrabovanie údajov. Aj v tomto prípade robíme len najzákladnejšie zoškrabovanie, ktoré Excel dokáže.

Pre tento príklad použite webovú stránku s informáciami o akciách, ako je https://www.cnbc.com/stocks/ .

Prejdite si to, čo sme urobili predtým, a skopírujte a prilepte novú adresu URL^(URL) z panela s adresou.

Dostanete sa do okna Navigátora^(Navigator) a uvidíte dostupné tabuľky. Vyberme hlavné americké akciové indexy^{(Major U.S. Stock Indices)} .

Po zoškrabaní údajov sa nám zobrazí nasledujúca tabuľka.

Vpravo vidíme dopyt na hlavné americké akciové indexy^{(Major U.S. Stock Indexes)} . Vyberte^(Select) to tak, aby bolo zvýraznené. Uistite^(Make) sa, že sme na karte Nástroje tabuľky^{(Table Tools)} a v oblasti Návrh^(Design) . Potom kliknite na šípku nadol pod položkou Obnoviť^(Refresh) . Potom kliknite na Vlastnosti pripojenia^{(Connection Properties)} .

V okne Vlastnosti dotazu na karte ^{(Query Properties )}Použitie^(Usage) môžeme ovládať, ako sa tieto informácie obnovujú. Môžeme nastaviť konkrétne časové obdobie na obnovenie alebo obnovenie pri ďalšom otvorení zošita, na obnovenie na pozadí alebo akúkoľvek kombináciu týchto možností. Keď si vyberieme, čo potrebujeme, kliknutím na OK zatvorte okno a pokračujte.

To je všetko! Teraz môžete z tabuľky programu Excel^(Excel) sledovať ceny akcií, športové výsledky alebo akékoľvek iné údaje, ktoré sa často menia . Ak ovládate rovnice a funkcie Excelu^{(Excel equations and functions)} , môžete s údajmi robiť takmer všetko, čo chcete.

Možno sa pokúste identifikovať akciové trendy, prevádzkovať fantastický športový bazén v práci alebo možno len sledovať počasie. Kto vie? Vaša predstavivosť a údaje dostupné na internete^(Internet) sú jedinými obmedzeniami.

Use Excel as a Tool to Copy Data from the Web

Wеb scraping is the act of extracting data, information, or images from a website using an automated method. Think of it as copy and paѕte on full automatic.

We either write or use an app to go to the websites we want it to and make a copy of the specific things we want from those websites. It’s much more precise than downloading an entire website.

Like any tool, web scraping can be used for good or evil. Some of the better reasons for scraping websites would be ranking it in a search engine based on its content, price comparison shopping, or monitoring stock market information. You might even use it as a research tool of sorts.

How Can I Scrape Websites with Excel?

Believe it or not, Excel has had the ability to extract data from websites for a long time, at least since Excel 2003. It’s just that web scraping is something most people don’t think of, let alone think of using a spreadsheet program to do the job. But it’s surprisingly easy, and powerful. Let’s learn how it’s done by making a collection of Microsoft Office keyboard shortcuts.

Find the Sites You Want to Scrape

The first thing we’re going to do is find the specific web pages from which we want to get information. Let’s go to the source and search at https://support.office.com/. We’re going to use the search term “frequently used shortcuts”. We can make it more specific by using the name of the specific app, like Outlook, Excel, Word, and so on. It may be a good idea to bookmark the results page so we can easily get back there.

Click on the search result, “Keyboard shortcuts in Excel for Windows”. Once on that page, find the list of Excel versions and click on Newer Versions. Now we’re working with the latest and greatest.

We could go back to our search results page and open the results for all the other Office apps in their own tabs and bookmark them. It’s a good idea, even for this exercise. This is where most people would stop in collecting Office shortcuts, but not us. We’re going to put them in Excel so we can do whatever we want with them, whenever we want.

Open Excel and Scrape

Open Excel and start a new workbook. Save the workbook as Office Shortcuts. If you have OneDrive, save it there so the AutoSave feature will work.

Once the workbook is saved, click on the Data tab.

In the ribbon of the Data tab, click on From Web.

The From Web wizard window will open. This is where we put the web address or URL of the website from which we want to scrape data. Switch to your web browser and copy the URL.

Paste the URL in to the URL field of the From Web wizard. We could choose to use this in Basic or Advanced mode. The Advanced mode gives us a lot more options on how to access the data from the website. For this exercise, we only need Basic mode. Click OK.

Excel will now attempt to connect to the website. This may take a few seconds. We’ll see a progress window, if it does.

The Navigator window will open, and we’ll see a list of tables from the website on the left. When we select one, we’ll see a table preview on the right. Let’s select the Frequently used shortcuts table.

We can click on the Web View tab to see the actual website, if we need to look around for the table we want. When we find it, we can click on it and it will be selected for import.

Now, we click on the Load button at the bottom of this window. There are other options we could choose, which are more complex and beyond the scope of doing our first scrape. Just be aware that they are there. Excel’s web scraping capabilities are very powerful.

The web table will be loaded in Excel after a few seconds. We’ll see the data on the left, where the number 1 is in the picture below. Number 2 highlights the Query used to get the data from the website. When we have multiple queries in a work book, this is where we select the one we need to use.

Notice that the data comes into the spreadsheet as an Excel table. It’s already set up for us to be able to filter or sort the data.

We can repeat this process for all the other web pages that have the Office shortcuts that we want for Outlook, Word, Access, PowerPoint, and any other Office app.

Keeping Scraped Data Current in Excel

As a bonus for you, we’re going to learn how to keep our scraped data fresh in Excel. This is a great way to illustrate just how powerful Excel is for data scraping. Even with this, we’re only doing the most basic scraping that Excel can do.

For this example, let’s use a stock information web page like https://www.cnbc.com/stocks/.

Go through what we did before and copy and paste the new URL from the address bar.

You’ll get to the Navigator window and see the tables available. Let’s select the Major U.S. Stock Indices.

Once the data is scraped we’ll see the following spreadsheet.

On the right, we see the query for Major U.S. Stock Indexes. Select that so it is highlighted. Make sure we’re in the Table Tools tab and in the Design area. Then click on the down arrow under Refresh. Then click on Connection Properties.

In the Query Properties window, under the Usage tab, we can control how this information refreshes. We can set a specific time period to refresh, or to refresh when we open the workbook the next time, or to refresh in the background, or any combination of these. Once we choose what we need, click on OK to close the window and continue.

That’s it! Now you can track stock prices, sports scores, or any other data that changes frequently from an Excel spreadsheet. If you’re good with Excel equations and functions, you can do almost anything you want with the data.

Maybe try to identify stock trends, run a fantasy sports pool at work, or maybe just keep track of the weather. Who knows? Your imagination and the data available on the Internet, are the only limits.

Related posts

• Použite novú funkciu Excel Mobile „Vložiť údaje z obrázku“.

• Použite súhrnné funkcie na zhrnutie údajov v Exceli

• Použite Excel na zistenie efektívnej úrokovej sadzby z nominálnej úrokovej sadzby

• Zmapovanie údajov v Exceli

• Ako filtrovať údaje v Exceli

• Ako sledovať zmeny v Exceli

• Ako skryť hárky, bunky, stĺpce a vzorce v Exceli

• Ako vytvoriť histogram v Exceli

• Ako odstrániť, prelomiť alebo prelomiť zabudnuté heslo Excel XLS

• Ako používať funkcie automatického obnovenia a automatického zálohovania Excelu

• Ako porozumieť analýze What-If v programe Microsoft Excel

• Ako vytvoriť štítky v programe Word z tabuľky programu Excel

• Ako vytvoriť a používať automatický text v programe Microsoft Word

• Ako vytvoriť jednoduchý graf alebo graf v Exceli

• Formátovanie buniek pomocou podmieneného formátovania v Exceli

• Ako zaznamenať makro v Exceli

• Migrujte údaje z MS Access do databázy SQL Server

• Pridajte trendovú čiaru lineárnej regresie do bodového grafu Excel

• Ako otvoriť viacero inštancií Excelu

• Ako bezpečne chrániť heslom súbor programu Excel