Galaxus API Scraper Galaxus online shop scraper. Extracts product data from any Galaxus page. ## Supported sites - galaxus.de - galaxus.ch - galaxus.fr - galaxus.it - galaxus.at ## Supported page types - Home page - e.g. https://www.galaxus.de (scrapes full site) - Search page - e.g. https://www.galaxus.de/de/search?q=book - Category page - e.g. https://www.galaxus.de/de/s14/sector/wohnen-14 - Product page - e.g. https://www.galaxus.de/de/s14/product/hermia-arney-24-stueck-geschirrset-17748807 ## Input ### Start URLs A list of URLs to be deeply crawled. Default value: js "startUrls": [ { "url": "https://www.galaxus.at/de/s1/producttype/ereader-1138" } ] ### Add product details If true, the scraper will make an additional request for each product to download more product details (significantly increases scraping time and cost). Default value: js "addDetails": false, ### Deduplicate results If true, only products with a unique ID will be saved. Default value: js "deduplicate": false, ### Limit bypassing Sets how the API limit of 3000 results per category/search will be bypassed. It has 3 possible values: - none - the limit will not be bypassed (max 3k results per category) - filters - product filters will be used (can scrape whole site) - categories - product categories will be used (some products missing) Default value: js "limitBypass": 'filters', ### Maximum filters How many filter values can be used per page. Higher values yiled more results, lower values make crawling faster. Default value: js "maxFilters": 200, ### Process output function Function for processing the raw API output to any required format. Receives a context object, containig following attributes: - item - the raw API output item - baseUrl - base URL of the shop, e.g. "https://www.galaxus.de" - categories - category list collected while crawling, e.g. ["Wohnen", "Textilien"] - formatDefault - default formatting function Default value: js "processOutputFunction" = `async ({item, baseUrl, categories, formatDefault}) => { return formatDefault(item); }` ### Proxy configuration The usual Apify proxy configuration. Default value: js "proxyConfiguration": { "useApifyProxy": true } ## Usage costs Renting the actor is $30/month, with 30 days free trial. Average usage cost is about $0.1 for 10000 results. Please note that the scraper might not extract all products. Galaxus API will only export 3000 products per category (or search). This is circumvented by splitting the category to subcategories, or using filters. This does help a lot, but we cannot guarantee receiving a full Galaxus database. ## Result examples Using the default formatting function, without the additional details, example result might look as follows: js { "id": 16644686, "url": "https://www.galaxus.de/product/16644686", "name": "iPad 2021 (9. Gen)", "properties": "10.20 \", 64 GB, Space Grey", "type": "Tablet", "brand": "Apple", "rating": 4.82, "ratingCount": 736, "images": [ "https://static.digitecgalaxus.ch/Files/4/8/9/1/8/3/3/7/iPad_10.2_inch_Wi-Fi_Space_Gray_PDP_Image_Position-1__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/4/8/9/1/8/3/3/8/iPad_10.2_inch_Wi-Fi_Space_Gray_PDP_Image_Position-2__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/4/8/9/1/8/3/3/9/iPad_10.2_inch_Wi-Fi_Space_Gray_PDP_Image_Position-3__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/4/8/9/1/8/3/4/0/iPad_10.2_inch_Wi-Fi_Space_Gray_PDP_Image_Position-4__WWEN.jpg" ], "price": 369, "currency": "EUR" } This is an example result with included additional details: js { "id": 22730621, "url": "https://www.galaxus.de/de/s1/product/apple-ipad-pro-2022-4-gen-11-128-gb-space-grey-tablet-22730621", "name": "iPad Pro 2022 (4. Gen)", "properties": "11 \", 128 GB, Space Grey", "type": "Tablet", "brand": "Apple", "rating": 5, "ratingCount": 11, "images": [ "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/4/iPad_Pro_Wi-Fi_11_in_4th_generation_Space_Gray_PDP_Image_Position-1a__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/5/iPad_Pro_Wi-Fi_11_in_4th_generation_Space_Gray_PDP_Image_Position-1b__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/6/iPad_Pro_Wi-Fi_11_in_4th_generation_Space_Gray_PDP_Image_Position-2__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/3/8/iPad_Pro_WI-FI_11_in_4th_generation_PDP_Image_Position-3__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/3/9/iPad_Pro_WI-FI_11_in_4th_generation_PDP_Image_Position-4__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/0/iPad_Pro_WI-FI_11_in_4th_generation_PDP_Image_Position-5__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/1/iPad_Pro_Wi-Fi_11_in_4th_generation_PDP_Image_Position-6__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/2/iPad_Pro_Wi-Fi_11_in_4th_generation_PDP_Image_Position-7__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/3/iPad_Pro_WI-FI_11_in_4th_generation_PDP_Image_Position-8__WWEN.jpg", "https://static.digitecgalaxus.ch/Files/7/0/0/1/3/2/4/7/iPad_Pro_Wi-Fi_11_in_4th_generation_Space_Gray_PDP_Image_Position-9__WWEN.jpg" ], "ranking": 18, "description": "iPad Pro. Mit unglaublicher Performance, superschnellen drahtlosen Verbindungen und dem Apple Pencil Erlebnis der nächsten Generation. Und dazu mit leistungsstarken neuen Features für Produktivität und Zusammenarbeit in iPadOS 16. Das iPad Pro ist das ultimative iPad Erlebnis.\n- Brillantes 11\" Liquid Retina Display1 mit ProMotion, True Tone und grossem P3 Farbraum\n- M2 Chip mit 8 Core CPU und 10 Core GPU\n- 12 MP Weitwinkel-Kamera, 10 MP Ultraweitwinkel-Rückkamera und LiDAR Scanner für faszinierendes AR\n- 12 MP Ultraweitwinkel-Frontkamera mit Folgemodus\n- Superschnelles WLAN 6E und 5G Mobilfunk2 \n- USB C Anschluss mit Unterstützung für Thunderbolt / USB 4\n- Face ID für sicheres Authentifizieren und Apple Pay\n- Mach mehr mit Batterie für den ganzen Tag3\n- Kompatibel mit Apple Pencil (2. Generation), Magic Keyboard und Smart Keyboard Folio\n- Unterstützt die Apple Pencil Schwebefunktion für präziseres Markieren und Skizzieren\n- Mit iPadOS 16 kann dein iPad noch mehr – mit leistungsstarken neuen Features für Produktivität und Zusammenarbeit\n- In Verbindung bleiben mit ultraschnellem WLAN 6E\n\nRechtliche Hinweise\nZubehör separat erhältlich und Änderungen an der Verfügbarkeit vorbehalten. Die Kompatibilität variiert je nach Generation. Apps sind im App Store erhältlich. Änderungen an der Titelverfügbarkeit vorbehalten. Software von anderen Anbietern ist separat erhältlich.\n- Das Display hat gerundete Ecken. Als Rechteck gemessen hat das Display eine Diagonale von 11\" (27,96 cm) beim 11\" iPad Pro. Der tatsächlich sichtbare Displaybereich ist kleiner.\n- Die Batterielaufzeit variiert abhängig von Verwendung und Konfiguration. Weitere Infos unter apple.com/chde/batteries.\n\nTechnische Daten\nEine vollständige Liste gibt es auf apple.com/chde/ipad-pro/specs.", "specifications": { "Die wichtigsten Spezifikationen auf einen Blick": { "Betriebssystem": "iPadOS", "Arbeitsspeicher": "8 GB", "Gewicht": "466 g", "Max. Bildauflösung": "2388 x 1668 Pixels", "Artikelnummer": "22730621" }, "Allgemeine Informationen": { "Hersteller": "Apple", "Produkttyp": "Tablet", "Herstellernr.": "MNXD3TY/A", "Release-Datum": "26.10.2022", "Verkaufsrang in Produkttyp Tablet": "18 von 755", "Externe Links": "Herstellerseite (de)" }, "Tablet Eigenschaften": { "Farbgruppe": "Grau", "Genaue Farbbezeichnung": "Space Grey", "Zielgruppe": "Erwachsene", "Bedienung": [ "Digitizer Pen", "Touchscreen" ], "Touch": "Multi-Touch", "Tablet Ausstattung": [ "Bluetooth", "Integrierte Lautsprecher", "Integriertes Mikrofon", "WLAN" ], "Integrierte Lautsprecher": "Ja", "Anzahl Lautsprecher": "4 x", "Sensoren": [ "Barometer", "Beschleunigungssensor", "Gyroskop", "Umgebungslichtsensor" ], "Entsperrungsart": "Face Unlock" }, "Betriebssystem": { "Betriebssystem": "iPadOS", "Betriebssystem Version": "iPadOS 16" }, "Display Eigenschaften": { "Max. Bildauflösung": "2388 x 1668 Pixels", "Bildschirmdiagonale (Zoll)": "11\"", "Bildschirmtechnologie": "IPS", "Punktdichte": "264 dpi" }, "Konnektivität": { "Konnektivität": [ "Bluetooth", "USB", "WLAN" ], "WLAN Standard": "Wi-Fi 6 / 802.11ax", "Bluetooth Version": "5.3" }, "Prozessor": { "Mobiler Prozessor": "Apple M2", "Anzahl Prozessorkerne": "8 -Core" }, "Kamera Eigenschaften": { "Frontkamera Auflösung": "12 Mpx", "Kamera Auflösung": "12 Mpx", "Kamera Funktionen": [ "Autofokus", "Bildstabilisierung", "Geotagging", "Mikrofon", "Zoomfunktion" ], "Max. Videoauflösung Frontkamera": "1080 x 720 Pixels", "Max. Videoauflösung Rückkamera": "1080 x 720 Pixels" }, "Datenspeicher Eigenschaften": { "Arbeitsspeicher": "8 GB", "Speicherkapazität": "128 GB", "Datenträgertyp": "SSD" }, "Schnittstelle": { "Steckertyp": "USB-C", "Zusatzanschluss": [ "DisplayPort", "HDMI" ] }, "Batterie / Akku Eigenschaften": { "Batterie- / Akkutyp": "LiPo", "Akkulaufzeit": "10 h" }, "Smart Home Funktionen": { "Smart Home Ökosystem": "Apple Siri" }, "Nachhaltigkeit": { "Label": [ "Energy Star", "SBTI" ], "Nachhaltigkeit": [ "Energieeffiziente Nutzung", "Nachhaltige Produktion + Rohstoffe" ] }, "Lieferumfang": { "Lieferumfang": [ "Power Adapter", "USB-C Ladekabel" ] }, "Produktdimensionen": { "Länge": "24.76 cm", "Breite": "17.85 cm", "Höhe": "0.59 cm", "Gewicht": "466 g" }, "Verpackungsdimensionen": { "Länge": "26.12 cm", "Breite": "19.24 cm", "Höhe": "5.23 cm", "Gewicht": "888 g" } } } ## Contact Please report any bugs or feature requests to: - e-mail: cermak.petr6@gmail.com - discord: Epoxum#2755