Simple dom werkt niet

Overzicht

Sponsored by: Vacatures door Monsterboard

Data Scientist Senior/Medior

Ben jij die ervaren en ondernemende Data Scientist die klaar is voor ‘the NEXT step’? Dé adviseur en expert in het toepassen van geavanceerde data analyse en -visualisatie voor het oplossen van complexe business vraagstukken? CGI heeft een vacature voor de functie van Data Scientist Senior/Medior Groningen Wat ga je doen als Data Scientist? Als Data Scientist adviseer en begeleid je onze klanten in het toepassen van geavanceerde data analyse en visualisatie om inzicht in kritische bedrijfsprocessen te optimaliseren. In deze functie ben je vaak een pionier en ben je het eerste aanspreekpunt voor de klant. Aantoonbaar betere bedrijfsresultaten en

Bekijk vacature »

Start met het Java IT-traineeship en word junior p

Wat ga je doen? IT-traineeship bij YoungCapital NEXT In ons tweejarig Java IT-traineeship word jij opgeleid tot gecertificeerd Java programmeur mét praktijkervaring. Je start met een fulltime opleiding van zeven weken, gegeven door programmeurs uit de praktijk. Onderwerpen die worden behandeld zijn o.a. Java Fundamentals, Spring MVC, Scrum, databases, JavaScript en testing. Naast de theoretische verdieping word je individueel uitgedaagd met praktijkopdrachten. De opleiding sluit je af met een eindproduct en het behalen van het Oracle Certified Associate (1Z0-808)- en Scrum-certificaat. Jouw start bij de opdrachtgever Na de opleiding ga je aan de slag bij één van onze opdrachtgevers in

Bekijk vacature »

Oracle Middleware Developer

Wat je gaat doen: Wij zijn op zoek naar een Oracle Middleware Developer met kennis van/ervaring met onder andere SOA Suite 10G en/of SOA Suite 11G, WebLogic, BPEL Orchestration, Java, SOAP. Je bent bekend met de integratie laag gebaseerd op Oracle SOA Suite 10G. Als Middleware developer ben je verantwoordelijk voor de ontwikkeling van integratie tussen de diverse applicaties in het landschap, en de communicatie tussen de klant en andere stakeholders. Je werkt samen met het applicatie team, zoals functioneel ontwerpers en andere ontwikkelaars om de oplossing verder te ontwikkelen en te implementeren. Je collega’s werken onder andere met technieken

Bekijk vacature »

Cloud Engineer

Wil je graag werken met de nieuwste technieken in een omgeving van onderzoek en digitaal erfgoed? Dat komt mooi uit, je kan als Cloud Engineer je kennis en ervaring bij ons inzetten voor het prestigieuze CLARIAH project. CLARIAH is een groot nationaal project dat een digitale infrastructuur ontwerpt om grote hoeveelheden data en software uit verschillende geesteswetenschappelijke disciplines aan elkaar te koppelen en digitaal doorzoekbaar te maken. Wat ga je bij ons doen? Als onze Cloud Engineer voor het CLARIAH project houd je je bezig met het ontwerp en de realisatie van een cloudomgeving voor tekst onderzoek. Jij gaat cloudtechnologie

Bekijk vacature »

Vacancy C++ Developer @Arrow Electronics

vacancy C++ developer, warehouse management system (WMS), conveyors and robots Location Venlo Vacancy @Arrow Electronics Arrow Electronics is a global provider of products, services and solutions to industrial and commercial users of electronic components and enterprise computing solutions. Arrow is a global company with 20.000 employees worldwide and over 900 of them are in Venlo. The two Distribution Logistic Centers in Venlo supply 40.000 customers within Europe and ship 6.000 packages daily. Arrow Electronics will be expanding their business with a (brand) new, automated facility in Venlo to house a new state-of-the-art conveyer system. For the further development of the

Bekijk vacature »

Ervaren Javascript Front-end Ontwikkelaar

Word jij de nieuwe Ervaren Javascript Front-end ontwikkelaar bij Impulse Info Systems in Twente? Bekijk dan deze vacature! Functie omschrijving Enkele taken: het omzetten van ontwerpen in perfect werkende front-end code analyseren hoe we gebruikerswensen het beste kunnen implementeren het ontwikkelen van intuïtieve oplossingen testen van je eigen oplossingen en die van andere collega’s Functievereisten Dit vragen wij van jou: beschikken over een afgeronde hbo- of wo-opleiding, bij voorkeur richting informatica meerdere jaren ervaring met ReactJS of vergelijkbare frameworks , HTML en CSS bij voorkeur kennis van responsive webdevelopment, unittesten en GIT kennis en ervaring met UX-, UI- en web-design

Bekijk vacature »

Mobile Web Developer

Apps om te betalen met je vingerafdruk, de rekening in de bar te delen of je huiskamer een sfeer kleurtje te geven met licht! Wil jij Mobile Apps realiseren die mensen echt raken? Apps maken die het leven van ons als gebruikers vereenvoudigen? Wij stellen onszelf ten doel dat we op elke smartphone in NL een App van onze hand kunnen aanwijzen. En jij? Wil jij dat soort gave projecten ook doen bij de Nederlandse topbedrijven? Impact met Apps Bij Sogeti Mobile zitten we super dicht op de huid van de gebruiker. We leveren gebruiksvriendelijke oplossingen op jouw favoriete kanaal.

Bekijk vacature »

PHP met minimaal 6 maanden ervaring! incl. Framewo

Functieomschrijving Ter uitbreiding is mijn klant op zoek naar een PHP ontwikkelaar die betrokken wordt bij de bouw van innovatieve software, voor zowel grote alsmede kleine klanten. Je komt te werken binnen een team van enthousiaste collega's waarmee je samen aan gave projecten gaat werken. De sfeer is hier informeel en open, net als de source! Ze werken hier met verschillende frameworks binnen PHP. Hiebij kun je denken aan; Zend , Symfony, YII, Laravel of Codelgniter. Daarnaast zoeken ze iemand die ook graag met systeembeheer aan de slag gaat. Dit zullen ze je bij deze organisatie gewoon aanleren. Het is

Bekijk vacature »

AngularJS Developer

Wat je gaat doen: Of beter nog, wat wil jij doen? Bij DPA GEOS werken onze consultants als Developer in Agile teams bij onze klanten en zijn ze verantwoordelijk voor de grotere webapplicaties. Wil jij dit ook, want we zijn op zoek naar enthousiaste Developers om ons development team te versterken. Je bent creatief en draagt met je enthousiasme positief bij aan de teamgeest binnen een projectteam. Je gaat webapplicaties maken voor verschillende opdrachtgevers in jouw regio. Je bent een professional die het IT-vak serieus neemt en kwaliteit levert. Je leert snel vanwege je diepgaande interesse in het applicatie landschap.

Bekijk vacature »

C# Full Stack Developer

Functie: Full-Stack Developer Locatie: Westland Salaris: € 4.250,- bruto per maand maximaal Dienstverband: Werving & Selectie Werkweek: 40 uur per week Functie omschrijving Als Full-Stack Developer ben je met een team bezig met het verbeteren van bestaande en nieuwe applicaties welke gebruikt worden binnen de land- en tuinbouw (denk aan energiezuinige klimaatcomputers, waterbesparende innovaties of andere geavanceerde oplossingen). Daarnaast ontwikkel je verschillende services en help je de productmanager met het verbeteren van de kwaliteit van de producten van de opdrachtgever. Je taken zijn: Definiëren en implementeren van innovatieve stappen; Doorontwikkelen en opzetten van bestaande en nieuwe Azure Cloud services; Aanbrengen

Bekijk vacature »

Android Developer

Your Role Do you like Nougat, Oreo, or Pie? If so, you know what we’re talking about. We like the baked goods, too! We are looking for an Android Developer to join our team in Amsterdam. Your role would be to work on several projects with different clients ranging from enterprise-level organizations to start-ups. We expect you to push the boundaries in mobile technology and to work with passion on high-end integration solutions. At agap2 we strive to provide you, as a consultant, with challenging projects that are compatible with your knowledge, skills, and ambition. Projects are carried out both

Bekijk vacature »

Ervaren .net ontwikkelaar

Gezocht, ervaren .NET ontwikkelaar bij Idella (onderdeel van de VISMA-groep) Omdat we succesvol zijn en groeien, zijn we op zoek naar ervaren .NET ontwikkelaars voor ons ontwikkelteam. Wat ga je doen als .NET ontwikkelaar? Als .NET ontwikkelaar werk je in Scrum (Agile) teams aan moderne toepassingen voor interne producten van Idella, zoals bijvoorbeeld de software achter “Evi van Lanschot”. Je doet dit op basis van Microsoft .Net (Core), ASP.NET MVC, SQL Server, Web API, WCF, Angular en C#. Uiteraard houd je actief je kennis op peil over hedendaagse technieken en pas je deze kennis direct toe in je werkomgeving. Standplaats

Bekijk vacature »

Senior SAP ABAP/Netweaver developer

Wat je gaat doen: Wij zoeken voor de regio Amsterdam een Senior SAP ABAP/Netweaver developer. Is het jouw passie om applicaties te ontwikkelen en ben je specialist op het gebied van SAP Netweaver ontwikkeltools? Ontdek dan hier wat DPA GEOS je kan bieden. Als Senior SAP ABAP/Netweaver developer ben je verantwoordelijk voor de uitvoering van software ontwikkelingsprojecten bij klanten. Afhankelijk van je kennis, ambitie en de opdracht voer je één of meer van de volgende werkzaamheden uit. Je ontwerpt oplossingen, stelt de ontwerpen op, bouwt, test en documenteert nieuwe (soms grote en complexe) programma's op het gebied van SAP. Naast

Bekijk vacature »

Database Administrator

Afdeling: De database administrator is werkzaam op de ICT afdeling. Deze afdeling houdt zich bezig met programmeren, systeembeheer en heeft een helpdesk. De afdeling ondersteunt de interne klant met betrouwbare oplossingen. De database administrator heeft kennis van SQL en houdt zich voornamelijk bezig met het CIS systeem (Cleve Informatie Systeem). De database administrator rapporteert aan het management. De functie: Het vastleggen van tabellen en condities in SQL. Je vervaardigt templates in Word en maakt views voor het weergeven van gegevens. Daarnaast beheer je diverse applicaties en maakt koppelingen met o.a. portbase, exact, agenten en klanten. Je werkt met XML import/export.

Bekijk vacature »

.NET webdeveloper gezocht, Rotterdam (C#, Angular,

Voor een relatief kleine organisatie, gelegen in het centrum van Rotterdam, zoeken we momenteel een medior of senior.NET developer. De organisatie richt zich op de ontwikkeling en verkoop van planningssoftware en tijdregistratie. Het gaat om een gevestigd bedrijf welke momenteel hun nieuwe cloudbased software in de markt aan het zetten zijn. Dit betekent een fase met de nodige uitdaging. Er wordt dan ook van je verwacht dat je mee kunt denken in de verdere ontwikkeling van dit product. De organisatie bestaat uit een sociale en hechte groep van mensen. De lijnen zijn kort en er wordt regelmatig samen een biertje

Bekijk vacature »
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 09:03:28
Anchor link
Edit:
Code verwijderd.
Laten we niemand wijzer maken dan ze al zijn bij het ongeoorloofd scrapen van telefoonnummers. Niemand heeft hier baat bij...


De eerste keer krijg ik wel wat html, maar uiteindelijk niet meer, geen fouten ook, maar $html is leeg, wat doe ik nu verkeerd?

Ik heb dat alleen met die url andere urls werken wel,
Gewijzigd op 22/11/2018 00:47:58 door - Ariën -
 
PHP hulp

PHP hulp

20/03/2019 23:21:05
 
Thomas van den Heuvel

Thomas van den Heuvel

21/11/2018 16:27:07
Anchor link
Zet ff bovenstaande code tussen [code][/code] tags, dat leest wat makkelijker...

Mogelijk is dit gerelateerd aan beveiligde sites (https) en mis je wat functionaliteit om hiermee te communiceren.

Of moet je je cURL settings wat veranderen. Daar wordt tevens aangehaald dat het uit veiligheidsoverwegingen een slecht idee is om VERIFYHOST en VERIFYPEER uit te schakelen.

Ook wordt daar een andere mogelijkheid aangehaald: de site in kwestie redirect, dus zorg dat FOLLOWLOCATION aan staat.

Dit alles kostte mij minder dan 5 minuten Googlen met de zoekopdracht "php curl cannot read from secure site", bovenstaand artikel was het eerste resultaat...
 
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 22:22:02
Anchor link
Je snapt het niet, die dingen zijn allemaal al geprobeert, niks te maken met https bijv, dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Dit krijg ik terug en is een nieuw beveiligingsmechanisme.

Is dit te omzeilen?

Toevoeging op 21/11/2018 22:24:31:

EN zoals ik zei, het werkt de eerste ker , maar bij een aantal refreshes blijkt het weer dezelfde problemen te geven.
 
Ozzie PHP

Ozzie PHP

21/11/2018 22:29:33
Anchor link
Daniel van Seggelen op 21/11/2018 22:22:02:
Je snapt het niet ... dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Waarom geef je die informatie dan niet meteen in je beginpost in plaats van te gaan klagen dat iemand 'het niet snapt'. Hoe duidelijker je zelf bent in je vraagstelling, een des te duidelijker antwoord je kunt verwachten.

Je moet niet zelf halve informatie geven en vervolgens gaan roepen dat de ander het niet snapt.


>> Dit krijg ik terug en is een nieuw beveiligingsmechanisme.

Dan is het klaarblijkelijk niet de bedoeling dat jij die informatie gaat lopen scrapen.
Gewijzigd op 21/11/2018 22:31:25 door Ozzie PHP
 
- Ariën -
Beheerder

- Ariën -

21/11/2018 22:32:54
Anchor link
Daniel van Seggelen op 21/11/2018 22:22:02:
Je snapt het niet, die dingen zijn allemaal al geprobeert, niks te maken met https bijv, dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Dit krijg ik terug en is een nieuw beveiligingsmechanisme.
Is dit te omzeilen?

En dan vraag ik me af of we hieraan willen meewerken?
De beveiliging is er immers niet voor niks.

Mijn beste advies: Vraag de beheerders van de website om hulp. Wie weet hebben ze wel een verborgen API die je onder bepaalde omstandigheden mag gebruiken.
 
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 23:34:42
Anchor link
"Waarom geef je die informatie dan niet meteen in je beginpost in plaats van te gaan klagen dat iemand 'het niet snapt'."

Omdat ik die informatie pas in de source terugkreeg en daar onderzoek naar ben gaan doen:
Hier staat er ook meer over:

https://www.reddup.co/r/HowToHack/comments/90hvo7/how_to_scrape_web_pages_which_detect_for_bots

Dus voor de huidige update:
Hij werkt via een nieuw ip wel, maar ook maar van korte duur(5 seconde), via proxies in curl niet, uiteindelijk is het geblokt.

gaat gewoon om de telefoongids, in plaats van alle openbare adressen, telefoonnummers etc invoeren, probeer ik de scraper te maken.
 
Ben van Velzen

Ben van Velzen

22/11/2018 00:23:35
Anchor link
En dat willen ze heel erg niet hebben. Nogal logisch dat je dan daar tegenaan loopt.
Vraag gewoon of ze een API hebben. Anders is het jammer maar helaas. Tenzij je wil dat ze meer stappen gaan ondernemen buiten geautomatiseerd blokkeren.
 
- Ariën -
Beheerder

- Ariën -

22/11/2018 00:33:00
Anchor link
Daniel van Seggelen op 21/11/2018 23:34:42:
gaat gewoon om de telefoongids, in plaats van alle openbare adressen, telefoonnummers etc invoeren, probeer ik de scraper te maken.

En dat willen ze dus voorkomen, ik weet niet wat je doel is, maar zoiets kan ook misbruikt worden voor telefoonoverlast en dergelijke.

Ik brei er maar een eind aan, want dit moeten we gewoon niet faciliteren op PHPhulp.
 
 

Dit topic is gesloten.



Overzicht

 
 

Om de gebruiksvriendelijkheid van onze website en diensten te optimaliseren maken wij gebruik van cookies. Deze cookies gebruiken wij voor functionaliteiten, analytische gegevens en marketing doeleinden. U vindt meer informatie in onze privacy statement.