Simple dom werkt niet

Overzicht

Sponsored by: Vacatures door Monsterboard

Senior .NET Developer voor innovatieve marktleider

Functieomschrijving Jij en de 10 a 15 andere Ontwikkelaars werken samen op Agile wijze aan het verder uitbouwen en het verbeteren van de applicatie. Naast de 'hoofdapplicatie' zijn er nog een heleboel kleinere modules omheen. Ook deze moeten allemaal onderhouden en verder uitgebouwd worden. Je werkzaamheden zijn dus heel divers; de ene dag bouw je een volledige nieuwe module, de andere dag fix je bugs en weer een andere dag Wekelijks wordt er een duidelijke planning opgesteld waarin de doelen voor die week worden vastgelegd. Elke ochtend is er een standup waarin de voortgang besproken wordt. Uiteraard wordt dit ook

Bekijk vacature »

Medior Software Engineer

Over de functie Als Software Engineer ben je met jouw scrumteam van A tot Z betrokken bij het (door)ontwikkelen van de software. Naast het ontwikkelen en testen van de software geef je ook passend advies aan onze klanten. Je maakt daarbij gebruik van de nieuwste technieken waaronder o.a. Azure, Angular,.Net core, MS-SQL server en de elastic search stack. Om je kennis up-to-date te houden verdiep je je regelmatig in nieuwe ontwikkelingen omtrent je vakgebied en probeer je deze effectief te vertalen naar mogelijkheden voor ons bedrijf. Jij als medior bent gedreven om dagelijks de mooiste ontwikkelingen te realiseren en neemt

Bekijk vacature »

Android developer

Do you want to participate in "pair programming"? Functieomschrijving Our client is looking to add 2 software engineers to their expanding team. The client has built one of the most popular platforms in the Netherlands. The platform is known by everyone in the country as the place to trade and pick up a bargain. We are now extending the platform and apps. The platform handles over 1 million visitors and 350.000 new advertisements. But they want to go even further - they are constantly changing their platform to improve the experience for their users. Your responsibilities will include: Build an

Bekijk vacature »

PHP developer / maatschappelijke website / PHP en

Functieomschrijving Heb jij ervaring met PHP en wil jij bijdrage aan de ontwikkeling van een groot maatschappelijk digitaal platform gebouwd in PHP? De software wordt ontwikkelt middels de SCRUM methodiek en alles is OO ontwikkelt met PHP icm Symfony als framework. Draag jij je steentje bij? Ontwikkelen van diverse websites en mobile applicaties met behulp van PHP, Javascript, MySQL en Symfony. Onderhoud aan bestaande applicaties ontwikkeld in PHP; Verantwoordelijk voor het beheer van de diverse websites,apps en digitale platforms; Begeleiden van de externe partijen bij opdrachten; Het in kaart brengen van de wensen en behoefte op het gebied van online

Bekijk vacature »

.NET C# web developer gezocht met focus op gebruik

Ben je op zoek naar een baan binnen een klein softwarebedrijf? Een bedrijf met een informele, persoonlijke en familiaire sfeer? Waar je je als developer zowel richt op de back- als frontend? Wellicht dat deze vacature dan iets voor jou is. Voor een softwarebedrijf, gevestigd in het centrum van Rotterdam, zijn we momenteel op zoek naar .NET C# web developer. Dit mag iemand zijn die net van school komt, maar ook iemand die al behoorlijk wat ervaring heeft. Het bedrijf bestaat inmiddels ruim 10 jaar en en door de aanhoudende groei zijn ze opzoek naar versterking van 1 a 2

Bekijk vacature »

React ontwikkelaar met B2C ervaring voor een HA om

Voor dit project wordt er gewerkt in 6 SCRUM teams, waarvan 3 teams ontwikkelen in .NET en 2 in Node.JS. Het laatste team is een BI team. Er wordt gebruik gemaakt van de laatste en beste technieken zoals: .NET core 2.x, SOLID, Azure, Kuberntes, AKS, Docker, azure media services, React, Redux, spinnaker, Node.JS en Typescript. Functieomschrijving Ontwikkelen van een nieuw VOD platform en alles wat daarbij komt kijken; Uitvoeren van testen; Requirements ophalen; Intensief samenwerking met collega's middels de SCRUM methodiek; Meedenken over de keuzes die gemaakt moeten worden voor het bouwen van een nieuw platform. Functie-eisen Minimaal 5 jaar

Bekijk vacature »

Software Ontwikkelaar C#.NET

Software Ontwikkelaar C#.NET Zit het ontwikkelen van innovatieve applicaties in C#.NET, JAVA of PHP in jouw bloed en wil jij je kennis toepassen binnen uitdagende projecten in kantoorautomatisering of industrie. Dan kan MA-IT mogelijk iets voor je betekenen, aangezien wij uitbreiding zoeken in ons IT team van Software Engineer voor onze vestigingen in Deventer, Son en Gorinchem. Functie-eise Software Ontwikkelaar C#.NET Dit is wat je gaat doen Als C#, JAVA of PHP Developer ontwikkel je binnen een SCRUM omgeving, het hart van de producten die (inter)nationaal gebruikt worden. Het betreft complexe software waarbij je op een hoog abstractieniveau software ontwikkelt.

Bekijk vacature »

Business Information Manager (BIM-er)

Fulltime 1,0 fte = 36 uur Als Business Information Manager ben je een gedreven professional met ambitie om de informatievoorziening van Saxion te optimaliseren. Je krijgt energie en voldoening van het behalen van resultaten en het verbeteren van processen en de IT-voorzieningen van de keten. Je bent het aanspreekpunt voor alle vragen rondom de huidige en toekomstige inrichting van de informatievoorziening op de keten. Daarbij heb je een heldere visie op de toekomstige keteninformatievoorziening en weet je deze te vertalen binnen de organisatie. Daarnaast ben je: analytisch ingesteld en heb je een groot oplossend vermogen; innovatief met een hoog verandervermogen,

Bekijk vacature »

Java Backend Developer

Wat je gaat doen: Of beter nog, wat wil jij doen? Binnen DPA GEOS zijn we dan ook op zoek naar enthousiaste Java Developers om ons development team te versterken. Als Java developer werk je in Agile/Scrum teams bij onze klanten en werk je mee aan de architectuur laag. Daarbij kun je eventueel ook andere ontwikkelaars begeleiden in het software ontwikkelproces. Verder draag je positief bij aan de teamgeest binnen een projectteam en je ondersteunt de software architect en projectleider bij hun werkzaamheden. Je gaat software maken voor verschillende opdrachtgevers in jouw regio. Je bent een professional die het IT-vak

Bekijk vacature »

OOP Software Ontwikkelaar Cache Zorgsector 2.600 -

Functieomschrijving OOP Software Ontwikkelaar Cache Zorgsector 2.600 - 4.000 Software Ontwikkelaar Cache Voor de vacature als OOP Software Ontwikkelaar Cache Hardenberg Zorgsector ga je het volgende doen: Jij wordt als zelfstandig systeemontwikkelaar opgeleid in het ontwikkelen en onderhouden van de Caché Database. Je vindt je uitdaging in het zo goed en efficiënt mogelijk opzetten van systemen, zodat je eindgebruikers over een nuttige en duurzame toepassing kunnen beschikken. Je zult in eerste instantie werken aan ons eigen softwarepakket. Dat is een managementpakket voor artsen, op de cloud. Ter versterking van ons team zijn we op zoek naar een gemotiveerde OOP Software

Bekijk vacature »

Software Engineer / C Developer / Amersfoort

Betreffende organisatie begeeft zich in de telecom wereld en bouwt met passie geavanceerde software. Binnen deze organisatie zijn ze erg trots op hun nononsense cultuur waarin teamwork voorop staat. Met meer dan 20 jaar aan ervaring bouwen en ondersteunen zij softwareproducten voor de grootste mobiele telecomnetwerken ter wereld. Daarbij zijn zij continu bezig met het innoveren en updaten van hun software om de snel veranderende technologie en verkeersvraag in de telecomnetwerken aan te kunnen. De softwareontwikkeling gebeurt volledig in Nederland, maar wordt vooral geleverd aan het buitenland. Functieomschrijving Ben jij een ervaren C Developer die het leuk vindt om nieuwe

Bekijk vacature »

Senior PHP Laravel Developer

Voor een full-service reclamebureau zijn wij op zoek naar een Senior PHP LARAVEL Developer. Bij onze opdrachtgever krijg je de vrijheid om dié dingen te doen die je leuk vindt, je hoeft niet binnen de geijkte kaders te werken. Wanneer jij een kans voor de klant of voor de opdrachtgever ziet krijg je de ruimte om daar invulling aan te geven. Ruim 20 gedreven collega's staan voor je klaar om samen met de klanten een stap vooruit te zetten, deadline te halen of een Heineken mee te drinken. HOE ZIT JE FUNCTIE ERUIT? "Je zorgt ervoor dat websites of applicaties

Bekijk vacature »

Java Custom Software Developer

Jouw rol Voor deze ‘leading edge’ technology practice zijn we op zoek naar een Senior Custom Software Developer. Echte IT-freaks die de ontwikkelingen in het vakgebied nauwkeurig volgen en weten wat er speelt. Die kunnen werken op de grens van het onmogelijke en zo onze nationale en internationale klanten een beslissende voorsprong geven in hun markt. Je adviseert over innovatie en werkt mee aan de agile ontwikkeling en implementatie van state-of-the-art oplossingen, gebaseerd op .Net, Java en/of Mendix. Het gaat vaak om nieuwe technieken, veel eindgebruikers en complexe omgevingen, waarin de lat hoog ligt. Snelheid en topkwaliteit zijn bij deze

Bekijk vacature »

ICT Servicedesk medewerkers

Sportfondsen zet zich in voor een vitaal Nederland. Wij geloven in de kracht van bewegen. In de kracht van mentale uitdaging. En in het plezier om dat samen te doen. Met doelgerichte programma’s en accommodaties vanuit een gestroomlijnde organisatie werken wij samen met gemeenten, maatschappelijke organisaties en andere partners op het brede domein van beweging én welzijn. Sportfondsen Groep is een private onderneming met een groepsomzet van circa € 130 miljoen. Met meer dan 3.000 medewerkers exploiteert Sportfondsen Groep, via een 100-tal ondernemingen, meer dan 550 voorzieningen zoals zwembaden, sporthallen, ijsbanen, multifunctionele sportcentra en sociaal-culturele centra. De adviseurs en specialisten

Bekijk vacature »

.NET C# lead developer (Full stack) gezocht, Den H

Voor een organisatie in Den Haag zijn we momenteel op zoek naar een ervaren full stack .NET C# lead developer ter begeleiding van junior .NET developers en het verder uitbouwen van het team. Het gaat om een bedrijf dat de afgelopen 5 jaar druk bezig is geweest om de basis te leggen voor een online platform met betrekking tot de vraag en aanbod van een specifieke maatschappelijke doelgroep. Met een succesvol draaiende website, reeds 50.000 bezoekers per maand en het vertrouwen van een grote investeerder zijn ze de start-up fase inmiddels voorbij. De bedrijfscultuur daarentegen wordt nog steeds gekenmerkt door

Bekijk vacature »
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 09:03:28
Anchor link
Edit:
Code verwijderd.
Laten we niemand wijzer maken dan ze al zijn bij het ongeoorloofd scrapen van telefoonnummers. Niemand heeft hier baat bij...


De eerste keer krijg ik wel wat html, maar uiteindelijk niet meer, geen fouten ook, maar $html is leeg, wat doe ik nu verkeerd?

Ik heb dat alleen met die url andere urls werken wel,
Gewijzigd op 22/11/2018 00:47:58 door - Ariën -
 
PHP hulp

PHP hulp

22/02/2019 14:34:35
 
Thomas van den Heuvel

Thomas van den Heuvel

21/11/2018 16:27:07
Anchor link
Zet ff bovenstaande code tussen [code][/code] tags, dat leest wat makkelijker...

Mogelijk is dit gerelateerd aan beveiligde sites (https) en mis je wat functionaliteit om hiermee te communiceren.

Of moet je je cURL settings wat veranderen. Daar wordt tevens aangehaald dat het uit veiligheidsoverwegingen een slecht idee is om VERIFYHOST en VERIFYPEER uit te schakelen.

Ook wordt daar een andere mogelijkheid aangehaald: de site in kwestie redirect, dus zorg dat FOLLOWLOCATION aan staat.

Dit alles kostte mij minder dan 5 minuten Googlen met de zoekopdracht "php curl cannot read from secure site", bovenstaand artikel was het eerste resultaat...
 
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 22:22:02
Anchor link
Je snapt het niet, die dingen zijn allemaal al geprobeert, niks te maken met https bijv, dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Dit krijg ik terug en is een nieuw beveiligingsmechanisme.

Is dit te omzeilen?

Toevoeging op 21/11/2018 22:24:31:

EN zoals ik zei, het werkt de eerste ker , maar bij een aantal refreshes blijkt het weer dezelfde problemen te geven.
 
Ozzie PHP

Ozzie PHP

21/11/2018 22:29:33
Anchor link
Daniel van Seggelen op 21/11/2018 22:22:02:
Je snapt het niet ... dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Waarom geef je die informatie dan niet meteen in je beginpost in plaats van te gaan klagen dat iemand 'het niet snapt'. Hoe duidelijker je zelf bent in je vraagstelling, een des te duidelijker antwoord je kunt verwachten.

Je moet niet zelf halve informatie geven en vervolgens gaan roepen dat de ander het niet snapt.


>> Dit krijg ik terug en is een nieuw beveiligingsmechanisme.

Dan is het klaarblijkelijk niet de bedoeling dat jij die informatie gaat lopen scrapen.
Gewijzigd op 21/11/2018 22:31:25 door Ozzie PHP
 
- Ariën -
Beheerder

- Ariën -

21/11/2018 22:32:54
Anchor link
Daniel van Seggelen op 21/11/2018 22:22:02:
Je snapt het niet, die dingen zijn allemaal al geprobeert, niks te maken met https bijv, dit heeft te maken met :

<div id="distilIdentificationBlock">&nbsp;</div>

Dit krijg ik terug en is een nieuw beveiligingsmechanisme.
Is dit te omzeilen?

En dan vraag ik me af of we hieraan willen meewerken?
De beveiliging is er immers niet voor niks.

Mijn beste advies: Vraag de beheerders van de website om hulp. Wie weet hebben ze wel een verborgen API die je onder bepaalde omstandigheden mag gebruiken.
 
Daniel van Seggelen

Daniel van Seggelen

21/11/2018 23:34:42
Anchor link
"Waarom geef je die informatie dan niet meteen in je beginpost in plaats van te gaan klagen dat iemand 'het niet snapt'."

Omdat ik die informatie pas in de source terugkreeg en daar onderzoek naar ben gaan doen:
Hier staat er ook meer over:

https://www.reddup.co/r/HowToHack/comments/90hvo7/how_to_scrape_web_pages_which_detect_for_bots

Dus voor de huidige update:
Hij werkt via een nieuw ip wel, maar ook maar van korte duur(5 seconde), via proxies in curl niet, uiteindelijk is het geblokt.

gaat gewoon om de telefoongids, in plaats van alle openbare adressen, telefoonnummers etc invoeren, probeer ik de scraper te maken.
 
Ben van Velzen

Ben van Velzen

22/11/2018 00:23:35
Anchor link
En dat willen ze heel erg niet hebben. Nogal logisch dat je dan daar tegenaan loopt.
Vraag gewoon of ze een API hebben. Anders is het jammer maar helaas. Tenzij je wil dat ze meer stappen gaan ondernemen buiten geautomatiseerd blokkeren.
 
- Ariën -
Beheerder

- Ariën -

22/11/2018 00:33:00
Anchor link
Daniel van Seggelen op 21/11/2018 23:34:42:
gaat gewoon om de telefoongids, in plaats van alle openbare adressen, telefoonnummers etc invoeren, probeer ik de scraper te maken.

En dat willen ze dus voorkomen, ik weet niet wat je doel is, maar zoiets kan ook misbruikt worden voor telefoonoverlast en dergelijke.

Ik brei er maar een eind aan, want dit moeten we gewoon niet faciliteren op PHPhulp.
 
 

Dit topic is gesloten.



Overzicht

 
 

Om de gebruiksvriendelijkheid van onze website en diensten te optimaliseren maken wij gebruik van cookies. Deze cookies gebruiken wij voor functionaliteiten, analytische gegevens en marketing doeleinden. U vindt meer informatie in onze privacy statement.