שאלה ב PHP

[geblig]

הי,

אני מנסה לבצע grab לurl כלשהוא בכל מיני צורות וכל פעם מקבל בחזרה כלום.
למשל,
ניסיתי עם file_get_contents , הוא לא מחזיר לי כלום.
ניסיתי עם curl_exec , כנ"ל.

איך אני מוציא את ה source code של url ב PHP... ?

תודה מראש

[oferlaor]

שיטה פשוטה למדי:
[left]

קוד: בחירת הכל

$sGet= "http://www.ynet.co.il";
$rdf = parse_url($sGet);
$fp = @fsockopen($rdf['host'], 80, $errno, $errstr, 15);
if ($fp) {
	    fputs($fp, "GET " .  $rdf['path'] . $rdf['query']  . " HTTP/1.0\r\n");
	    fputs($fp, "HOST: " . $rdf['host'] . "\r\n\r\n");
	    $string	= "";
	    while(!feof($fp)) {
	    	$pagetext = fgets($fp,300);
	    	$string .= $pagetext;
	    }
	    fputs($fp,"Connection: close\r\n\r\n");
	    fclose($fp);
	
		if (stripos($string, "HTTP/1.0 200")==0) {

[/left]

[TomerP]

הי,

אני מנסה לבצע grab לurl כלשהוא בכל מיני צורות וכל פעם מקבל בחזרה כלום.
למשל,
ניסיתי עם file_get_contents , הוא לא מחזיר לי כלום.
ניסיתי עם curl_exec , כנ"ל.

איך אני מוציא את ה source code של url ב PHP... ?

תודה מראש

...

תוודא שבקובץ ההגדרות של PHP יש אפשרות למשוך קישורים חיצוניים (אני לא זוכר כ"כ איך זה נקרא) - בד"כ זה חסום ואז file_get_contents ודומיו לא יעבדו (אני לא בטוח לגבי sockets, לדעתי גם נכללים בהגדרה הזו).

עריכה:
allow_url_fopen מוגדר ל true יאפשר לך גישה לכתובות חיצוניות.

בכ"מ, לפי קריאה, cURL אמור לעבוד גם בלי קשר. תבדוק שההרחבה שלו מותקנת ומוגדרת בהגדרות של PHP.

[geblig]

תודה
עופר,
אני אנסה.. לא הכרתי את parse_url בכלל

תומר,
בדקתי את המשתנה ב ini, הוא מוגדר כ true
ניסיתי לעבוד עם curl - לא עבד.. הוא משום מה לא מושך את תוכן ה url.

[geblig]

עופר,

בדקתי וזה אכן עובד.. אבל עבור חלק מהדפים זה רושם שהוא לא מזהה host כזה. למשל::
http://www.sratim.co.il/browse.php?q=the+godfather

מצד שני,
עבור www.sratim.co.il למשל הוא מחזיר את התוכן.

[oferlaor]

geblig

שים לב שזה BRUTE FORCE מה שעשיתי כאן, אין כאן אמולציה של דפדפן, עוגיות וכו'.

יתכן גם שמדובר בבעיה של TIMEOUT, תשחק עם הפרמטר האחרון של fsockopen

יש כאן תעוד כולל הסבר עם תאור מעט שונה של איך עושים את זה.

http://php.net/manual/en/function.fsockopen.php

[geblig]

עופר,
ראשית, תודה. הצלחתי להתגבר על המכשול הזה... זה היה משתנה ב ini
בשם allow_url_include.. הוא היה על off
אז הצלחתי לקבל את ה source כמו שרציתי.

עשיו, בעיה אחרת צצה לי... למה כשאני מבצע parse על איזה כיתוב עברי אני מקבל קוד אסקי של 215 (למשל)..שזה צורות מוזרות..

איך בדיוק אני ממיר את זה לאותיות הקודש?

תודה רבה

[geblig]

טוב.. גם זה הסתדר..
חייבים להשתמש ב charset שונה מהרגיל (utf eight)
charset=windows-1255

נמשיך...

[oferlaor]

זה תלוי באתר. אם האתר מצהיר שהוא עובד ב-1255 (כמונו) אז צריך להתנהג בהתאם.

[geblig]

הי עופר,

אני מנסה להוריד את ה source של
http://nzbmatrix.com/nzb.php?cat=41
מה שלא ניסיתי אני מקבל string ריק...
יש לך מושג למה?

[geblig]

מסתבר שהם הוסיפו api שאתה חייב לעבור דרכו