Jangan Grab Website Secara Langsung !


Pada pembahasan Grab Data Bursa Efek Indonesia lewat Yahoo Finance, Dasar Grab Kurs BCA, Dasar Grab Kurs Bank Mandiri dan Dasar Grab Kurs Bank Indonesia (BI) masih menggunakan get data secara langsung dari website yang di grab. Hal ini tidaklah baik. Code PHP tersebut akan get data ke website yang di grab secara terus menerus pada saat loading. Selain kita harus memperhatikan load bandwidth website yang di grab tersebut, website kita kemungkinan juga dapat di blok.

Untuk mengatasi masalah tersebut, kita sebaiknya melakukan get data secara terjadwal. misal, kita bisa menggunakan cronjob di cpanel kita. Memang pada dasarnya update website yang bersangkuatan tidaklah terus menerus. penjadwalan cronjob dapat kita sesuai dengan update website tersebut juga.

Cara Get Data :

  • File buat lagi file PHP seperti yang lalu. Dan tambahkan perintah:

    $File = “kursbi.html”;
    $Handle = fopen($File, ‘w’);
    // ‘w’ akan menghapus data yg telah ada
    fwrite($Handle, $show);
    fwrite($Handle, “</td>”);
    }
    chmod($File,0777);
    print “KURS BI SUKSES UPDATE” ;

  • File yang kita buat tadi nantinya akan kita jadwal akses-nya.
  • File yang lama ganti perintahnya dengan :

    <?
    $url = “kursbi.html” ;
    ini_set (‘allow_url_fopen’, ’1′ );
    ini_set (‘auto_detect_line_endings’, ‘Off’) ;
    ini_set (‘default_socket_timeout’, ’60′ );
    ini_set (‘max_execution_time’, ’0′ );
    flush() ;
    $f = fopen ($url, ‘r’ );
    $doc = ”;
    while (! feof ($f) ) {
    $doc = $doc . fgets($f, 3072) ;
    // triple buffer, default buffer 1024 bytes dirubah menjadi 3072 bytes,
    }
    fclose ($f) ;
    if ($doc != ”) {
    print $doc ;
    }
    flush() ;
    ?>

  • File di atas kta pasang di website kita. Dan dia memanggil dari local sendiri…

Post Update :
Date : Saturday, July 26, 2014 - Sabtu, 26 Juli 2014
Posted in: programming



Related posts "Jangan Grab Website Secara Langsung !":


4 Comments on "Jangan Grab Website Secara Langsung !"

Trackback | Comments RSS Feed

  1. agung says:

    makasih infonya…..

    [Reply]

  2. Hugh Baranick says:

    danke dass du dein wissen mit uns teils!

    [Reply]

  3. shafira says:

    This was a great article that really helpful to me and I really cant wait to learn more from your valuable experience.

    [Reply]

  4. syihab says:

    artikel yang menarik mas, terima kasih atas infonya.
    saya juga mau tanya mas, apakah teknik grabbing website juga sama dengan web crawler??

    terima kasih atas tanggapannya. :)

    [Reply]

Post a Comment


− 1 = 6