PHP နှင့် PPSPERPADER ကိုမည်သို့အသုံးပြုရမည်နည်း။ Crawling: အသေးစိတ်အဆင့်များနှင့်သင်ခန်းစာများ

1 ။ သဘာဝပတ်ဝန်းကျင်ပြင်ဆင်မှု

e-commerce ဝက်ဘ်ဆိုက်များနှင့် ပတ်သက်. ပြန်လည်သုံးသပ်ခြင်းအချက်အလက်များကိုမစတင်မှီဖွံ့ဖြိုးရေးပတ် 0 န်းကျင်အဆင်သင့်ဖြစ်ကြောင်းသေချာစေရန်လိုအပ်သည်။ ဤတွင်လိုအပ်သောပတ် 0 န်းကျင်နှင့်ကိရိယာများကိုဤတွင်ဖော်ပြထားသည်။

• PHP ပတ်ဝန်းကျင်
• ppspider tools များ
• မှတ်ချက် Page ပစ်မှတ် e-commerce ဝက်ဘ်ဆိုက်၏ URL

2 ။ PPSPIDER ကိုထည့်သွင်းပါ

ပထမ ဦး စွာကျွန်ုပ်တို့သည် Phpspider Tool ကို install လုပ်ရန်လိုအပ်သည်။ Phpspider သည် Opp Php Crawler Frameway သည်အချက်အလက်များကိုအလွယ်တကူအကောင်အထည်ဖော်ရန်လွယ်ကူစေရန်အတွက် Opp Frawler Framework ဖြစ်သည်။

phpspider ကိုတေးရေးဆရာမှတဆင့်ထည့်သွင်းနိုင်သည်။ Terminal (သို့) command line ကိုဖွင့်ပါ, စီမံကိန်းလမ်းညွှန်ကိုရိုက်ထည့်ပြီးအောက်ပါ command ကို Execute လုပ်ပါ။

 composer require dabaojian/phpspider

တပ်ဆင်မှုပြီးဆုံးသည်နှင့်တပြိုင်နက် data crawling အတွက် Phpspider ကိုစတင်အသုံးပြုနိုင်ပါသည်။

3 ။ တွားတတ်သော Script တစ်ခုဖန်တီးပါ

ထို့နောက် "Spider.php" ကဲ့သို့သော PHP ဖိုင်အသစ်တစ်ခုကိုဖန်တီးပါ, အောက်ပါကုဒ်ကိုဖိုင်ထဲသို့ထည့်ပါ။

 
require 'vendor/autoload.php';
use phpspider\core\phpspider;
use phpspider\core\requests;

$target_url = 'https://example.com/comments'; // ပစ်မှတ် e-commerce ဝက်ဘ်ဆိုက်၏မှတ်ချက်စာမျက်နှာကိုအစားထိုးပါURL

/* တွားတတ်သောစည်းမျဉ်းစည်းကမ်းတွေကိုသတ်မှတ်ပါ */
$config = [
    'name' => 'comments_spider',  // တွား
    'log_show' => false,          // မှတ်တမ်း output ကိုဖျောက်ပါ
    'domains' => [],              // crawled ခံရဖို့ခွင့်ပြုထားသောဒိုမိန်းအမည်အမည်များ
    'scan_urls' => [$target_url], // စက်နှိုးURL
    'content_url_regexes' => ["/\/(\d+)\.html/"], // အကြောင်းအရာစာမျက်နှာURLစည်းကမ်း
    'list_url_regexes' => ["/\/comments/"], // မှတ်ချက်စာရင်းစာမျက်နှာURLစည်းကမ်း
    'fields' => [
        [
            'name' => 'comment',  // Field Name
            'selector' => '.comment_body',  // CSSရွေးချယ်ပါသည်
            'required' => true  // လိုအပ်သောလယ်ကွင်း
        ],
        // အခြားနယ်ပယ်များ...
    ]
];
/* တွားသွား */
$spider = new phpspider($config);
$spider->start();
  

အထက်ပါကုဒ်တွင်လိုအပ်သောလူတန်းစားဖိုင်များကိုမိတ်ဆက်ပေးပြီး Targe E-Commerce ဝက်ဘ်ဆိုက်၏မှတ်ချက်စာမျက်နှာ URL ကိုသတ်မှတ်သည်။ ဆက်လက်. တွားလှည့်စည်းမျဉ်းများကို crawler အမည်, ပစ်မှတ်ထားသော URL,

မှတ်သားသင့်သည်မှာ Crawl Field သည်ဒေတာများကိုရှာဖွေရန် CSS Selector ကိုအသုံးပြုသည်။ 0 က်ဘ်ဆိုက်ဖွဲ့စည်းပုံပေါ် မူတည်. တိကျသောဒေတာကိုတွားသွားစေရန်အတွက် selector ကိုချိန်ညှိရန်လိုအပ်နိုင်သည်။

4 ။ တွားတတ်သောတိရစ္ဆာန်များကို run ပါ

တွားမြင်လွှာကိုပြေးခြင်းသည်အလွန်ရိုးရှင်းပါသည်, command line တွင်အောက်ပါ command ကိုရိုက်ထည့်ပါ။

 php spider.php

ကွပ်မျက်ခံရပြီးနောက် Phpspider သည် configure စည်းမျဉ်းများအရထင်မြင်ချက်အချက်အလက်များကိုစောင်းပြီးသတ်မှတ်ထားသောဒေတာဘေ့စ်သို့မဟုတ်ဖိုင်သို့ဒေတာများကိုသိမ်းဆည်းလိမ့်မည်။

အကျဉ်းချုပ်

PHP နှင့် PPSPSPIDER မှတစ်ဆင့် E-commerce ဝက်ဘ်ဆိုက်များတွင်အချက်အလက်အချက်အလက်များကိုလျင်မြန်စွာတွားသွားနိုင်သည်။ Tools များကို install လုပ်ပါ, crawler scripts ရေးရန်နှင့်တွားတတ်သောလူတန်းစားများကိုရေးပါ။

0 က်ဘ်စာမျက်နှာဒေတာကိုတွားသွားသည့်အခါသင်သက်ဆိုင်ရာဥပဒေများနှင့်စည်းမျဉ်းများကိုလိုက်နာရမည်။ 0 က်ဘ်ဆိုက်၏အသုံးပြုမှုဆိုင်ရာသဘောတူညီချက်ကိုလေးစားရမည်။ တရားမဝင်တွားသွားဝါးခြင်းနှင့်အလွဲသုံးစားမှုကိုရှောင်ကြဉ်ပါ။