微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

搜寻将AJAX与jsoup结合使用的网站

如何解决搜寻将AJAX与jsoup结合使用的网站

我在抓取 SEPHORA website 时遇到了麻烦。

站点使用AJAX方法,我尝试通过 jsoup 获取信息。

我的代码无法获取信息。让我知道主要问题是什么。

@Override
protected Void doInBackground(Void... params) {
    try {
        Document doc = Jsoup.connect("https://www.sephora.com/api/catalog/search?type=keyword&q=1y01&content=true&includeRegionsMap=true")
                .header("origin","https://www.sephora.com/shop/foundation-makeup") 
                .header("referer","https://www.sephora.com/shop/foundation-makeup/") 
                .data("query","1y01").get();

        Elements mElementDataSize = doc.select("div.css-12egk0");
        System.out.println(mElementDataSize);
        System.out.println(mElementDataSize.size());
        int mElementSize = mElementDataSize.size();

        for(Element elem : mElementDataSize){
            String my_title = elem.select("div[class=css-1gughuu]").text();
            String my_imgurl = elem.select("img[class=css-1rovmyu_eanm77i0]").attr("src");

            String my_release = elem.select("div[class=css-68u28a]").text();
            String my_director = "평점: " + elem.select("div[class=css-t33ub8]").text();

            list.add(new ItemObject(my_title,my_imgurl,my_release,my_director));
        }


        Log.d("debug :","List " + mElementDataSize);
    } catch (IOException e) {
        e.printstacktrace();
    }
    return null;
}

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。