scrapy-splash无法获取DOM元素

如何解决scrapy-splash无法获取DOM元素

我有以下要捕获的HTML代码段：

@model List<AccountDate.Controllers.Homeviewmodel>

<table>
    @foreach (var item in Model)
    {
        <form action="@Url.Action("Update","Home")" method="post">
            <tr>
                <td>
                    @Html.displayFor(modelItem => item.Account)
                    @Html.HiddenFor(modelItem => item.Account)      

                </td>
                <td class="choice">
                    @Html.TextBoxFor(modelItem => item.PaymentDate,new { @type = "date",@class = "form-control datepicker" })
                </td>
                <td>
                    <input type="submit" value="Save" />                     
                </td>
            </tr>
        </form>
    }
</table>

这是来自以下网址：

https://www.freefullpdf.com/#gsc.tab=0&gsc.q=lung&gsc.sort=

我正在尝试获取与给定主题相关的一些研究论文。 但是，这仅在检查元素时可见，而在“查看源代码”中不可见。外壳也是如此。

我尝试使用启动服务器解决此问题，但它仍显示基本的HTML。

我还尝试添加指令--set =“ ROBOTSTXT_OBEY = False”结果相同。 scrapy shell'http：// localhost：8050 / render.html？https：//www.freefullpdf.com/#gsc.tab=0&gsc.q=lung&gsc.sort='--set =“ ROBOTSTXT_OBEY = False” 还有其他提示如何启用运行JavaScript的scrapy-splash或显示隐藏元素的任何内容吗？