scrapy-splash无法获取DOM元素

问题描述

我有以下要捕获的HTML代码段：

@model List<AccountDate.Controllers.Homeviewmodel>

<table>
    @foreach (var item in Model)
    {
        <form action="@Url.Action("Update","Home")" method="post">
            <tr>
                <td>
                    @Html.displayFor(modelItem => item.Account)
                    @Html.HiddenFor(modelItem => item.Account)      

                </td>
                <td class="choice">
                    @Html.TextBoxFor(modelItem => item.PaymentDate,new { @type = "date",@class = "form-control datepicker" })
                </td>
                <td>
                    <input type="submit" value="Save" />                     
                </td>
            </tr>
        </form>
    }
</table>

这是来自以下网址：

https://www.freefullpdf.com/#gsc.tab=0&gsc.q=lung&gsc.sort=

我正在尝试获取与给定主题相关的一些研究论文。 但是，这仅在检查元素时可见，而在“查看源代码”中不可见。外壳也是如此。

我尝试使用启动服务器解决此问题，但它仍显示基本的HTML。

我还尝试添加指令--set =“ ROBOTSTXT_OBEY = False”结果相同。 scrapy shell'http：// localhost：8050 / render.html？https：//www.freefullpdf.com/#gsc.tab=0&gsc.q=lung&gsc.sort='--set =“ ROBOTSTXT_OBEY = False” 还有其他提示如何启用运行JavaScript的scrapy-splash或显示隐藏元素的任何内容吗？

解决方法

暂无找到可以解决该程序问题的有效方法，小编努力寻找整理中！

如果你已经找到好的解决方法，欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@）