Scrapy-Splash如何在响应中添加返回变量
2020-9-27 10:33:16
收藏:0
阅读:130
评论:1
我想运行一个执行Lua操作并将结果返回给我的Scrapy机器人的Splash脚本。但是,我只能接收HTML正文,而无法接收返回语句中的变量。
splash:go(...)
--lua/splash stuff
test = 500
return {
-- 另一个SO线程指出这些必须以JSON格式表示?无论如何都无法工作
test = test
}
我尝试使用JSON端点,但结果仍然相同。Scrapy-Splash文档也没有真正解释如何获取这些变量。
因此,我的问题是-如何通过scrapy_plash.SplashRequest调用从我的lua脚本中接收任意返回变量?
这是我的当前Splash请求:
yield SplashRequest(url,self.parse,
args = {'lua_source': QuotesSpider.SPLASH_SCRIPT,'wait': 0.5})
点赞
评论区的留言会收到邮件通知哦~
推荐文章
- Lua 虚拟机加密load(string.dump(function)) 后执行失败问题如何解决
- 我想创建一个 Nginx 规则,禁止访问
- 如何将两个不同的lua文件合成一个 东西有点长 大佬请耐心看完 我是小白研究几天了都没搞定
- 如何在roblox studio中1:1导入真实世界的地形?
- 求解,lua_resume的第二次调用继续执行协程问题。
- 【上海普陀区】内向猫网络招募【Skynet游戏框架Lua后端程序员】
- SF爱好求教:如何用lua实现游戏内调用数据库函数实现账号密码注册?
- Lua实现网站后台开发
- LUA错误显式返回,社区常见的规约是怎么样的
- lua5.3下载库失败
- 请问如何实现文本框内容和某个网页搜索框内容连接,并把网页输出来的结果反馈到另外一个文本框上
- lua lanes多线程使用
- 一个kv数据库
- openresty 有没有比较轻量的 docker 镜像
- 想问一下,有大佬用过luacurl吗
- 在Lua执行过程中使用Load函数出现问题
- 为什么 neovim 里没有显示一些特殊字符?
- Lua比较两个表的值(不考虑键的顺序)
- 有个lua简单的项目,外包,有意者加微信 liuheng600456详谈,最好在成都
- 如何在 Visual Studio 2022 中运行 Lua 代码?

默认情况下,splashRequest 的设置是 render.html,它只返回 HTML 而不执行 Lua 脚本。添加 execute 端点可以正确运行 Lua 脚本,并因此返回所需的变量。
yield SplashRequest(url, self.parse, endpoint='execute', args={'lua_source': QuotesSpider.SPLASH_SCRIPT, 'wait': 0.5})