用R语言实现网页影评的爬虫介绍

1.找到自己喜欢的影评界面

这里编者选择豆瓣，信息量、浏览量大，提取内容较有说服力。随后，可以根据个人喜好选择电影影评，这里我选择的是电影《美丽人生》。

2.根据选择的影评获取其相关代码

右击网页我们可以得到

选择选项界面的“检查”选项

在右侧的源代码区域我们点击左上方的检查选项，从而得到页面每个区域对应的代码

3.在R Studio实现网页爬虫

在具体的操作之前，需要安装相关的函数包。具体操作是在控制台输入以下代码

install.packages(rvest)
install.packages(stringr)

随后我们根据之前得到的网页代码完成撰写

#加载包
library(rvest)
library(stringr)
#设置网页链接
url="https://movie.douban.com/subject/1292063/comments?status=P"
#读取网页的HTML超文本
webpage <- read_html(url)
#提取其中的表格信息，返回list格式的多个数据框（data.frame)
x1 <- html_nodes(webpage,".short")
x2 <- html_text(x1)
x2[1:2]

最终结果呈现