泰迪R - R语言数据分析

rvest 爬取静态网页

rvest

爬虫

打开一个目标网页，右键查看网页源代码可以在 HTML 结构中原原本本地看到想要抓取的数据，这就是静态网页。对于静态网页， rvest 包提供了一套简洁和完整的数据抓取方案，主要函数:

使用rvest包实现实现穿越表单以及页面的跳转

rvest

爬虫

很多爬取的网页是需要先登录的，所以需要在爬取网页数据之前模拟登录，然后进行数据的爬取。模拟登录的网址为：

R语言调用百度翻译API接口

httr

rvest

百度翻译API的url http://api.fanyi.baidu.com/api/trans/vip/translate 接口文档：https://fanyi-api.baidu.com/product/113

httr爬取动态网页

httr

爬虫

动态网页，是基于 AJAX（异步 JavaScript 和 XML）技术动态加载内容，浏览到的内容是由服务器端根据时间、环境或数据库操作结果而动态生成，直接查看网页源码是看不到想要爬取的信息的。爬取动态网页就需要先发送请求，对请求到的结果再做解析、提取、保存，rvest 包就无能为力了。 RCurl 包或者其简化版的 httr 包可以爬取动态网页。

使用 Shiny 创建交互式 Quarto 文档

shiny

您可以使用 Shiny 创建交互式 Quarto 文档。为此：

gtsummary包，批量建模并输出整洁模型结果

gtsummary

今天继续来学习gtsummary包，这个R包的主要作用是汇总数据、回归建模，然后将统计的结果以一种可自定义的、优美的格式输出出来，简化数据科学流程，极大提高数据统计效率。

gtsummary包，完美的基线特征统计描述R包

gtsummary

生成基线特征的R包有很多，例如：tableone, autoreg, compareGroups, epiDisplay等。

shiny中使用gtsummary

shiny

gtsummary

gtsummary包tbl_summary()生成的基线图是一个tbl_summary、gtsummary类型。直接打印是一张图片。要转成word文件的话，需要先转为flextable类型，在调用save_as_docx()。

Shiny package - shinyWidgets

shiny

shiny的shinyWidgets拓展包使用着非常不错，能给shiny各个控件润色不少，记录下一些有趣的功能

shiny资源汇总

shiny

在造汽车之前，造辆自行车玩玩

ggplot2绘图I

ggplot2

可视化

选取整洁数据将其映射为几何对象（如点、线等），几何对象具有美学特征（如坐标轴、颜色等），若需要则对数据做统计变换， 调整标度，将结果投影到坐标系，再根据喜好选择主题。

整洁运算 tidy evaluation

数据分析

tidyverse 代码之所以 “整洁、优雅”，是因为它内部采用了一套整洁计算框架。

连接数据库

数据库

先加载 RPostgres 包，再用 dbConnect() 来建立连接，需要提供数据库后端、数据库名、用户名、密码

统计建模

数据分析

tidy()：模型系数估计及其统计量

列表数据框

数据分析

列表，可以包含不同类型的对象，甚至可以包括其他列表。

鄂ICP备2022016232号-1