我在做一个ETL任务时，发现上流任务的返回值（5W条数据），无法在下流任务中解析出来。

在很多时候，我们都在和数据是打交道，所以经常会去做一些数据库连接，比如Mysql、Mongo等等。 如果直接把数据库连接写在DAG中，这虽然是可行的，但这会暴露数据库连接等敏感信息，并且当数据库连接信息发生变化时，维护成本也将大大提升。

我们接触一个新的框架总会有许多新概念，这些概念虽然比较重要，但我想它的功能才是我们初步接触最想体验的，所以我更偏向于在使用的过程中去逐

前言本文主要参考官方文档编写。我将顺着官方文档的流程在本地安装Airflow ，并且附上安装过程的截图。其实官方文档步骤写得都是比较详细，奈何这英语能力真的拉跨。不过还是建议大家在使用过程中遇到的任何问题，优先去查看官方文档，有奇效。​官方文档：https://airflow.apache.org/

前言接口分析接口签名X-Ca-KeyX-Ca-NonceX-Ca-Signature接口参数效果代码前言平时写文章用的是Typroa+PicGo，我贴的所有图片都是保存在oss上的，当我把带有远程图片地址的markdown粘贴到csdn的编辑器中时，往往存在一个问题，总有一部分图片会转存失败，但是我

一提到cookie的获取，第一想法就是简单。通常的流程就是请求一下网页，然后在响应中提取cookie即可。 但是在维普期刊这个例子里，并不是这样。先来了解在调试中我所遇到的实际问题。 然后在后文中，我们一一来解决这些问题。

我所用的方法基于浏览器环境的，非硬解（头秃ing:no_mouth:），文章较长，建议收藏。 这是我第一次接触瑞数加密，比较难，不过学到的东西也是挺多的，也是因为我第一次解瑞数，所以文章写得比较详细甚至是啰嗦，这篇文章大致是以我逆向的思路去写的，应该适合像我这样从未接触过瑞数的朋友。