一个在 Kubernetes 上运行的弹性网络抓取集群。它提供了通过 REST API 和 Web 界面部署、运行和扩展 Web 抓取蜘蛛的机制。
该项目由三个主要模块组成：
REST API：使用 Django REST 框架工具包构建，它公开了几个端点来管理项目、蜘蛛和作业。它使用 Celery 进行任务处理，并负责部署 Scrapy 项目等。
排队：estela 需要一个高吞吐量、低延迟的平台来控制生产者-消费者架构中的实时数据馈送。在本模块中，您将找到一个 Kafka 消费者，用于收集蜘蛛作业中的信息并将其传输到数据库中。
Web：使用 React 和 Typescript 实现的 Web 界面，可让您管理项目和蜘蛛。
这些模块中的每一个都独立于其余模块工作，并且可以更改。每个模块在其对应的目录中都有更详细的描述。
estela
该项目由三个主要模块组成：
REST API：使用 Django REST 框架工具包构建，它公开了几个端点来管理项目、蜘蛛和作业。它使用 Celery 进行任务处理，并负责部署 Scrapy 项目等。
排队：estela 需要一个高吞吐量、低延迟的平台来控制生产者-消费者架构中的实时数据馈送。在本模块中，您将找到一个 Kafka 消费者，用于收集蜘蛛作业中的信息并将其传输到数据库中。
Web：使用 React 和 Typescript 实现的 Web 界面，可让您管理项目和蜘蛛。
这些模块中的每一个都独立于其余模块工作，并且可以更改。每个模块在其对应的目录中都有更详细的描述。
estela
网页抓取是一种从网站获取数据的方式，数据可以是文本、图片或任何其他可下载的文件等。在本教程中，我们将抓取非CSR即客户端使用 JavaScript (React/角网站）。
在本教程中，将使用网络抓取来获取列出的相关工作Hacker News。每当执行爬虫代码时，我们都会将 JavaScript、react、node 等作业保存到 Excel。此外，我们将使代码可配置以轻松更改过滤器参数。
我们将使用node.js进行网页抓取，为此，我们将使用Axios获取网站的 HTML，然后在Cheerio的帮助下找到我们需要保存的数据。此外，我们将看到如何将抓取的数据保存到node.js中的CSV文件并处理分页
传送门 | #教程
如何安全地接收 PayPal 付款 | #经验
当发件人向你付款时，你必须让他们采取的步骤：
当发件人去发送付款时，他们可以选择从他们的余额或通过链接的银行/卡支付。你必须让他们通过他们的余额发送，否则，如果他们决定打电话给他们的银行说他们被骗了而进行退款，你就无能为力了。如果他们不遵循这一步骤，立即退款。
在支付时有两种选择。商品和服务以及亲友团。如果有人想通过 "商品与服务 "付款，请确保他们是100%值得信任的，否则取消交易。如果你决定他们足够可信，可以通过G&S发送，我建议你让他们在付款说明中粘贴这个：https://pastebin.com/raw/WX96bCx4。
通过亲友团收钱应该是你的首选。寄件人仍然可以对这样的付款进行退款，但他们的选择要有限得多，他们只能声称他们不小心买了东西，或者他们的账户被黑了。这两种情况对你来说都需要付出最小的努力，只要上传你完成服务的证明，你就很有可能获胜。与G&S付款不同，发件人没有能力上传任何证据。
最后，你应该要求发件人提供收据的截图，以确认他们遵循了你的要求。像这样：https://imgur.com/a/9WzJB0F。
如果它显示钱是通过朋友和家人从他们的PayPal余额中取出的，那么你就可以走了!
再次强调，如果你是发件人，并且不确定卖家是否值得信任，请使用中间人!
扩展：PayPal上G&S和F&F付款指的是什么？
当发件人向你付款时，你必须让他们采取的步骤：
当发件人去发送付款时，他们可以选择从他们的余额或通过链接的银行/卡支付。你必须让他们通过他们的余额发送，否则，如果他们决定打电话给他们的银行说他们被骗了而进行退款，你就无能为力了。如果他们不遵循这一步骤，立即退款。
在支付时有两种选择。商品和服务以及亲友团。如果有人想通过 "商品与服务 "付款，请确保他们是100%值得信任的，否则取消交易。如果你决定他们足够可信，可以通过G&S发送，我建议你让他们在付款说明中粘贴这个：https://pastebin.com/raw/WX96bCx4。
通过亲友团收钱应该是你的首选。寄件人仍然可以对这样的付款进行退款，但他们的选择要有限得多，他们只能声称他们不小心买了东西，或者他们的账户被黑了。这两种情况对你来说都需要付出最小的努力，只要上传你完成服务的证明，你就很有可能获胜。与G&S付款不同，发件人没有能力上传任何证据。
最后，你应该要求发件人提供收据的截图，以确认他们遵循了你的要求。像这样：https://imgur.com/a/9WzJB0F。
如果它显示钱是通过朋友和家人从他们的PayPal余额中取出的，那么你就可以走了!
再次强调，如果你是发件人，并且不确定卖家是否值得信任，请使用中间人!
扩展：PayPal上G&S和F&F付款指的是什么？
【网站功能】书籍网站导航
【网站简介】该网站收录了全球非常好用的书籍下载网站。以前分享过的zlibrary、创世纪图书馆等这里都有收录。像zlibrary这类网站经常更换域名，找书籍记住这一个网站就够了。
【网站网址】https://library.proletarian.me/ebook_map.html
读一本Git的书和读一篇Git的文章给人的知识含量是不同的，但给人的愉悦感也是迥异的。本文不想让您有读书的感觉、不追求知识全面、架构完整，但也不想只罗列一些git的知识点，搞的像一个Tip集。本文会从实际使用的角度，以聊天问答的形式，从浅入深，逐步展露git的若干方面。
本文分Round进行，每局并不以git命令的逻辑来分类，而是以使用git完成任务的水平来分解阶段。一些问题原本来自于我和朋友们的聊天，闲聊之余，记录成集，不要期待有什么高深的理论，让你每读完一个Round，可以小试牛刀，然后烹茶小饮、若有所思……是我最想要的。
传送门 | #指南
Inbound Marketing: The Intro to SEO
这本 22 页的电子书将教您什么是 SEO，如何为您的企业制定良好的 SEO 策略，了解页内 SEO 的结构，学习页外 SEO 的最佳实践，以及有效地使用社交媒体。您还将了解如何使用 Google Adwords、Google Incognito 标签、检查您的排名并开始做出正确的决定。
Technical SEO for Web Developers
这是一本严肃的 80 页SEO 电子书，适用于从事小型或复杂项目的软件开发人员。该电子书附有指向有用的SEO 工具的链接、激励您的真实示例和有用的图表。您将学习新网站和现有旧网站的 SEO。
The Advanced Guide to SEO
本指南由 SEO 营销大师尼尔·帕特尔 (Neil Patel ) 撰写，并非普通的电子书。该指南采用带有插图、图表、图像和图形的信息图表格式。本指南分为 9 章，是网络上最详细的高级 SEO 指南之一。它讲述了 SEO 基础知识、网站速度、WordPress 的 SEO、关键字研究等等。
SEO in 2015: The GoDaddy Pro eBook
由著名的网络托管服务提供商 GoDaddy 创建的电子书，它是为想要从内部学习 SEO 艺术的设计师、开发人员和营销人员提供的深入指南。这本电子书包含 60 页的信息，其中包含大量参考资料、提示、示例和有用的 SEO 清单。
Little Blue Link Building Book
这本 Ahrefs 的免费电子书可帮助您建立白帽链接。它包括 12 个部分，告诉您创建视觉效果、监视竞争对手、访客博客、公关、社交共享、断开链接构建等等。每个部分都使用推荐的工具和链接完成，以供进一步阅读。
Link Building: The Definitive Guide
黑帽 SEO 时代已经一去不复返了，即使其中一些技术在今天可能有效，但它们并不像以前那样有效。本指南可以以PDF 格式下载，实际上是关于链接构建的最佳文章的集合，从基础知识到内容营销、电子邮件营销和案例研究。
How to Build High-Quality Backlinks with Infographics
您是否知道可以使用视觉效果（例如信息图表）构建高质量的反向链接？这本免费的快速电子书将指导您完成创建可以传播的信息图表的过程，并使用不同的社交媒体网站和访客博客进行宣传。
A Complete Guide to SEO for Musicians
显然，不同行业和业务种类的搜索引擎优化是不同的。这本 SEO 电子书专为音乐家制作。它将告诉您申请您的品牌的 SEO 策略，分享易于遵循的建议、插图和屏幕截图。
The Ultimate SEO Guide for Tour & Activity Companies
这本电子书专为正在寻找改进 SEO 方法的旅 游和活动公司编写。在这里，您将找到 SEO、内容营销、链接构建的基础知识以及下一步要做什么的分步 SEO 清单。
Everything You Need to Know About Long Tail Keywords
这本简短但功能强大的电子书提供了为您的网站选择和使用长尾关键字的策略。如果您知道您的潜在客户使用什么查询来查找特定产品或服务，最终您就会知道如何将您的内容与他们匹配。
Link Building: How to Build Links for SEO, traffic and response
对于那些希望在网上找到他们的业务的人，您需要拥有带有适当关键字和反向链接的内容。这本长达 130 页的深度电子书将向您介绍内容、围绕您的品牌创建在线社区、为搜索引擎写作、在线公关、网络和推广。
7 Golden Rules of Link Building
这是关于建立信任、锚文本、禁止关注链接、相关内容、垃圾邮件和 PageRank的另一个链接构建指南。包含大量有趣信息的快速指南。使用弹出窗口填写您的电子邮件地址并获取您的赠品电子书。
#电子书 #指南 #SEO
这本 22 页的电子书将教您什么是 SEO，如何为您的企业制定良好的 SEO 策略，了解页内 SEO 的结构，学习页外 SEO 的最佳实践，以及有效地使用社交媒体。您还将了解如何使用 Google Adwords、Google Incognito 标签、检查您的排名并开始做出正确的决定。
Technical SEO for Web Developers
这是一本严肃的 80 页SEO 电子书，适用于从事小型或复杂项目的软件开发人员。该电子书附有指向有用的SEO 工具的链接、激励您的真实示例和有用的图表。您将学习新网站和现有旧网站的 SEO。
The Advanced Guide to SEO
本指南由 SEO 营销大师尼尔·帕特尔 (Neil Patel ) 撰写，并非普通的电子书。该指南采用带有插图、图表、图像和图形的信息图表格式。本指南分为 9 章，是网络上最详细的高级 SEO 指南之一。它讲述了 SEO 基础知识、网站速度、WordPress 的 SEO、关键字研究等等。
SEO in 2015: The GoDaddy Pro eBook
由著名的网络托管服务提供商 GoDaddy 创建的电子书，它是为想要从内部学习 SEO 艺术的设计师、开发人员和营销人员提供的深入指南。这本电子书包含 60 页的信息，其中包含大量参考资料、提示、示例和有用的 SEO 清单。
Little Blue Link Building Book
这本 Ahrefs 的免费电子书可帮助您建立白帽链接。它包括 12 个部分，告诉您创建视觉效果、监视竞争对手、访客博客、公关、社交共享、断开链接构建等等。每个部分都使用推荐的工具和链接完成，以供进一步阅读。
Link Building: The Definitive Guide
黑帽 SEO 时代已经一去不复返了，即使其中一些技术在今天可能有效，但它们并不像以前那样有效。本指南可以以PDF 格式下载，实际上是关于链接构建的最佳文章的集合，从基础知识到内容营销、电子邮件营销和案例研究。
How to Build High-Quality Backlinks with Infographics
您是否知道可以使用视觉效果（例如信息图表）构建高质量的反向链接？这本免费的快速电子书将指导您完成创建可以传播的信息图表的过程，并使用不同的社交媒体网站和访客博客进行宣传。
A Complete Guide to SEO for Musicians
显然，不同行业和业务种类的搜索引擎优化是不同的。这本 SEO 电子书专为音乐家制作。它将告诉您申请您的品牌的 SEO 策略，分享易于遵循的建议、插图和屏幕截图。
The Ultimate SEO Guide for Tour & Activity Companies
这本电子书专为正在寻找改进 SEO 方法的旅 游和活动公司编写。在这里，您将找到 SEO、内容营销、链接构建的基础知识以及下一步要做什么的分步 SEO 清单。
Everything You Need to Know About Long Tail Keywords
这本简短但功能强大的电子书提供了为您的网站选择和使用长尾关键字的策略。如果您知道您的潜在客户使用什么查询来查找特定产品或服务，最终您就会知道如何将您的内容与他们匹配。
Link Building: How to Build Links for SEO, traffic and response
对于那些希望在网上找到他们的业务的人，您需要拥有带有适当关键字和反向链接的内容。这本长达 130 页的深度电子书将向您介绍内容、围绕您的品牌创建在线社区、为搜索引擎写作、在线公关、网络和推广。
7 Golden Rules of Link Building
这是关于建立信任、锚文本、禁止关注链接、相关内容、垃圾邮件和 PageRank的另一个链接构建指南。包含大量有趣信息的快速指南。使用弹出窗口填写您的电子邮件地址并获取您的赠品电子书。
#电子书 #指南 #SEO
Link Building Strategies for 2017
这本电子书介绍13种SEO策略，介绍了如何建立反向链接、改进那的SEO策略并为我的网站增加流量。在这本电子书中，您将了解如何在“最佳”综述中找到反向链接机会、将您的网站提交给反馈网站、使用移动人等等。
SEO Foundations for Small Business Owners
这本电子书中的SEO建议将对企业家和企业主派上用场。它包括流行的SEO工具、本地SEO和一些实用的提示，今天可以尝试。如果你即将开始一项新业务或启动人生中的第一个网站，这本电子书将非常有用。
E-commerce SEO: The Definitive Guide
本指南是您今天可以在网络上找到的最好的电子商务 SEO指南之一。它包含您需要了解的所有内容，从关键字到技术 SEO 方面，以及如何将用户变成客户。您可以在线阅读本指南或下载漂亮的 PDF 版本，阅读或保留以备后用。
The Beginner’s Guide to Link Building
如果你不仅是SEO新手，也是链接构建实践的新手，那么本指南将帮你了解这两件事。你将了解什么是链接建设，为什么它对SEO如此重要，链接对Google意味着什么，以及链接建设如何使您的业务受益。
The Beginner’s Guide to Search Engine Optimization
这本电子书旨在以非常简单的方式教你 SEO。它提供了有关SEO及其主要方面的基本知识。
SEO Tutorial for Beginners in 2017 (Updated)
一本电子书告诉你需要了解的有关白帽SEO的所有信息。在这里，你将了解什么是SEO、如何网站带来流量、什么是用户体验以及如何改进它、排名因素、关键字研究等等。这是7年前首次出版的电子书的第四次修改和更新版本。
DIY SEO: A Beginner’s Guide to E-commerce Website Optimization
如果您即将开一家在线商店或已经拥有一家，您会希望您的产品可以在搜索引擎结果中轻松找到，不是吗？这本电子书将指导您完成关键字研究、页面搜索引擎优化、博客、元标签、网络、社交媒体、数字营销等。
这本电子书介绍13种SEO策略，介绍了如何建立反向链接、改进那的SEO策略并为我的网站增加流量。在这本电子书中，您将了解如何在“最佳”综述中找到反向链接机会、将您的网站提交给反馈网站、使用移动人等等。
SEO Foundations for Small Business Owners
这本电子书中的SEO建议将对企业家和企业主派上用场。它包括流行的SEO工具、本地SEO和一些实用的提示，今天可以尝试。如果你即将开始一项新业务或启动人生中的第一个网站，这本电子书将非常有用。
E-commerce SEO: The Definitive Guide
本指南是您今天可以在网络上找到的最好的电子商务 SEO指南之一。它包含您需要了解的所有内容，从关键字到技术 SEO 方面，以及如何将用户变成客户。您可以在线阅读本指南或下载漂亮的 PDF 版本，阅读或保留以备后用。
The Beginner’s Guide to Link Building
如果你不仅是SEO新手，也是链接构建实践的新手，那么本指南将帮你了解这两件事。你将了解什么是链接建设，为什么它对SEO如此重要，链接对Google意味着什么，以及链接建设如何使您的业务受益。
The Beginner’s Guide to Search Engine Optimization
这本电子书旨在以非常简单的方式教你 SEO。它提供了有关SEO及其主要方面的基本知识。
SEO Tutorial for Beginners in 2017 (Updated)
一本电子书告诉你需要了解的有关白帽SEO的所有信息。在这里，你将了解什么是SEO、如何网站带来流量、什么是用户体验以及如何改进它、排名因素、关键字研究等等。这是7年前首次出版的电子书的第四次修改和更新版本。
DIY SEO: A Beginner’s Guide to E-commerce Website Optimization
如果您即将开一家在线商店或已经拥有一家，您会希望您的产品可以在搜索引擎结果中轻松找到，不是吗？这本电子书将指导您完成关键字研究、页面搜索引擎优化、博客、元标签、网络、社交媒体、数字营销等。
Cooking for Engineers 是那些热爱烹饪的人的天赐之物。这个网站应有尽有，从菜谱到厨房设备，到烹饪测试，再到一本方便的字典。
网站最好的部分是其经典的90年代布局，这使得访问食谱和文件变得直观和容易。
PostSecret是一个非常有趣的网站。网站鼓励访问者发送匿名明信片，在上面写下他们的秘密。
各种各样的明信片上都有各种各样的秘密，这些变化使这个项目非常有趣。然而，请注意--这些秘密是非常真实的......而且非常沉重。
River Styx 一个互动网站，带你穿越冥河和冥界。你会在这里遇到许多希腊的神和女神，你也会学到很多关于他们的神话和传说。
该网站的工作方式很像点击式游戏，当你的光标悬停在相关物体上时，会变成不同的图标。这是一个有趣的、视觉化的希腊神话和哲学速成班!
Zooniverse 一个非常整洁的网站，它把人们聚集在一起，创造了一个最大的以人为本的研究平台。志愿者们一起协助专业研究人员。
不需要专门的背景或培训；你所要做的就是回答简单的问题。
NOIYS - 发布、阅读、遗忘
NOIYS是一个可以张贴匿名纸条的地方，很多人都会看到，只是在24小时内会被删除。这是一个完美的匿名发泄网站，不用担心后果，因为它将在一天内被删除。
最好的部分（也可能是最坏的部分）是，陌生人也可以回复你的留言。这样，你就可以和一个完全陌生的人进行交流了。
Vumble
你是一个比较喜欢视觉的人吗？不用担心，Vumble为你提供了一个由用户投票选出的视频集，比如说你。
这个网站最棒的地方在于它总是有新的内容，新的视频，你总是能找到非常酷和有趣的东西。不要忘记通过投票来贡献自己的力量
Scott H Young
斯科特的博客是他自己写的文章和感想的集合。他的网站非常适合任何正在进行灵魂探索的人，他的网站涉及到一些轻度的话题，如生产力和重度的话题，如生命的意义。
如果你像我一样喜欢阅读文章，这绝对是一个有趣的阅读方式，也是一个在晚上放松的好方法。
Addicted 2 Success需要来点刺激吗？Addicted 2 Success是个好去处。它的文章旨在激励和增强那些希望扭转自己生活的人。
这里有创业精神，自我发展，以及对成功和完成任务的全面关注。
Truthdig是为那些一直关注新闻和政治的人准备的东西。它的目的是为你提供关于当前主题和问题的有洞察力和准确的报道，从所有可能的角度来看待一个情况，并包括所有相关的或似乎是其他的细节。
ZMO是一个由人工智能驱动的照片编辑工具，可以让你从图像中删除任何物体。从水印到偷拍你假日照片的人，你可以删除任何东西。最重要的是，它是免费的，不需要你登录。
网站最好的部分是其经典的90年代布局，这使得访问食谱和文件变得直观和容易。
PostSecret是一个非常有趣的网站。网站鼓励访问者发送匿名明信片，在上面写下他们的秘密。
各种各样的明信片上都有各种各样的秘密，这些变化使这个项目非常有趣。然而，请注意--这些秘密是非常真实的......而且非常沉重。
River Styx 一个互动网站，带你穿越冥河和冥界。你会在这里遇到许多希腊的神和女神，你也会学到很多关于他们的神话和传说。
该网站的工作方式很像点击式游戏，当你的光标悬停在相关物体上时，会变成不同的图标。这是一个有趣的、视觉化的希腊神话和哲学速成班!
Zooniverse 一个非常整洁的网站，它把人们聚集在一起，创造了一个最大的以人为本的研究平台。志愿者们一起协助专业研究人员。
不需要专门的背景或培训；你所要做的就是回答简单的问题。
NOIYS - 发布、阅读、遗忘
NOIYS是一个可以张贴匿名纸条的地方，很多人都会看到，只是在24小时内会被删除。这是一个完美的匿名发泄网站，不用担心后果，因为它将在一天内被删除。
最好的部分（也可能是最坏的部分）是，陌生人也可以回复你的留言。这样，你就可以和一个完全陌生的人进行交流了。
Vumble
你是一个比较喜欢视觉的人吗？不用担心，Vumble为你提供了一个由用户投票选出的视频集，比如说你。
这个网站最棒的地方在于它总是有新的内容，新的视频，你总是能找到非常酷和有趣的东西。不要忘记通过投票来贡献自己的力量
Scott H Young
斯科特的博客是他自己写的文章和感想的集合。他的网站非常适合任何正在进行灵魂探索的人，他的网站涉及到一些轻度的话题，如生产力和重度的话题，如生命的意义。
如果你像我一样喜欢阅读文章，这绝对是一个有趣的阅读方式，也是一个在晚上放松的好方法。
Addicted 2 Success需要来点刺激吗？Addicted 2 Success是个好去处。它的文章旨在激励和增强那些希望扭转自己生活的人。
这里有创业精神，自我发展，以及对成功和完成任务的全面关注。
Truthdig是为那些一直关注新闻和政治的人准备的东西。它的目的是为你提供关于当前主题和问题的有洞察力和准确的报道，从所有可能的角度来看待一个情况，并包括所有相关的或似乎是其他的细节。
ZMO是一个由人工智能驱动的照片编辑工具，可以让你从图像中删除任何物体。从水印到偷拍你假日照片的人，你可以删除任何东西。最重要的是，它是免费的，不需要你登录。
