#抓取
Screen scraping and TinyML can turn any dial into an API(petewarden.com)
2021-3-1 8:51
该图显示了传统的水表，已使用廉价的ESP32相机和机器学习功能将其转换为网络API，以了解表盘和数字。我预计在未来十年中将部署数十亿台这样的设备，不仅用于水表，而且用于任何具有刻度盘，计数器或显示器的旧设备。我已经从多个团队那里听说过，他们需要在老式炼油厂，农田，办公楼，汽车和房屋等各种环境中监控旧硬件。其中一些设备......
Grab a recommended Anker indoor security camera for $30 today(arstechnica.com)
2021-2-24 23:8
今天＆＃39; S Dealmaster在Eufy＆＃39; S室内凸轮2K上是一个很好的折扣，当您剪掉4美元的优惠券时，亚马逊下降到30美元。那个＆＃39;室内安全摄像头的10美元＆＃39;典型的街道价格在线，只需2美元以上，我们追溯到最低价格。两包两包摄像头也以60美元的价格出售。
我们在去年12月推荐了在我们......
Double fetches, scheduling algorithms, and onion rings(offlinemark.com)
2020-12-11 7:58
大多数人都认为我为此感到疯狂，但是我度过了假期的最后几个月，在一家家庭式快餐店当短期厨师。 （这里有更多信息。）我是一名行业程序员，所以我很乐意从程序员的角度考虑餐厅的系统。这是关于两个这样的系统的一些想法。
乍一看，人的系统可能看起来很破损，但是由于人为因素的影响，它们实际上可能工作得很好。
我最好的例子是......
Leverage web scraping to protect your brand during the golden quarter(www.techradar.com)
2020-12-4 20:25
假冒产品是一个数十亿英镑的在线产业。鞋类和服装是品牌整合其标志和徽标的最常见场所，使它们成为世界上复制量最大的商品。
根据经济合作与发展组织（OECD）的数据，鞋类占2016年海关查获假冒商品总价值的22％，其次是服装，占16％。尽管我们许多人已经看到这些商品在世界各地的街头市场上出售，但其中许多商品现已转移到网......
How to politely crawl and analyze 500MM images(opensource.creativecommons.org)
2020-8-18 6:7
CC搜索的目标是为互联网上所有的知识共享作品建立索引，从图片开始。我们已经索引了超过5亿张图片，我们认为，根据我们的最新统计，这大约占互联网上所有CC许可内容的36%。为了进一步增强我们搜索工具的实用性，我们最近开始爬行和分析图像，以改进搜索结果。本文将通过一些理想化的代码片段和图表，讨论一个大型爬行器的纸质设计、实......
2020-8-16 3:12
据估计，互联网包含40万亿GB的数据，即后面有12个0的40个数据。根据Internetworld的统计，从2000年到2020年，用户数量惊人地增长了1200%，随着使用量的增长，数据也随之增长。
有了所有这些数据，那些找到用武之地的人将比那些无视其价值的人拥有几乎不公平的优势。
您如何收集、管理和使用信息将决定您......
The Product Manager’s Guide to Web Scraping(thesnippet.substack.com)
2020-7-10 12:54
我们承认吧。典型的产品经理日可以是超级繁忙的 - 客户会议、竞争对手分析、积压整理、管理报告等等。总是有很多事情要做。
当然，其中一些事情需要PM全神贯注的个人关注、与客户相处的 - 时间、功能规划、演示等等。但是您将看到，产品经理还必须处理许多重复性的任务。为什么不把枯燥、重复、平凡(但重要)的事情自动化呢？
真正......
Open source targeted scraping API(scrapingant.com)
2020-5-8 22:50许多专家必须处理Javascript渲染、无头浏览器更新和Web抓取维护。我们会为你做的。
我们的服务支持输出预处理功能，使您能够分析和处理纯文本输出，而无需处理HTML。
我们可以通过我们的定制功能为您提供最佳体验。如果您需要解决验证码、自定义浏览器大小等问题，请与我们联系。
我们的服务使用世界各地数以千计的住宅和......
2006-2-18 2:44
downloadsquad介绍了flickr and WEBIMAGER这个小工具。虽然名字起的真不够简练，不过它提供的服务还不错：抓取屏幕截图并直接上传到flickr。它还有其他一些简单的功能，比如改变所抓取图片的尺寸。其实这是一个绿色小软件，下载的zip文档只有517KB。你可以到这里看演示。