ScrapeOps is a devops tool for web scraping which enables you to easily monitor, analyse and schedule your scraping jobs.
State of web scraping 2022 <scrapeops.io> Et le form pour 2023 <docs.google.com>
State of web scraping 2022 <scrapeops.io> Et le form pour 2023 <docs.google.com>
Comment Activision a scalé MySQL (avec Vitess) <static.sched.com>
dbt is a data transformation tool that enables data analysts and engineers to transform, test and document data in the cloud data warehouse.
<www.getdbt.com> : transfo / versionning / de data : une sorte d'ELT mais code-oriented. Il est de plus en plus utilisé, en remplacement notamment de Talend (le glisser-déplacer est moins à la mode :wink: )
Arroyo is a distributed stream processing engine written in Rust - GitHub - ArroyoSystems/arroyo: Arroyo is a distributed stream processing engine written in Rust
<github.com>
Product and engineering teams use OneSchema to save months of development time building a CSV importer. OneSchema improves customer activation / import completion rates by automatically correcting customer data.
<www.oneschema.co> Import CSV data 10x faster, outil dédié à de l'import de CSV et correction d'erreurs
A new tool that blends your everyday work apps into one. It's the all-in-one workspace for you and your team.
Notion.so se met également à l'IA en menu contextuel en proposant des améliorations d'un texte ou génération d'un nouveau :
Le modèle exclusivement SaaS d'Airtable et ses limites techniques peuvent conduire à choisir des alternatives open source. Dans ce domaine, deux solutions ressortent sur le marché.
On n'est jamais mieux servis que par soi-même donc : <www.journaldunet.com>
Sync any source to any database, transform and visualize
Un ELT (et non pas ETL ^^) open-source (en GO) <www.cloudquery.io>
The easiest web scraper with proxy rotation, infinite pagination, real browsers using JavaScript, and a built in scheduler.
<mrscraper.com>
EXCLUSIF - Espérance de vie, prévalence de maladies graves et de cancers, qualité de l'air, densité de médecins, pratique sportive⦠Le Figaro a comparé les données des 1268 communes d'Ãle-de-France pour trouver celles où l'on vit en meilleure s
<www.lefigaro.fr>
Learn how you can use clickhouse-local to analyze and transform your local and remote files using just the power of SQL on your laptop
<clickhouse.com> Clickhouse local, un outil dédié à l'analyse de CSV à l'aide de SQL. Ça n'est pas le premier outil du genre mais il semble particulièrement simple à exploiter et plutôt perfo
Web Scraping is evolving every day. There are new methods and new libraries every day for making web scraping fun and easy. First, let’s…
<scrapingking.medium.com>
Kùzu is an embeddable property graph database management system designed for performance, scalability, and ease of use in applications.
<kuzudb.com>
Prolific generation of data drove the need for prefixes that denote 1027 and 1030.
<www.nature.com>
Explore all the air traffic that happens around the world in a single day.
<24h-global-air-traffic.cbergillos.com>
Où manque-t-il des professeurs ? Cherchez votre département / commune sur <ouyapacours.fcpe.asso.fr>
METEO FRANCE - Pour agir, il est indispensable de connaître avec précision les évolutions climatiques auxquelles il faut s’adapter. Climadiag Commune délivre cette information en proposant une liste d’indicateurs climatiques ciblés par commune.
À QUOI MA COMMUNE DEVRA-T-ELLE S'ADAPTER EN 2050 ? <meteofrance.com>
Learn how to use the drawing tool and the idea of layers to build stunning, interactive dashboards in Google Sheets.
(duplication de <#C53SPFH5M|veille-media> ^^) ouaouhh ça a de la gueule si on veut faire un dashboard sans passer par DataStudio ? <www.benlcollins.com>