The Wiert Corner – irregular stream of stuff

Jeroen W. Pluimers on .NET, C#, Delphi, databases, and personal interests

  • My badges

  • Twitter Updates

  • My Flickr Stream

  • Pages

  • All categories

  • Enter your email address to subscribe to this blog and receive notifications of new posts by email.

    Join 1,860 other subscribers

Posts Tagged ‘000000’

“Towards Inserting One Billion Rows in SQLite Under A Minute”

Posted by jpluimers on 2025/04/22

From a long time ago, but the (impressive!) leaderboard still has the same order (the Rust implementation did get faster!).

[Wayback/Archive] Towards Inserting One Billion Rows in SQLite Under A Minute – blag

Recently, I ran into a situation where I needed a test database with lots of rows and needed it fast. So I did what any programmer would do: wrote a Python script to generate the DB. Unfortunately, it was slow. Really slow. So I did what any programmer would do: went down the rabbit hole of learning more about SQLite, Python, and eventually Rust… in my quest to get a 1B row database under a minute. This blog post is a summary of this fun and educational exercise.

Repository at [Wayback/Archive] avinassh/fast-sqlite3-inserts: Some bunch of test scripts to generate a SQLite DB with 1B rows in fastest possible way

Leaderboard

(for 100M insertions)
Variant Time
Rust 23 seconds
PyPy 126 seconds
CPython 210 seconds

Via: [Wayback/Archive] Shawn Wildermuth #000000 { lives: matter; } 🇺🇦 on Twitter: “Towards Inserting One Billion Rows in SQLite Under A Minute””

--jeroen

Read the rest of this entry »

Posted in Database Development, Development, SQLite | Tagged: | Leave a Comment »

Wat zou de status zijn nadat ICTU 2,5 jaar terug een slechte Mijn PGB Portaal en migratie opleverde?

Posted by jpluimers on 2025/03/21

Ergens zomer 2022 werd het nieuwe Mijn PGB Portaal verplicht. Voorheen verliepen declaraties en dergelijke via een portaal van het SVB. Die was niet snel, had soms nukken, maar voldeed aan meer NORA richtlijnen dan het nieuwe portaal.

ICTU is een speler die exclusief op de overheidsmarkt functioneert, dus daarvan zou je verwachten dat die snappen wat NORA inhoudt en een goed product neer zetten.

Het tegendeel is waar: ik schreef in september 2022 een Twitter draad met veel screenshots over mijn eerste ervaring met het nieuwe portaal en de migratie van de onderliggende data waaruit het tegendeel bleek.

Ik ben benieuwd hoe de status nu is.

Read the rest of this entry »

Posted in About, Care/Zorg, LifeHacker, Personal, Power User | Tagged: , , | Leave a Comment »