Ziemlich offensichtlich, wie das nützlich sein wird als natives Feature in Android und iOS:

„I tried feeding a 7s video of my bookshelf into Gemini Pro 1.5 to get back a JSON array of books… and it worked!“

fedi.simonwillison.net/@simon/111971103847972384