Sber přidal analog generativní výplně z Photoshopu do Kandinského neuronové sítě

Společnost Sber představila novou verzi neuronové sítě Kandinsky 2.2. Podle vývojářů můžete pomocí generativního modelu vytvářet fotorealistické obrázky s vysokým rozlišením a během generování měnit poměr stran. Informační službě Habr to řekl tiskový servis IT firmy.

Mezi inovace neuronové sítě:

— zvýšil se nárůst kvality při vytváření portrétů. Pro další trénování neuronové sítě byl použit datový soubor 1,5 miliardy párů text-obrázek, což je o 300 milionů více než v předchozí verzi – Kandinsky 2.1.

— model se naučil generovat samolepky, ze kterých lze v Telegramu sestavit plnohodnotné balíčky samolepek;

– Kandinsky bot 2.2 je nyní schopen měnit jednotlivé objekty nebo prvky v obrázcích na základě textových popisů při zachování kompozice původní ilustrace. To bylo možné díky zavedení speciálního konstrukčního bloku řízených změn do modelu – ControlNet;

— začala rozumět žádostem v ruštině a angličtině;

– schopnost kreslit ve 20 stylech, míchat více kreseb, stylizovat obrázek na základě textového popisu, generovat obrázky podobné daným, doplňovat chybějící části obrázku (malba), vytvářet malby v režimu nekonečného plátna (outpainting ).

Stejně jako předchozí verze je i Kandinsky 2.2 veřejně dostupná a lze ji otestovat na promo stránce modelu, na platformě FusionBrain.AI, v robotu Telegram, v robotu VKontakte, v mobilní aplikaci Salut a pomocí funkce „Run an Artist“ příkaz na chytrých zařízeních Sber. Model je navíc k dispozici na platformě ML Space v centru DataHub předtrénovaných modelů a datových sad.

Neuronová síť byla vyvinuta a vyškolena výzkumníky Sber AI s partnerskou podporou vědců z AIRI Institute of Artificial Intelligence na kombinovaném datovém souboru Sber AI a společnosti SberDevices.

• open source
• Zpracování obrazu
• Umělá inteligence
• IT společnosti