A inteligência artificial ChatGPT atraiu o interesse em diferentes campos de atuação, pois oferece uma interface de linguagem com impressionante competência conversacional e capacidade de raciocínio em vários domínios. Mas como o ChatGPT é treinado com linguagens, atualmente ele não é capaz de processar ou gerar imagens do mundo visual.

Na contra partida, modelos como Transformers ou Stable Diffusion, apesar de mostrarem grande compreensão e capacidade de geração imagem, eles são especialistas em tarefas específicas com entradas e saídas de uma única vez.

Então para facilitar esta integração entre ambos recursos, foi construído um sistema chamado Visual ChatGPT (ACABEI DE INSTALA NA MINHA MAQUINA!), incorporando diferentes Modelos para processamento de imagem. Assim permitindo que o usuário interaja com o ChatGPT enviando e recebendo não apenas textos, mas também imagens.

É possível também fornecer questões de imagens complexas ou instruções de edição imagens que exigem a colaboração de vários modelos de IA com etapas múltiplas. Podemos contar com o recursos de envio de feedback e solicitar correções do trabalho processado. Foi desenvolvido uma série de prompts para injetar as informações do modelo visual no ChatGPT, considerando modelos de múltiplas entradas/saídas e modelos que trabalham com feedback visual.

Os experimentos que efetuei mostram que o Visual ChatGPT abre a porta para analisar imagens no ChatGPT com a ajuda dos Modelos de Visão Computacional. O sistema está disponível com o código fonte aqui: https://github.com/microsoft/visual-chatgpt

Instruções de Instalação

# Download do repositório
git clone https://github.com/microsoft/visual-chatgpt.git

# Entre na pasta recém criada
cd visual-chatgpt

# Crie um ambiente com python 3.8
conda create -n visgpt python=3.8

# Ative o ambiente recém criado.
conda activate visgpt

#  Instale os requisitos básicos
pip install -r requirements.txt

# Insira a sua licença
export OPENAI_API_KEY={Your_Private_Openai_Key}

# comando para 4 GPUs Tesla V100 32GB                            
python visual_chatgpt.py --load "ImageCaptioning_cuda:0,ImageEditing_cuda:0,Text2Image_cuda:1,Image2Canny_cpu,CannyText2Image_cuda:1,Image2Depth_cpu,DepthText2Image_cuda:1,VisualQuestionAnswering_cuda:2,InstructPix2Pix_cuda:2,Image2Scribble_cpu,ScribbleText2Image_cuda:2,Image2Seg_cpu,SegText2Image_cuda:2,Image2Pose_cpu,PoseText2Image_cuda:2,Image2Hed_cpu,HedText2Image_cuda:3,Image2Normal_cpu,NormalText2Image_cuda:3,Image2Line_cpu,LineText2Image_cuda:3"

Memória utilizada da GPU

Aqui listamos o uso de memória da GPU para cada modelo, você pode especificar qual deles você deseja utilizar:

Modelo	Memória da GPU (MB)
ImageEditing	3981
InstructPix2Pix	2827
Text2Image	3385
ImageCaptioning	1209
Image2Canny	0
CannyText2Image	3531
Image2Line	0
LineText2Image	3529
Image2Hed	0
HedText2Image	3529
Image2Scribble	0
ScribbleText2Image	3531
Image2Pose	0
PoseText2Image	3529
Image2Seg	919
SegText2Image	3529
Image2Depth	0
DepthText2Image	3531
Image2Normal	0
NormalText2Image	3529
VisualQuestionAnswering	1495

A inteligência artificial ChatGPT atraiu o interesse em diferentes campos de atuação, pois oferece uma interface de linguagem com impressionante competência conversacional e capacidade de raciocínio em vários domínios. Mas como o ChatGPT é treinado com linguagens, atualmente ele não é capaz de processar ou gerar imagens do mundo visual.

Na contra partida, modelos como Transformers ou Stable Diffusion, apesar de mostrarem grande compreensão e capacidade de geração imagem, eles são especialistas em tarefas específicas com entradas e saídas de uma única vez.

Então para facilitar esta integração entre ambos recursos, foi construído um sistema chamado Visual ChatGPT (ACABEI DE INSTALA NA MINHA MAQUINA!), incorporando diferentes Modelos para processamento de imagem. Assim permitindo que o usuário interaja com o ChatGPT enviando e recebendo não apenas textos, mas também imagens.

É possível também fornecer questões de imagens complexas ou instruções de edição imagens que exigem a colaboração de vários modelos de IA com etapas múltiplas. Podemos contar com o recursos de envio de feedback e solicitar correções do trabalho processado. Foi desenvolvido uma série de prompts para injetar as informações do modelo visual no ChatGPT, considerando modelos de múltiplas entradas/saídas e modelos que trabalham com feedback visual.

Os experimentos que efetuei mostram que o Visual ChatGPT abre a porta para analisar imagens no ChatGPT com a ajuda dos Modelos de Visão Computacional. O sistema está disponível com o código fonte aqui: https://github.com/microsoft/visual-chatgpt

Instruções de Instalação

# Download do repositório
git clone https://github.com/microsoft/visual-chatgpt.git

# Entre na pasta recém criada
cd visual-chatgpt

# Crie um ambiente com python 3.8
conda create -n visgpt python=3.8

# Ative o ambiente recém criado.
conda activate visgpt

#  Instale os requisitos básicos
pip install -r requirements.txt

# Insira a sua licença
export OPENAI_API_KEY={Your_Private_Openai_Key}

# comando para 4 GPUs Tesla V100 32GB                            
python visual_chatgpt.py --load "ImageCaptioning_cuda:0,ImageEditing_cuda:0,Text2Image_cuda:1,Image2Canny_cpu,CannyText2Image_cuda:1,Image2Depth_cpu,DepthText2Image_cuda:1,VisualQuestionAnswering_cuda:2,InstructPix2Pix_cuda:2,Image2Scribble_cpu,ScribbleText2Image_cuda:2,Image2Seg_cpu,SegText2Image_cuda:2,Image2Pose_cpu,PoseText2Image_cuda:2,Image2Hed_cpu,HedText2Image_cuda:3,Image2Normal_cpu,NormalText2Image_cuda:3,Image2Line_cpu,LineText2Image_cuda:3"

Memória utilizada da GPU

Aqui listamos o uso de memória da GPU para cada modelo, você pode especificar qual deles você deseja utilizar:

Modelo	Memória da GPU (MB)
ImageEditing	3981
InstructPix2Pix	2827
Text2Image	3385
ImageCaptioning	1209
Image2Canny	0
CannyText2Image	3531
Image2Line	0
LineText2Image	3529
Image2Hed	0
HedText2Image	3529
Image2Scribble	0
ScribbleText2Image	3531
Image2Pose	0
PoseText2Image	3529
Image2Seg	919
SegText2Image	3529
Image2Depth	0
DepthText2Image	3531
Image2Normal	0
NormalText2Image	3529
VisualQuestionAnswering	1495

One of the great things about doing the Linux Saloon is that I get the privilege of learning from fellow technology enthusiasts. This time was no different and had an unexpected bonus that I found tremendously valuable. After our discussion of Zulip messaging service and Jinda’s discussion about this experience with Virtual Machine Manager, a […]

I recently encountered a new interesting openQA issue:

[2023-03-13T14:18:22.651705+01:00] [warn] [pid:18929] !!! : qemu-system-x86_64: -netdev tap,id=qanet0,ifname=tap3,script=no,downscript=no: could not configure /dev/net/tun (tap3): Operation not permitted

This is an error that you likely are encountering on a older openQA instance, after you setup multimachine jobs but haven’t used them in a while. For me the solution was to grant the CAP_NET_ADMIN capabilities to the qemu binary (again):

Siguiendo la estela de Akademy-es 2022, el próximo encuentro de la Comunidad española de KDE se celebrará de forma presencial en Málaga el 9 y 10 de junio junto con Opensouthcode. Estamos todavia a unos meses y es el momento de comentar que se acaba de abrir el Call for Papers, es decir, el momento de participar activamente en el evento. Así que ya sabes: presenta tu charla a Akademy-es 2023 y muestra al mundo tu proyecto.

Presenta tu charla a Akademy-es 2023 de Málaga Opensouthcode edition #akademyes

Hace unos días compartí con vosotros que este año Akademy-es 2023 se va a realizar en Málaga el 9 y 10 de junio, en otra edición muy especial ya que se va a celebrar de forma paralela con la Opensouthcode en La Térmica.

Siguiendo el esquema habitual cuando coincide con una Akademy, las charlas se celebrarán el jueves y el viernes, para dejar libre el fin de semana para las ponencias el evento Internacional.

Dado la realización de esta Akademy-es con la Opensouthcode, las charlas se celebrarán el viernes y el sábado, dejando el domingo para alguna actividad social, si es posible.

Si crees que tienes algo importante que presentar, por favor házselo saber a la organización. Y si crees que alguien debería presentar su ponencia, no dejes de animarlo para que lo haga. Todas las contribuciones son útiles.

Para más detalles, mira las líneas generales del Call for Papers. Tienes de plazo para enviar tu propuesta hasta el domingo 2 de abril 23:59:59 CEST al correo akademy-es-org@kde-espana.org.

Es importante tener en cuenta las siguientes consideraciones:

• Se puede elegir entre dos formatos de charlas:
  • Charlas de 45 minutos.
  • Charlas relámpago (Lightning talk) de 10 minutos.
• Si la duración de las charlas propuestas no se ajusta a ninguno de estos dos esquemas (por ejemplo, si se necesita más tiempo), esto debe indicarse claramente en la comunicación.
• Se permitirá a KDE España la distribución bajo una licencia libre de todo el material utilizado para la realización de la actividad, así como de la grabación de la misma.
• La charla puede ser tanto a nivel de usuario como de nivel técnico.

¿Qué es Akademy-es?

Akademy-es (#akademyes, que es la etiqueta para las redes sociales) es evento más importante para los desarrolladores y simpatizantes de KDE, que se ha ido celebrando desde el 2006 con éxito creciente.

En general, las Akademy-es son el lugar adecuado para conocer a los desarrolladores, diseñadores, traductores, usuarios y empresas  que mueven este gran proyecto.

En ellas se realizan ponencias, se presentan programas, se hace un poco de caja para los proyectos libres (camisetas, chapas, etc) pero sobre todo se conoce a gente muy interesante y se cargan baterías para el futuro.

Podéis repasar las anteriores ediciones en estas entradas del blog:

• Camino Akademy-es 2013: Las anteriores ediciones (I): 2006 – 2008
• Camino Akademy-es 2013: Las anteriores ediciones (II): 2009-2010
• Camino Akademy-es 2013: Las anteriores ediciones (III): 2011-2012
• Anteriores ediciones de Akademy-es (IV): 2013 y 2014

La entrada Presenta tu charla a Akademy-es 2023 de Málaga Opensouthcode edition #akademyes se publicó primero en KDE Blog.

Finalizo el repaso de la gran actualización del último entorno de trabajo de la Comunidad KDE. La inicié con la presentación con el nuevo asistente de bienvenida, continué con el nuevo mosaico, le siguió las Preferencias de Sistema , Discover, Krunner y los plasmoides. Hoy toca terminar este repaso con las novedades de Wayland en Plasma 5.27 edición ‘KDE Free Software’, que sigue afinando y ya puede considerarse muy maduro y óptimo para la mayoría de usuarios.

Las novedades de Wayland en Plasma 5.27 edición ‘KDE Free Software’

La Comunidad KDE anunció y publicó el 14 de febrero la última versión la rama 5.x de su escritorio. Se trata de de Plasma 5.27, una versión que nos ofrecen un gran conjunto de novedades y propuestas que nos acercan a lo que vendrá cuando se realice la transición a Plasma 6.

Muchas son las nuevas funcionalidades que he desgranando artículo y artíiculo, y hoy, como decía en la introducción, finalizo la serie con las novedades de Waylando, el gestor gráfico que moderniza aún más las opciones gráficas de nuestro entorno de trabajo.

La migración de Plasma a la nueva tecnología del servidor de visualización Wayland no ha resultado fácil. Pero a pesar de lo duro que ha sido el trabajo, merece la pena, ya que Wayland abre muchas formas nuevas de interactuar con el escritorio. La compatibilidad con Wayland en Plasma 5.27 es mejor que nunca, con muchos problemas solucionados y mejoras de fiabilidad por todas partes.

Además, los artistas se alegrarán al saber que las aplicaciones de diseño, como Krita, ya tienen en cuenta la inclinación y la rotación del lápiz en las tabletas de dibujo. Plasma sobre Wayland también permite el uso de ruedas de desplazamiento de alta resolución, con lo que podrá moverse con más suavidad a través de vistas largas.

Plasma en Wayland también es compatible con el portal de Accesos directos globales. Esto permite que las aplicaciones de Wayland ofrezcan una interfaz de usuario estandarizada para configurar y editar accesos directos globales.

Finalmente, Plasma en Wayland es ahora más inteligente a la hora de definir factores de escalado apropiados para sus pantallas de forma automática, para que no tenga que hacerlo usted mismo.

Las novedades de Plasma 5.27

No quiero dejar de hablar de las novedades en general que nos han facilitaron inicialmente los desarrolladores para que tengamos una visión general.

• Nuevas pantallas de bienvenida.
• Mejoras en las preferencias de permisos para Flatpak.
• Mejoras en la refactorización multimonitor.
• Sistema de mosaicos de KWin.
• Añadido el Calendario Hebreo en el calendario emergente del reloj digital.
• Mejoras en Discover.
• Más funcionalidades para Krunner.
• Mejoras en los plasmoides.

En los próximas entradas más detalles.

La entrada Las novedades de Wayland en Plasma 5.27 edición ‘KDE 💖 Free Software’ se publicó primero en KDE Blog.

I bought the SteamDeck for a number of reasons. One such reason was to turn it into a portable retro gaming station. I know there are a lot of other options out there to do this task but this one was the most economical and already had Linux installed on it. That meant, very little […]

Me complace anunciar la actualización de marzo del 2023 de KDE Frameworks. Con esta se llega a la versión 5.104 que evidencia el compromiso y constancia que no tiene un final cercano, a no ser que consideremos el salto al número 6 dado que ya se está haciendo la migración a Qt 6..

Actualización de marzo del 2023 de KDE Frameworks

A pesar de que para los usuarios corrientes esta noticia sea algo confusa ya que no se trata de realzar una nueva aplicación ni de una nueva gran funcionalidad del escritorio, el desarrollo de KDE Frameworks tiene repercusiones directas en él a medio y largo plazo.

La razón de esta afirmación es que KDE Frameworks es básicamente la base de trabajo de los desarrolladores para realizar sus aplicaciones, es como el papel y las herramientas de dibujo para un artista: cuanto mejor sea el papel y mejores pinceles tenga, la creación de una artista será mejor.

De esta forma, las mejoras en KDE Frameworks facilitan el desarrollo del Software de la Comunidad KDE, haciendo que su funcionamiento, su estabilidad y su integración sea la mejor posible.

El 11 de marzo de 2023 fue lanzado KDE Frameworks 5.104 la nueva revisión del entorno de programación sobre el que se asienta Plasma 5, el escritorio GNU/Linux de la Comunidad KDE, y las aplicaciones que se crean con para él.

Más información: KDE

La constancia del equipo de desarrollo de la Comunidad KDE

Hay que recordar que los desarrolladores de KDE decidieron lanzar actualizaciones mensuales de este proyecto y lo están cumpliendo con puntualmente. La idea es ofrecer pocas pero consolidadas novedades, a la vez que se mantiene el proyecto evolucionando y siempre adaptándose al vertiginoso mundo del Software Libre.

Una gran noticia para la Comunidad KDE que demuestra la evolución continua del proyecto que continua ganando prestigio en el mundo de los entornos de trabajo Libres.

¿Qué es KDE Frameworks?

Para los que no lo sepan, KDE Frameworks añade más de 70 librerías a Qt que proporcionan una gran variedad de funcionalidades necesarias y comunes, precisadas por los desarrolladores, testeadas por aplicaciones especí­ficas y publicadas bajo licencias flexibles. Como he comentado, este entorno de programación es la base para el desarrollo tanto de las nuevas aplicaciones KDE y del escritorio Plasma 5.

Aquí podéis encontrar un listado con todos estos frameworks y la serie de artículos que dedico a KDE Frameworks en el blog,

Recuerda que puedes ver una introducción a Frameworks 5.0 en su anuncio de lanzamiento.

La entrada Actualización de marzo del 2023 de KDE Frameworks se publicó primero en KDE Blog.

Tumbleweed es una distribución de GNU/Linux «Rolling Release» o de actualización contínua. Aquí puedes estar al tanto de las últimas novedades.

openSUSE Tumbleweed es la versión «rolling release» o de actualización continua de la distribución de GNU/Linux openSUSE.

Hagamos un repaso a las novedades que han llegado hasta los repositorios esta semana.

El anuncio original lo puedes leer en el blog de Dominique Leuenberger, publicado bajo licencia CC-by-sa, en este este enlace:

• https://dominique.leuenberger.net/blog/2023/03/opensuse-tumbleweed-review-of-the-week-2023-10/

Esta semana solo se han publicado 6 snapshots. Una se retuvo porque se identificó un problema en un paquete (libfdisk1) que requiere intervención manual (en actualizaciones transaccionales) o un error que debe ignorarse.

Las 6 snapshots publicadas fueron 0302, 0303, 0304, 0306, 0307, y 0308 y entre otras actualizaciones, se pueden destacar las siguientes:

• KDE Plasma 5.27.2
• KDE Gear 22.12.3
• Linux kernel 6.2.1. Se habilitó un conjunto de parches de bloqueo, que creó muchos más problemas con los controladores de terceros de lo que se suponía. Kernel 6.2.2 tendrá esto deshabilitado nuevamente por el momento.
• YaST 4.6.0
• Mozilla Firefox 110.0.1
• Python 3.10.10
• SELinux 3.5
• libqt5
• GTK 4.10.0

Y ya se están preparando más actualizaciones, por ejemplo:

• Rust 1.68
• Linux kernel 6.2.2
• Systemd 253.1
• Podman 4.4.2 (snapshot 0309)
• GCC 13 como compilador predeterminado

Si quieres estar a la última con software actualizado y probado utiliza openSUSE Tumbleweed la opción rolling release de la distribución de GNU/Linux openSUSE.

Mantente actualizado y ya sabes: Have a lot of fun!!

Enlaces de interés

• ¿Por qué deberías utilizar openSUSE Tumbleweed?
• zypper dup en Tumbleweed hace todo el trabajo al actualizar
• ¿Cual es el mejor comando para actualizar Tumbleweed?
• ¿Qué es el test openQA?
• http://download.opensuse.org/tumbleweed/iso/
• https://es.opensuse.org/Portal:Tumbleweed

——————————–

Lenovo IBM Thinkpad T60 adalah series laptop Lenovo yang saat itu berkolaborasi dengan perusahaan komputer ternama yaitu IBM. Series T60 setelah saya baca (dari beberapa sumber) merupakan salah satu jenis laptop yang mempunyai kualitas yang bagus bahkan bisa dibilang kuat dan bandel, dan salah satu jenis laptop yang cukup mahal di jamannya. Kalau tidak salah IBM Thinkpad T60 dirilis sekitar pada tahun 2007. Sehingga jika dihitung dengan waktu saat ini, kurang lebih sudah berumur 16 Tahun. Fantastik bukan?

Saat saya membeli laptop ini pada tahun 2020 sudah terinstal Windows 7 sedangkan bawaan aslinya adalah Windows XP original. Awal saat membeli masih dengan spesifikasi aslinya yaitu HDD 160 GB dan RAM DDR2 2 GB. Dengan sepesifikasi tersebut, laptop ini masih ideal untuk menjalankan sistem operasi Windows 7 dengan baik dan mulus.

Kemudian saya instal openSUSE 15.3 dengan desktop Mate (menggunakan Gecko Linux) dan berjalan cukup lancar dengan mematikan efek animasinya. Kemudian saya coba kembali mengganti desktopnya dengan KDE Plasma dengan mematikan beberapa fitur seperti efek animasi, blur, dan lain-lainnya serta menonaktikan kompositornya. Karena dengan RAM sebesar 2 GB dan HDD 160 GB tentu cukup berat untuk menjalankan beberapa efek desktop seperti animasi, blur dan lain-lain.

Sampai disini disimpulkan bahwa KDE Plasma berjalan dengan cukup baik untuk laptop saya yang cukup jadul. Setelah melihat beberapa video di YouTube tentang tips dan trik bagaimana cara meningkatkan performa laptop IBM Thinkpad T60 dengan menambah kapasitas RAM, mengganti dari HDD ke SSD, dan upgrade processor. Kemudian saya mencoba menambah kapasitas RAM menjadi 3 GB serta mengganti HDD menjadi SSD dengan kapasitas 120 GB. Apa yang terjadi? Performa menjadi lebih baik, dengan tanpa mematikan efek desktop, laptop bekerja lebih cepat dan sangat menyenangkan.

Jadi mungkinkah openSUSE terbaru bisa diinstal di laptop jadul Lenovo IBM Thinkpad T60? Jawabannya sangat mungkin , bahkan openSUSE dengan desktop KDE Plasma berjalan cukup baik dan mulus.