Programación impulsada por LLM: Oh, ¿en serio?

Feb 26 2023
Por mucho que me gustaría serlo, no soy un académico de ciencias de la computación. De nada.

Por mucho que me gustaría serlo, no soy un académico de ciencias de la computación. De nada.

Aunque tomé un camino diferente.

He pasado gran parte de mis días leyendo, escribiendo, cambiando y depurando programas de computadora durante 25 años. Durante este tiempo, obtuve un título técnico en Procesamiento de datos, me senté en un curso de licenciatura en Ciencias de la Computación durante más de 3 años (antes de abandonar el cuarto año, un semestre más o menos antes de graduarme), y luego terminé estudiando un título de posgrado en Data Science & Big Data, después de obtener una licenciatura en Nutrición.

En esos últimos 25 años, apuesto a que he leído bastantes libros, artículos, blogs y demás, en un esfuerzo honesto por educarme. Aún así, me siento tan poco educado como para ofrecer opiniones fuera de mi campo de especialización, es decir, diseñar sistemas de software para Internet.

Por eso siempre busco gente que sepa más que yo. Así que no me avergüenzo gratis en Internet. Puede que no sea genial, pero es intelectualmente honesto. Me lo llevo.

bombo LLM

Últimamente ha habido una exageración sobre el tema de LLM (modelos de lenguaje grande, por ejemplo, GPT-3 ), especialmente ChatGPT . Debes estar viviendo debajo de una roca para no haber oído hablar de eso. Esta cosa está en todas partes. La gente se está volviendo loca al respecto. Algo de amor, algo de odio y todo lo demás, supongo.

Aquí estoy.

Aunque obtuve un posgrado en el tema de ciencia de datos, estoy lejos de ser un experto en LLM. Muy muy lejos. Ni siquiera a la vista de los ojos humanos. Así que mis pensamientos al respecto se basan en mis observaciones a lo largo de los años y una parte justa de la experiencia del mundo real como ingeniero de software. Tómelo con un grano de sal.

¿Qué pienso al respecto?

Creo que podría ser una herramienta útil en su caja de herramientas de programador. Téngalo allí, como tiene Google y Stack Overflow. Eso es todo. Simple como eso.

https://commoncog.com/content/images/2018/12/Paper.Commonplace.37.png

Quiero decir, permítanme elaborar un poco más sobre esta afirmación.

Cuando comencé a programar, tenía que comprar libros y revistas o pedirlos prestados en la escuela y en las bibliotecas públicas; Además, tenía un buen compañero de trabajo que me enseñó mucho sobre Clipper , y eso fue todo. Luego descubrí los foros de discusión en línea (por ejemplo, GUJ ). Y luego conocí y asistí a reuniones de grupos de usuarios (por ejemplo, SouJava ). Y luego fue Stack Overflow, GitHub y la plétora de contenido técnico que hay en Internet, ya sabes de lo que estoy hablando, solo busca en Google lo que sea sobre el lenguaje de programación más esotérico y ahí lo tienes.

Esas cosas no eran mutuamente excluyentes, se sumaban una sobre otra, como los ladrillos de un edificio. ¿O debería decir un rascacielos? Imagínate.

De todos modos, supongo que lo que estoy tratando de decir es que, aunque puedo buscar cualquier cosa en Stack Overflow (o más bien en Google y luego apuntar y hacer clic), leer blogs, ver todo tipo de charlas interesantes en YouTube. , y así sucesivamente, todavía compro libros y los leo. Una cosa no excluye a la otra.

Lo mismo se aplica a las herramientas LLM.

Sea un programador de educación primero

Me gustaría hacer un punto aquí: soy un firme creyente en la educación de "calidad". Y con eso me refiero a asistir a cursos universitarios formales y leer libros “carnosos”.

Sé que no es una opinión popular hoy en día, con todos los bootcamps, los cursos rápidos en video y los nano contenidos que se publicitan mucho, como si fueran la penicilina del siglo XXI, pero, sinceramente, no podría importarme menos. Solidificar el conocimiento que pasa la prueba del tiempo requiere una educación sólida. Así que tómese su tiempo, haga el trabajo duro, supere el tutorial rápido e infórmese.

Tenga en cuenta que con un conocimiento superficial es posible que ni siquiera pueda discernir si una respuesta de desbordamiento de pila es correcta o incorrecta; y si es correcto, y si funciona como se esperaba, por qué lo hace. Y en este caso, ¿qué harías si no funciona? Ensayo y error hasta la saciedad , ¿verdad? Lo que nos lleva a un hecho indiscutible.

A nadie le gusta ese chico/chica en la oficina que hace preguntas todo el tiempo y quiere masticar cada pieza de información para tragarla sin tener que sudar. Ciertamente no.

Déjame decirte: la programación basada en copiar y pegar ha existido durante mucho tiempo , al menos desde que pudimos encontrar soluciones candidatas para la mayoría de los problemas informáticos que buscamos en Internet. Esto no es nada nuevo. La gente ha estado haciendo esto desde hace mucho tiempo. Mucho más tras la llegada del software de código abierto y los potentes motores de búsqueda. Y no hay nada de malo en copiar y pegar código de Internet. Nada. Bueno, al menos hasta que lo haga.

Después de todo, podemos copiar y pegar pequeños fragmentos de código aquí y allá, ejemplos de usos de API con los que no estamos muy familiarizados, o que aún no hemos usado, o que estamos comenzando rápidamente. Todos lo hemos hecho y lo seguiremos haciendo. (¿Regex? ¿Cron? Sí, te entiendo.) Sin embargo, si no tenemos una base sólida en programación y diseño de software, si no nos tomamos nuestro tiempo para entender lo que estamos haciendo, terminaremos en una situación frustrante. bucle de ensayo y error. Peor que eso, amigos, terminaremos introduciendo errores difíciles de encontrar, problemas de rendimiento y vulnerabilidades de seguridad en nuestro software, que por cierto, la mayoría de las veces ni siquiera es nuestro software sino el software de nuestros empleadores. Piense en eso por un segundo.

Hay mucho más en el desarrollo de software que escribir una consulta SQL, crear un punto final de API, llamar a un servicio remoto desde una aplicación móvil o codificar una búsqueda en profundidad. Una solución de software completa está hecha de mucho más que eso. La ingeniería de software, como campo, es lo que le preocupa. Por lo tanto, mi punto aquí es, si no sabes qué pedir, ¿qué tipo de respuestas crees que obtendrás? ¿Y serás capaz de discernir la respuesta correcta para tu caso particular?

Como dice el dicho, basura entra, basura sale

Cuando lea las respuestas en Stack Overflow, es mejor que esté bastante seguro de lo que está buscando, para ser razonablemente asertivo: también hay mucho contenido basura, eso sí; y no vienen con una etiqueta de "basura". Luego, debe tener en cuenta todo el contexto de la pregunta original y las respuestas proporcionadas, omitiendo la basura aquí y allá, antes de poder tomar la decisión de copiar y pegar un fragmento de código tal como está o escribir su propia solución basada en el construido. conocimiento ⎼ por ejemplo, el problema específico que está tratando de resolver posee sus casos límite particulares. Y esto mismo, una y otra vez, te agregará conocimiento.

¿Ves a dónde vamos? ¿Ves mi punto aquí? ¿Ves cómo ChatGPT puede ser una trampa? Lo preguntas, obtienes una respuesta. Una respuesta tan segura que si no tienes un conocimiento amplio y sólido de programación, compras pura mierda sin siquiera saberlo. He visto mucho de eso con amigos en Twitter y todo eso. Incluso con algoritmos ampliamente conocidos.

Como tal, este "mucho más" es lo que debería preocuparnos (además de lo básico) y es en lo que debemos centrarnos (siempre que tengamos los conceptos básicos en su lugar). Lo que nos lleva a otro hecho despiadado.

No sabemos lo que no sabemos. Y lo único que podemos hacer al respecto es adquirir nuevos conocimientos, una y otra vez: amplio primero, profundidad segundo.

Fundamentos de la arquitectura de software, Mark Richards y Neal Ford

De esta manera, con suerte, sabremos lo que estamos buscando y tendremos al menos una idea de la respuesta cuando la encontremos.

- El amplio conocimiento nos da una dirección para ir en busca de respuestas;
- El conocimiento profundo nos ayuda a discernir entre las respuestas encontradas.

Bueno. Fresco. Pero cómo hacemos eso?

Para ampliar su conocimiento de lo que hay que saber, creo que los blogs y los videos de YouTube son geniales. Son contenidos breves que puedes consumir a diario sin sudar. Pero para un conocimiento sólido y profundo , en mi opinión (N=1), nada mejor que leer libros y documentación oficial. Y si puedes, si aún no lo has hecho, búscate una plaza (física u online) en algún curso universitario (grado o posgrado según corresponda).

Una vez más, no es una opinión popular. Pero yo mismo no soy popular, así que ¿a quién le importa?

Ingresa a herramientas LLM

No obstante, tengo varias opiniones impopulares, creo que esta será la estrella: LLM podría ser una herramienta increíble para ayudarlo a obtener un conocimiento sólido. ¿Como es eso? Te diré cómo.

Comience preguntando a ChatGPT qué se debe saber sobre, digamos, el desarrollo de aplicaciones móviles. Luego solicite tutoriales breves y videos de YouTube para obtener una visión general. A continuación, pida libros y conferencias muy recomendables al respecto. Porque en última instancia, desea leer varios artículos profundos, de diferentes autores, con diferentes puntos de vista, para obtener una comprensión sólida del tema que está estudiando.

Eso es por una cosa. Otra cosa que podría ser útil es cuando estás leyendo un libro y te quedas atascado por la falta de conocimiento de un tema requerido determinado. Pídele a ChatGPT que resuma dicho tema por ti, para que tengas una base antes de continuar. Lo mismo que harías con Google, leyendo una o dos fuentes pero rápido y directo al grano. Sin embargo, después, adelante y profundice en dicho tema si es algo importante para el asunto general que está estudiando. Está bien hacer eso.

Y otra circunstancia en la que podría ser muy útil es que, mientras está listo para desarrollar una aplicación de software para un dominio determinado, no está demasiado familiarizado con todos los entresijos. Lo vi el otro día y me pareció bastante inteligente.

Supongamos que va a desarrollar una aplicación móvil de actividad física, porque le gusta la actividad física y está muy emocionado con la idea de ayudar a las personas a estar saludables y todo eso. Bueno. Pero no conoces todas las aplicaciones que existen, y sus características más queridas, y cómo se monetizan, etc. Estas son preguntas muy objetivas. Entonces puede hacer estas preguntas a ChatGPT para comenzar rápidamente. Usted pregunta sobre los requisitos de la aplicación. Le pides que, por ejemplo, escriba el correo electrónico de bienvenida que enviarás a los nuevos suscriptores de tu increíble aplicación de fitness, porque no eres particularmente bueno en esto. Bien. ¿Ahora que? Si entendiste de lo que he hablado hasta este punto, ya tienes una buena idea de lo que debes hacer a continuación. Lo mejoras, lo haces mejor, le pones tu salsa especial. En otras palabras, romper la inercia, que es posiblemente lo más importante en este caso, luego hágalo particularmente especial; de lo contrario, todo lo que tendrá es material genérico para vender. No es genial, supongo.

Si obtiene acceso a GitHub Copilot y no está de más usarlo en su trabajo, puede pedirle que le proporcione fragmentos de código, como un método para analizar un archivo, un caso de prueba repetitivo o lo que sea. Ya sabes, esas cosas aburridas que tienes que hacer de vez en cuando y que no se pueden evitar por completo con un diseño de código adecuado y bibliotecas inteligentes. Nada de malo con eso. No obtiene puntos adicionales si no lo hace, siempre y cuando no exista una política en el lugar donde trabaja.

Puede haber muchas otras aplicaciones similares, eso sí. Piénsalo.

Oh espera. Pensé en el mayor beneficio que esto podría traernos: ¿Conoces a esos chicos a los que les gusta publicar en foros pidiendo soluciones a sus tareas escolares? Como, ya sabes, lees la pregunta y es casi la declaración de asignación literal. Probablemente hayas visto eso antes. Sí, ahora pueden pedírselo a ChatGPT y dejarnos en paz. Todo el mundo está feliz por eso.

¿LLM reemplazará a los programadores humanos?

No, no lo creo. Soy muy escéptico acerca de "X va a reemplazar a los programadores humanos" . Desde que comencé con la programación en 1997, ya he escuchado bastante sobre modas como esa.

Probablemente cambiará la forma en que nos educamos en programación, cómo superamos los bloqueos cuando nos atascamos mientras programamos, cómo lidiamos con cosas aburridas, pero nos reemplazará, homo sapiens, por más que CRUD y aplicaciones mundanas ampliamente conocidas, no, yo Soy muy escéptico al respecto. Aunque podría estar equivocado.

Y sé, finalmente, este artículo cierra el círculo con lo que me motivó a escribirlo.

Ayer tuve el placer de toparme con un artículo increíble de Amy J. Ko , que fue un verdadero placer leer. Primero porque estoy de acuerdo con casi todo lo que escribió allí. Segundo, porque a diferencia de mí, ella es académica y lleva más de una década siguiendo esta temática. Así que definitivamente tiene una o dos cosas para colaborar en toda esta discusión sin avergonzarse.

Así que hágase un favor, olvídese de las exageraciones y lea estos destacados artículos para tener una mejor idea del tema desde diferentes puntos de vista:

- Los modelos de lenguaje grande cambiarán la programación... un poco
- Los modelos de lenguaje grande cambiarán la programación... mucho

No hay TLDR; allá. Tómate tu tiempo, disfruta del viaje.

Ahora, para terminar este largo artículo con algo divertido: solía ver a la gente burlarse de los académicos todo el tiempo, diciendo que la academia está muy lejos del desarrollo de software del mundo real, y luego, de repente, la gente se asombra y se asusta. una cosa traída a la vida directamente de la investigación académica. Qué gran pieza de ironía. Qué buen momento para ser académico.

De todos modos, hasta la próxima, amigos.

Tenga cuidado con el bombo.

⛧ Ver también en leandrosilva.com.br . Hay mucho más allí.