02. Artikel Berita QA (Question-Answer)

# File pengaturan untuk mengelola API Key sebagai environment variable
from dotenv import load_dotenv
 
# Memuat informasi API Key
load_dotenv()

True

# Atur LangSmith tracing. https://smith.langchain.com
# !pip install -qU langchain-teddynote
from langchain_altero import logging
 
# Masukkan nama proyek.
logging.langsmith("CH12-RAG")

Mulai penelusuran langsmith.
[nama project]
CH12-RAG

import bs4
from langchain import hub
from langchain_text_splitters import RecursiveCharacterTextSplitter
from langchain_community.document_loaders import WebBaseLoader
from langchain_community.vectorstores import FAISS
from langchain_core.output_parsers import StrOutputParser
from langchain_core.runnables import RunnablePassthrough
from langchain_openai import ChatOpenAI, OpenAIEmbeddings
 

USER_AGENT environment variable not set, consider setting it to identify your requests.

bs4.SoupStrainer(
    "div",
    attrs={"class": ["clearfix", "read__title"]},
)

# Memuat konten artikel berita, memecah menjadi chunk, dan mengindeksnya.
loader = WebBaseLoader(
    web_paths=(
        "https://tekno.kompas.com/read/2024/08/30/09090077/pengguna-chatgpt-naik-dua-kali-lipat-sekian-jumlahnya",),
    bs_kwargs=dict(
        parse_only=bs4.SoupStrainer(
            "div",
            attrs={"class": ["clearfix",
                             "read__title"]},
        )
    ),
)
 
docs = loader.load()
print(f"Jumlah dokumen: {len(docs)}")
docs

Jumlah dokumen: 1

[Document(metadata={'source': 'https://tekno.kompas.com/read/2024/08/30/09090077/pengguna-chatgpt-naik-dua-kali-lipat-sekian-jumlahnya'}, page_content='\nKOMPAS.com - Jumlah pengguna aktif mingguan (weekly active users) chatbot buatan OpenAI, yaitu ChatGPT, diklaim sudah menembus angka 200 juta pengguna.\xa0\nHal ini disampaikan OpenAI dalam sebuah pernyataan ke salah satu situs web berita internasional, Axios.\xa0Angka ini meningkat dua kali lipat dari jumlah weekly active users pada November 2023 lalu yang berkisar di angka 100 juta pengguna.\xa0\nOpenAI mengatakan bahwa model AI terbarunya, yaitu GPT-4o Mini yang dirilis pada Juli lalu, berkontribusi pada jumlah peningkatan pengguna ChatGPT. Menurut OpenAI, pemakaian model AI ini (via sistem aplikasi alias API) meningkat dua kali lipat sejak pertama kali dirilis.\xa0\nSelain itu, OpenAI juga mengeklaim ChatGPT kini sudah dipakai banyak perusahaan dunia. Bahkan, 92 persen dari perusahaan-perusahaan kenamaan global yang tergabung dalam kelompok "Fortune 500", lanjut OpenAI, kini telah memakai ChatGPT di dalam produk mereka.\nBaca juga: Pendiri OpenAI Mundur, Hijrah ke Perusahaan Kompetitor\nTerkait peningkatan jumlah pengguna ini, CEO OpenAI Sam Altman mengatakan, hal ini bisa terwujud berkat banyaknya orang dan perusahaan yang kini menggunakan ChatGPT di kehidupan sehari-hari mereka.\xa0\n\n\n\n"Orang-orang menggunakan ChatGPT untuk memperlancar aktivitas mereka sehari-hari, dan ini memberikan dampak positif sekaligus memicu kreativitas di berbagai bidang, mulai dari kesehatan, pendidikan, dan lain sebagainya," kata Sam.\nNah, peningkatan jumlah pengguna ChatGPT ini membuktikan bahwa produk AI semakin dilirik oleh manusia untuk membantu menyelesaikan pekerjaan mereka. Peningkatan ini juga menggambarkan bahwa kompetisi model AI yang ada di pasar kini semakin sengit.\nSalah satu chatbot kompetitor OpenAI, yaitu Meta AI buatan Meta, misalnya, kabarnya kini telah memiliki jumlah pengguna aktif yang lebih banyak dari ChatGPT, yaitu mencapai 400 juta. Namun, jumlah pengguna aktif ini merupakan bulanan (monthly), bukan mingguan (weekly).\xa0 \nBaca juga: OpenAI Diretas tapi Diam-diam Saja, Tak Lapor FBI\nTidak disebutkan berapa jumlah weekly active users Meta AI. Namun yang jelas, jumlah pengguna hariannya (daily active users) mencapai 40 juta pengguna, sebagaimana dirangkum KompasTekno dari TheVerge, Jumat (30/8/2024).\nBoleh jadi chatbot bikinan Google, yaitu Gemini, serta produk serupa bikinan Microsoft, yaitu Copilot juga memiliki jumlah peningkatan pengguna aktif. Namun, hal ini belum diketahui pasti lantaran kedua perusahaan belum mengumbar data tersebut ke publik.\nSimak breaking news dan berita pilihan kami langsung di ponselmu. Pilih saluran andalanmu akses berita Kompas.com WhatsApp Channel : https://www.whatsapp.com/channel/0029VaFPbedBPzjZrk13HO3D. Pastikan kamu sudah install aplikasi WhatsApp ya.\n')]

text_splitter = RecursiveCharacterTextSplitter(chunk_size=1000, chunk_overlap=100)
 
splits = text_splitter.split_documents(docs)
len(splits)

4

# Membuat vector store.
vectorstore = FAISS.from_documents(documents=splits, embedding=OpenAIEmbeddings())
 
# Mencari dan menghasilkan informasi yang terdapat dalam berita.
retriever = vectorstore.as_retriever()

from langchain_core.prompts import PromptTemplate
 
prompt = PromptTemplate.from_template(
    """You are a friendly AI assistant that performs Question-Answering (QA). Your mission is to answer the given question based on the provided context.
Answer the question using the retrieved context. If you cannot find the answer in the provided context, or if you do not know the answer, respond with `The given information does not contain an answer to the question.`
Please answer in Indonesia. However, do not translate technical terms or names, and leave them as is.
 
 
#Pertanyaan: 
{question} 
 
#Konteks: 
{context} 
 
#Jawaban:"""
)
 

# prompt = hub.pull("test-prompts/rag-prompt-indonesian")
# prompt

llm = ChatOpenAI(model_name="gpt-4o", temperature=0)
 
# Membuat RAG chain.
rag_chain = (
    {"context": retriever, "question": RunnablePassthrough()}
    | prompt
    | llm
    | StrOutputParser()
)

from langchain_altero.messages import stream_response

answer = rag_chain.stream("Mengapa pengguna ChatGPT meningkat?")
stream_response(answer)

Pengguna ChatGPT meningkat karena banyak orang dan perusahaan yang kini menggunakan ChatGPT dalam kehidupan sehari-hari mereka untuk memperlancar aktivitas dan memicu kreativitas di berbagai bidang seperti kesehatan dan pendidikan. Selain itu, model AI terbaru dari OpenAI, yaitu GPT-4o Mini, yang dirilis pada Juli lalu, juga berkontribusi pada peningkatan jumlah pengguna ChatGPT.

answer = rag_chain.stream("Kapan model AI terbaru dari Open AI dirilis ?")
stream_response(answer)

Model AI terbaru dari OpenAI, yaitu GPT-4o Mini, dirilis pada Juli lalu.

answer = rag_chain.stream(
    "Apa manfaat dari menggunakan ChatGPT?")
stream_response(answer)

Manfaat dari menggunakan ChatGPT adalah memperlancar aktivitas sehari-hari dan memicu kreativitas di berbagai bidang seperti kesehatan dan pendidikan.

answer = rag_chain.stream(
    "Apa keunggulan ChatGPT dari Gemini maupun Claude?")
stream_response(answer)

Tidak dapat menemukan informasi untuk pertanyaan tersebut dari informasi yang diberikan.