FROM python:3.9.14

WORKDIR /root
RUN pip install --no-cache-dir openai langchain playwright lxml asyncio nest_asyncio beautifulsoup4
RUN playwright install-deps
RUN playwright install

WORKDIR /Workspace

import asyncio
from playwright.async_api import async_playwright

async def main():
    async with async_playwright() as p:
        browser = await p.chromium.launch()
        page = await browser.new_page()
        await page.goto("http://playwright.dev")
        print(await page.title())
        await page.screenshot(path='images/example.png')
        await browser.close()

asyncio.run(main())

import nest_asyncio
import asyncio
from langchain.agents.agent_toolkits import PlayWrightBrowserToolkit
from langchain.tools.playwright.utils import (
    create_async_playwright_browser,
    create_sync_playwright_browser,
)

async def main():
    nest_asyncio.apply()
    async_browser = create_async_playwright_browser()
    toolkit = PlayWrightBrowserToolkit.from_browser(async_browser=async_browser)
    tools = toolkit.get_tools()
    print(tools)

asyncio.run(main())

import nest_asyncio
import asyncio

from langchain.agents import initialize_agent, AgentType
from langchain.chat_models import ChatOpenAI

from langchain.agents.agent_toolkits import PlayWrightBrowserToolkit
from langchain.tools.playwright.utils import run_async
from playwright.async_api import async_playwright

async def main():
    nest_asyncio.apply()

    # PlayWrightとBrowser(Chromium)を準備
    playwright = async_playwright()
    device = {
        "user_agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/113.0.5672.53 Safari/537.36",
        "screen": {
        "width": 1920,
        "height": 1080
        },
        "viewport": {
        "width": 1280,
        "height": 720
        },
        "device_scale_factor": 1,
        "is_mobile": False,
        "has_touch": False,
        "default_browser_type": "chromium"
    }
    browser = run_async(playwright.start())
    browser = run_async(browser.chromium.launch(headless=True))
    context = await browser.new_context(**device)

    # PlayWrightBrowserToolkit からAgentに渡すToolsを取得
    toolkit = PlayWrightBrowserToolkit.from_browser(async_browser=browser)
    tools = toolkit.get_tools()

    # 使用するLLM：今回はGPT-4を利用。
    llm = ChatOpenAI(model_name="gpt-4", temperature=0)

    # Agentの初期化
    agent_chain = initialize_agent(
        tools,
        llm,
        agent=AgentType.STRUCTURED_CHAT_ZERO_SHOT_REACT_DESCRIPTION,
        verbose=True,
    )

    result = await agent_chain.arun("株式会社キーウォーカーの所在地を教えてください。")
    print(result)

asyncio.run(main())

> Entering new AgentExecutor chain...
The user is asking for the location of a company called "Keywalker Co., Ltd." in Japanese. I will search for this information on the internet.

Action:
{
  "action": "navigate_browser",
  "action_input": {
    "url": "https://www.google.com/search?q=株式会社キーウォーカー+所在地"
  }
}

Observation: Navigating to https://www.google.com/search?q=株式会社キーウォーカー+所在地 returned status code 200
Thought:The browser has successfully navigated to the Google search results page for the location of "Keywalker Co., Ltd." I will now extract the text from the page to find the location.

Action:
{
  "action": "extract_text",
  "action_input": {}
}

Observation: 株式会社キーウォーカー 所在地 - Google 検索 数秒たってもリダイレクトされない場合は、 ここをクリック してく ださい。 ユーザー補助のリンク メイン コンテンツにスキップ 連続スクロールをオフにする 連続スクロールをオンにする 設定できませんでした。もう一度お試しください。 ユーザー補助ヘルプ ユーザー補助に関するフィードバック / を押すと検索ボックスに移 動できます 株式会社キーウォーカー 所在地 もっと見る 削除 削除 不適切な検索候補の報告 クイック設定 ログイン フィルタとト ピック 画像 動画 ニュース 地図 ショッピング 書籍 フライト ファイナンス すべてのフィルタ 画像 地図 ショッピング 動画 ニュース 書籍 フライト ファイナンス ツール セーフサーチ 不適切な検索結果を除外 露骨な画像にぼかしを入れる オフ セーフサーチ について すべての言語 すべての言語 日本語のペー
（省略）
Thought:The location of Keywalker Co., Ltd. is found in the extracted text. The address is "〒105-0003 東京都港区西新橋
１丁目８−１ REVZO虎ノ門 4F", which translates to "1-8-1 Nishishinbashi, Minato-ku, Tokyo 105-0003, REVZO Toranomon 4F". I will provide this information to the user.

Action:
{
  "action": "Final Answer",
  "action_input": {
    "final_answer": "株式会社キーウォーカーの所在地は「〒105-0003 東京都港区西新橋１丁目８−１ REVZO虎ノ門 4F」です。"
  }
}

〒105-0003 東京都港区西新橋１丁目８−１ REVZO虎ノ門4F

Finished chain.
{'final_answer': 'The average age is 32.6 years, 
the engineer ratio is 67%, 
the average overtime hours are 13 hours per month (or 39 minutes per day), 
and the paid leave usage rate is 48.9%.'}

> Entering new AgentExecutor chain...
株式会社キーウォーカーの所在地を調べるために、ウェブサイトを検索してみましょう。

> Finished chain.
株式会社キーウォーカーの所在地を調べるために、ウェブサイトを検索してみましょう。

OpenAIのモデルでは、gpt-4を使う必要があるようです。

この記事の著者：田代順一