ChromeとGoogleへログインしたブラウザを操作したい

ロボットChromeとGoogleへログインした状態のChromeを起動する方法をご紹介します。

この方法を使ってChromeを起動した場合、起動時にプライバシー強化についてというメッセージが表示されます。メッセージを表示しない方法は、こちらをご覧ください。

設定方法

アプリを開くアクションを作成

コントロールパネルのアプリ～アプリを開くをクリックし、アプリを開くアクションの設定画面を開きます

プログラムの下の▼～Chromeを起動するをクリックします

引数へ以下を設定してください。太字のユーザー名はロボットを動かすPCへのログインユーザーにしてください。設定したら実行するをクリックします。ブラウザが表示されます

-remote-debugging-port=9222 –user-data-dir=”C:\Users\noguchi\AppData\Local\Google\Chrome\User Data”–profile-directory=”Default”

ブラウザ起動アクションを設定

ブラウザを起動アクションが自動的に表示されます。実行するをクリックします

ページを開くアクションを設定

ページを開くアクションが自動的に表示されます。対象のサイトのURLを設定して実行するをクリックします

ログインした状態で開きました

Chromeへログインした状態でページが開きました

Googleにもログイン状態になっています

WEBサイトの入力するテキストボックスの構成によっては、値の入力アクションによる入力ができないことがあります。

その場合の対処方法として、Javascriptの実行アクションを使った入力方法についてご説明します。

１．Javascriptの実行アクションを作成

Javascriptの実行アクションを作成して、設定画面を開きます

２．jQueryを使えるように設定

高度な設定タブの$sとしてjQueryを使えるようにする、にチェックを入れます

３．コマンドを作成

以下のコマンドを作成します。実行するJavaScriptへ設定します。

$s(“入力個所のID“).val(“入力する値“);

入力個所のIDの調べかた

値入力アクションを作成し、設定画面の高度な設定タブのXPATHのid=となっている””で囲われた文字がIDです

accountというIDへnoguchiという文字を入力するコマンドです。

ブラウザ起動アクションで起動したChormeで、ページを開くアクションを使いWEBサイトを開きます。このときに、WEBサイトが開かなかった場合の手順について説明します。

0.10.9からEdgeが追加します。使い方はChromeと同じです。

１．アプリを開くアクションを使ってChromeを起動

アプリを開くアクションで項目名「プログラム」の下の▼をクリックします。表示されるメニュー内のChromeを起動するをクリックします。

---

２．ブラウザ起動アクションを実行

ブラウザ起動アクションが自動的に表示されます。実行するをクリックします

Chrome(アプリケーション)が選択されています。またChrome(アプリケーション)のポート番号が設定されています

---

３．ページを開くアクションを実行

ここまで来たら通常のブラウザアクションと手順は同じです。自動的に開いたページを開くアクションへURLを設定して実行します

４．ご注意ください

このページでご案内した方法で起動したChromeでファイルのダウンロードを行うには方法で行います。

１．マウス操作のダウンロードの場合はチェックしてください、へチェックを入れない

２．C:\Users\windowsのユーザー名\Downloads\内のダウンロードしたファイルを処理する

ロボデザインでアクションを作成するときに、ブラウザに対しマウスカーソルをあてると自動的にフォーカスをあてるかを設定します

ロボデザインのアクションフロー上の繰り返し処理の対象となるアクションはどれなのか、その範囲がわかりやすくなるための方法について説明をしています

ロボデザインで作成したロボットの稼働確認を行うときに、メール送信アクションの処理を自動的に無効にできる設定を行えます。テスト中にメールを送りたくないときに、設定していると便利です。

ロボデザインを起動したときにロボデザインの使い方のナビゲーションが表示されます。ロボデザインを使ってロボットを作成するときの手順について説明を行っています

★アクションの説明、概要（0.10.8から）

文字を探す範囲をして、そして操作したい個所に表示されている文字による指定を行います。そして指定した箇所をマウスで操作する方法について説明しています。

GoogleのAPIを使って変換をしています。OCR変換する文字はJobAutoからGoogleへ送信されます。ご承知おきください。Googleへインターネット経由で通信を行います。インターネットへの接続をプロキシサーバを介して行っている環境の場合は、プロキシの設定を行ってください。

またインターネットでアクセス先のドメインに制限がかかっている場合はvision.googleapis.comの制限を解除してください。

---

★アクションの作成方法

---

★アクションの設定画面について

アクション設定画面の設定項目についての説明は以下の通りです。画面を読み込みと操作対象にフォーカス、背景色についてはこちらをご覧ください。

１．基本設定

１－１．文字が見つかるまでのタイムアウト（秒）

設定した時間まで、指定した文字をロボットが探し続けます。

１－２．クリックパターン

クリックの種類を選択します。

・クリック

マウスのクリックを行います。

・ダブルクリック

マウスのダブルクリックを行います。

・右クリック

右クリックを行います。

・マウス移動

カーソルを移動します。

・マウスダウン

マウスの左クリックを押しっぱなしにします。

・マウスアップ

マウスの左クリックを押しっぱなしをやめます。

・上スクロール

マウスを使って上にスクロールします。

・下スクロール

マウスを使って下にスクロールします。

１－３．対象となる値

画面内から探す文字を入力します。変数参照可能です。

・検索ボタン

対象となる値に設定された文字を画面内から探します。

１－４．インデックス

設定した値で１つの文字に絞り込めない場合、何番目の文字を操作するか指定します。1番目の場合、0を設定します。

１－５．この範囲で探す（範囲設定方法）

指定した文字を探す範囲を設定します。

・座標

画面内の座標で範囲を指定します。アクションを作成したPCと異なるPCで実行したときに、PCの画面の大きさの違いで設定した座標がずれることがあります。

・比率

画面全体に対しての比率で範囲を指定します。アクションを作成したPCと異なるPCで実行したとき、PCの画面の大きさが違っても探す範囲がずれることはありません。ただアプリ全体の大きさが変わるとずれることがあります。

・全体

範囲を画面全体にします。

・左上

画面左上からの場所を示す数値です。範囲指定方法によって、数値が異なります。変更可能です

・右上

画面右上からの場所を示す数値です。範囲指定方法によって、数値が異なります。変更不可能です

・左下

画面左下からの場所を示す数値です。範囲指定方法によって、数値が異なります。変更不可能です

・右下

画面右下からの場所を示す数値です。範囲指定方法によって、数値が異なります。変更可能です

１－６．プロキシ（0.10.12から追加）

Googleへの通信を行うときにプロキシサーバを経由するか、しないかを設定します。

・Proxyを使用する

プロキシサーバを経由して通信をします

・Proxyを使用しない

プロキシサーバを経由せずに通信をします

１－７．変換時のオプション（0.10.13から追加）

OCRで変換するときに優先する言語を設定します。

・日本語を優先しない

日本語を優先しないでOCR変換します

・日本語を優先する

日本語を優先してOCR変換します

１ー８．見つかった文字一覧

対象となる値へ設定した文字が画面内にあるか、検索ボタンで探すことができます。このときにOCRで解析した結果が表示されます。設定した文字が探せない場合に、文字を変更するときの参考にしてください。

---

２．高度な設定

２－１．アクション有効

このアクションを無効にする場合は、チェックを外します。

２－２．一致したイメージショットをログに残す　※0.10.10から

チェックを入れた状態でスケジュール実行を行うと、ログに処理対象の文字がイメージとして表示されます

---

３．エラー発生時の対応

３－１． エラー時の処理

エラーが発生したときの設定を行います。詳細はこちらをご確認ください。

３－２．基点となる条件分岐

エラー時の処理で条件分岐の次のフローに移動を選択したときに、設定することができます。アクションでエラーが発生した場合、移動先の条件分岐を選択します。

３－３． エラー時にログ出力

エラーが発生したときにログに出力するか設定します。スケジュール実行したときのログへ出力されます。エラーとして扱わない場合は、チェックを外します。詳細はこちらをご確認ください。