スキップしてメイン コンテンツに移動

Google Spreadsheetの関数でWebデータを自動取得

こんばんは。ITクラブ講師の光井です。

今夜は、オンライン開催にてChat-GPT 4oのワークショップを開催しました。その際に例として挙げたのが、Webデータの自動取得方法です。

自動取得は「Pythonコードを書かないといけないのでは?」「デスクトップフローで自動化ってハードル高いな?」って感じていらっしゃるかもしれませんが、Google spreadsheetの関数を使って、簡単に取得できます


北九州市ホームページには、多くの統計データがあります。今回は、単純な農業に関するデータを取得しました。「Importhtml」という独自関数を使うだけです。

【例】=IMPORTHTML("https://www.city.kitakyushu.lg.jp/san-kei/file_0460.html", "table", 1)


これを左端のセルに入力するだけで、Webページの1番目のテーブルが自動取得されます。もちろん、北九州市ホームページのデータが更新されれば、自動的にSpreadsheetのデータも更新されます。

いちいち、データを確認して、Spreadsheetデータを書き換えるという手間はなくなります。

これも、実はChat-GPTと会話して、簡単に構築できました。

次は、Excelデータとしてダウンロードしないといけないデータを、Google App Scriptを使って自動化をします。これは、JAVAというコードを書かないといけないのですが、Chat-GPTに書いてもらいます。その書き方と対話の仕方を、是非、ITクラブで体験してみてください。

【余談】ただ、無作為にデータを取得するのではなく、得た複数データを、自分の事業や研究に役立つための、多量変数データ解析は、順次実践していきます。これはプログラマーだけではなく、例えば、個人で営む町のスイーツショップなどでも活用できます。しかも、ほぼコストゼロです。

コメント

このブログの人気の投稿

「北九州ITクラブ」ver.2.01 が始動します

こんにちは。ITクラブ講師の光井です。  2021年10月からのパイロット期間を経て、2022年4月から開講し、2024年3月で丸二年となりました。有志で始めた活動で、小規模ながら「IT技術を身近に、誰でも活用する」をテーマに活動してきました。 IT技術は、プログラミング言語やロボットなど、ハードルが高い印象をもってしまいますが、何も高度なことだけではありません。身近にあふれるツールや手段を、どうやって使いこなせば、日々の仕事、学問や生活が豊かになるかを考え、非営利として活動してきました。それは、今後も変わることはありません。きっかけを掴めば、誰にだって、豊かになることはできます。それはもちろん、金銭的な豊かさでもあり、心の豊かさでもあります。 今日に至るまで、様々な年齢層やバックグランドを持つ方が、ITクラブを訪れ、関わってもらいました。 2024年4月より、より活動の幅を広げ、様々な人へクラブ活動により気軽に足を運んでもらうため、Ver. 2.01 へバージョンアップします。 詳細は、また後日、アップします。

ITという道具をうまく活用しよう

こんにちは。ITクラブを手伝ってるハヤカワです。 私たちは、子供にはITを知ったり、自分の好きなものを見つけるきっかけづくりとして、大人には自分の仕事や日々の生活で生かせる知識を取り入れるために活用する場としてITクラブを利用してもらえると嬉しいです。 今回は私が仕事でよく使っているチャットGPTを紹介します。 チャットGPTは 人工知能チャットボット です。 簡単に言うとものすごく知識があるお手伝いさんです。 色々使い方はありますが、私は日本語翻訳や文章の推敲、海外の情報をまとめてもらうなどを手伝ってもらってます。 例えば上の文章を” 子供にでもわかりやすく、かたくない文章になるように推敲してください”と頼むと以下のようになります。  もっと複雑なこともできますが、こういうちょっとしたことを手伝ってもらえるだけでも、時間短縮につながります。 有料版と無料版があり無料版でもかなり使えますので、気軽に試してみてください。 使い方がわからなければITクラブで聞いてみてくださいね。

過去を学び、新しい知識を得ること。

2024年残すところ、数時間となりました。ITクラブは、2024年は新しいテクノロジーを積極的に取り入れました。生成AIとGoogle workspace を中心に、「日々の生活や仕事を、ITテクノロジーを道具として使って、生産力を上げる。」ことをテーマに活動していました。 一方で、北九州市では、美術館や門司駅遺構を巡って、様々な議論が繰り広げられました。ITクラブとして、どちらを支持するという意見は、あえて述べませんが、古い言葉で「温故知新」と言われるように、「過去を学び、新しい知識を得ること。」は、とても大切なので、私の経験をご紹介させていただきます。 出展:東広島市公式チャンネルより 以前、仕事で大変お世話になりました、広島杜氏組合組合長の石川達也氏の講演です。石川氏とは、仕事の取引だったり、成分分析、技術普及について、大変お世話になりました。当時、竹鶴酒造の杜氏をされていた頃、石川氏の思想、ご経験を色々と教えていただいたなかで、大変印象に受けたのは、伝統を重んじた中で、新しいことに挑戦することです。それは、決して新しいものに作り替えるのではなく、伝統を尊重し、その息吹を盛り込みながら、酒造りをすることです。 本講演では、広島杜氏組合組合長の石川達也氏が、伝統的な酒造りの本質と、広島の酒造りの歴史における三浦千三郎氏の功績について語っています。 石川氏はまず、 伝統とは単に古いものを指すのではなく、 「普遍性を持つもの」 だと定義します 。つまり、 いつの時代にも通用する価値を持つものだけが伝統と呼べるという考え方 です。酒造りの世界では、江戸時代末期までに伝統的な酒造りがほぼ完成し、その技術は普遍的な価値を持つと石川氏は考えています。 その上で、石川氏は明治時代以降の酒造りの変化について言及します。明治維新による酒株制度の廃止は、新規参入者を増やし、酒造りの技術レベルを低下させました。また、西洋化を目指す社会風潮の中で、伝統的な酒造りは軽視される傾向にありました。 このような状況の中で、三浦千三郎氏は広島の酒造りを大きく発展させました。三浦氏は、徹底した基本の大切さを説き、灘・伏見とは異なる、淡色で甘みのある酒造りを確立しました。これは、当時の全国的な品評会で高い評価を受け、広島の酒の地位向上に大きく貢献しました。 しかし、三浦氏の成功は、皮肉にも伝統的な酒...