Kitahara

Software Engineer Language: Python/JavaScript Certification: JSSC Grade Pre-1 データの収集と可視化の方法を発信しています

Kitahara

Software Engineer Language: Python/JavaScript Certification: JSSC Grade Pre-1 データの収集と可視化の方法を発信しています

マガジン

  • データの集め方講座

    データの集め方のノウハウをお伝えします. 当マガジンはデータ分析初心者がデータの取得方法を効率よく探すことができるようにすることを目的としています. 対象の方:データ分析に興味がある方・PythonやRのプログラミングに興味がある方

  • Python技術記事

    データの集め方講座や備忘録の記事の中でPythonのものだけを集めたマガジンです

  • ウェブエンジニアの備忘録

    データの集め方講座の補助記事やその他役に立つ知識を纏めています.

  • データの使い方講座

    データの使い方を解説する講座です! 対象者:プログラミングに興味がある方・データの使い方に興味がある方

  • For Foreigners

    Here is a summary of the article translated into English.

最近の記事

  • 固定された記事

【データの集め方講座】Pythonで株式情報を収集しMySQLに保存

はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日はPythonを使った株式情報の収集方法を解説します! 筆者も趣味でこの方法を使ったコードをレンタルサーバーで自動実行しており, データを集めていますので非常に実用性の高い記事になっているのではないかなと思っています.   なお, 本記事で利用するサイト「無尽蔵」ですが, 掲載の継続性が確約されているものではありません. あらかじめご了承ください. 株式情報の

    • 【データの集め方講座】Node.jsでAPIからデータを取得-コードの解説多め-

      はじめにご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日は先日紹介したNode.jsでAPIにリクエストを送り情報を取得する方法を解説します. Node.jsでデータを取得するメリットモダンなフロントエンドからリクエストを送れる Node.jsを使うモチベーションとしてはReact.jsやVue.jsといったモダンなフロントエンドからリクエストを送ることにあります. React.jsやVue.jsといったユーザーインターフェース

      • 【Webエンジニアの備忘録】Twitter Botのエラーの対処

        はじめにごあいさつ ご高覧いただき有難うございます. ソフトウェアエンジニアのKitaharaです. 今回はTwitter Botでエラーが発生していたので確認したという記事です. (いつもの記事に比べボリュームは抑えめになっています.) エラー内容概要 先日投稿した下記の記事で紹介させていただいたTwitter自動広告アプリをHerokuで運用しているのですが, 先日投稿が出来ていない日があることに気付いたのでエラー内容を確認しました. 詳細 基本投稿はできてい

        • 【データの集め方講座】日経平均株価を自動取得し Windowsデスクトップ通知でリマインド

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日はPythonを使った日経平均株価の収集方法を解説します! 今回はBeautiful Soupでスクレイピングをしたのちに, Windowsのデスクトップ通知とcsvファイルに保存を自動的に行うプログラムを作成します. ================================================== デスクトップ通知はリマインドに最適なツー

        • 固定された記事

        【データの集め方講座】Pythonで株式情報を収集しMySQLに保存

        • 【データの集め方講座】Node.jsでAPIからデータを取得-コードの解説多め-

        • 【Webエンジニアの備忘録】Twitter Botのエラーの対処

        • 【データの集め方講座】日経平均株価を自動取得し Windowsデスクトップ通知でリマインド

        マガジン

        • データの集め方講座
          18本
        • Python技術記事
          17本
        • ウェブエンジニアの備忘録
          9本
        • データの使い方講座
          1本
        • For Foreigners
          3本
        • R技術関連記事
          4本

        記事

          【データの集め方講座】株式投資インフルエンサーのTweetを収集する-イナゴ投資-

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitahraです. 本日は株式投資インフルエンサーのTweetを収集してみたいと思います. ================================================== イナゴ投資 株式投資にはイナゴ投資というものが存在します. イナゴ投資家とは野村證券によると以下のようなものです. 調べてみたところこの「材料」は個人投資家のTweetの投稿でもなりえるようで

          【データの集め方講座】株式投資インフルエンサーのTweetを収集する-イナゴ投資-

          今月はnote週3で投稿します! 今週は金曜日と土曜日に投稿する予定です! [今週投稿予定の記事] - 株式投資インフルエンサーのTweet収集 - 日経平均株価の自動取得・リマインダーツール作成

          今月はnote週3で投稿します! 今週は金曜日と土曜日に投稿する予定です! [今週投稿予定の記事] - 株式投資インフルエンサーのTweet収集 - 日経平均株価の自動取得・リマインダーツール作成

          【データの集め方講座】Node.jsを使って株データを収集, MySQLに保存

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日はNode.jsを使った株式情報の収集方法を解説します! ================================================== 今回の記事は下記の記事のNode.jsの実装になります. ================================================== 株式情報を取得するメリット・取得方法株式

          【データの集め方講座】Node.jsを使って株データを収集, MySQLに保存

          ==一か月間お休みします== 平素よりご視聴いただきありがとうございます. noteの更新ですが, 仕事の都合上更新頻度を保つことが難しいため, 1か月間お休みをいただきます. ご迷惑とご心配をおかけしますことを心よりお詫び申し上げます. Kitahara

          ==一か月間お休みします== 平素よりご視聴いただきありがとうございます. noteの更新ですが, 仕事の都合上更新頻度を保つことが難しいため, 1か月間お休みをいただきます. ご迷惑とご心配をおかけしますことを心よりお詫び申し上げます. Kitahara

          【データの集めかた講座】楽天市場の商品情報を収集する

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日から3本立てで楽天市場の商品情報の収集方法を解説します! 一日目:商品価格ナビ製品検索APIで商品情報を収集 二日目:商品価格ナビ製品検索APIを使ってほしい商品の平均価格と市場に存在する数を収集 三日目:PaaSを使って自動値段監視システムを構築 完成物最終的に商品情報を収集できるようになります. ============================

          【データの集めかた講座】楽天市場の商品情報を収集する

          【データの集め方講座】Pythonでラーメン屋を検索[OWL de ラーメンオントロジー]

          はじめにご高覧いただき有難うございます! ソフトウェアエンジニアのKitaharaです. 本日はSPARQLの練習に使えるサイトを発見したので解説しながらデータを集めています. SPARQLが初めてという方へSPARQLは便利ではあるのですが少しマイナーな言語です. そこでSPARQLは何かや基礎文法をまとめた記事を作りました! まずはこちらから見てみてください! SPARQLとは何か SPARQLの基礎文法 使用する言語・ライブラリ・エディタ等の説明Pythonライ

          【データの集め方講座】Pythonでラーメン屋を検索[OWL de ラーメンオントロジー]

          【データの集め方講座】Jリーグの日程を取得する-Python×Selenium-

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. Jリーグ見ていますか? Jリーグとは日本のプロサッカーリーグなのですが, 現在第2節です 今年はどこが優勝するのか楽しみですね! というわけで, 本日はJリーグ の試合データの収集方法を解説します! そもそもJリーグって Jリーグを知らない方向けにJリーグの補足情報について書いていきます. 特徴としてはクラブ名称に企業名が入っていないことで原則として名前を地域名

          【データの集め方講座】Jリーグの日程を取得する-Python×Selenium-

          【Webエンジニアの備忘録】駆け出しエンジニアに伝えたいエンジニアとして大切だと思うこと

          はじめにご高覧いただき有難うございます! ソフトウェアエンジニアのKitaharaです. 本日は「エンジニアとして大切にすべきこと」をテーマに話をしていきます. まずはインターネット上での意見を見てみましょう. インターネット上での意見学び続ける姿勢 普段から技術記事を読む カンファレンスに参加する 調べる癖をつける コミュニケーション力をつける お客様とのコミュニケーション 社内でのコミュニケーション 時間管理能力を付ける 体調管理能力を身に着ける どれ

          【Webエンジニアの備忘録】駆け出しエンジニアに伝えたいエンジニアとして大切だと思うこと

          【データの集め方講座】当日の株式情報を最速で集める [Pandas datareader]

          はじめにごあいさつ ご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日は株価データの収集方法を解説します! もしかしたら「Kitaharaさん前にも株データの記事かいていませんか?」という方もいるかもしれません. おそらく下記の記事のことだと思います. 今回は上記の記事とは別の方法で株データを集める方法を見つけたのでやってみることにします. Pandas DataReaderを使ってみたPandas DataReaderを使って

          【データの集め方講座】当日の株式情報を最速で集める [Pandas datareader]

          【Webエンジニアの備忘録】初心者に最適な言語は何か?

          はじめにご高覧いただき有難うございます! ソフトウェアエンジニアのKitaharaです. 本日は「初めて学ぶ言語は何が良いか」という話をしていきます. ことのはじまり先日Twitterでプログラミングを始めるにあたってどの言語がよいかという投稿が話題を呼んでいました. 様々が意見がでていて個人的に非常に興味深かったので, 意見をまとめたあとに自分の意見を書いていきます! Twitterで寄せられた意見言語と理由をセットでまとめていきます. 太字は複数人からおススメされた

          【Webエンジニアの備忘録】初心者に最適な言語は何か?

          【データの集め方講座】英語の記事を収集、翻訳。

          はじめにご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日はGoogle Newsで海外の情報を集めたうえで@TexTra®で日本語データとして使えるようにしてみようと思います. この記事で何ができるのか海外の情報を日本語で習得できる 日本ではなかなか目にすることのない海外の情報を簡単に知ることが出来ます. しかも日本語データにしているのでそのまま形態素解析に入力して分析をスタートすることができます. 今回使用する@TexTra®

          【データの集め方講座】英語の記事を収集、翻訳。

          【データの使い方講座】TwitterAPI×NoteAPIで自動広告アプリ制作

          はじめにご高覧いただきありがとうございます. ソフトウェアエンジニアのKitaharaです. 本日は先日紹介したNoteAPIとTwitterAPIを使って自動で記事を広告してくれるアプリケーションの制作をしていきます. 完成物実際のツイート こんなツイートを自動で送信しています アプリのログ 今回はHerokuというサービスと使ってデプロイするのですが, ログは以下の様な感じで出力されています. Twitterは文字制限があるので送信できないことがあります. また

          【データの使い方講座】TwitterAPI×NoteAPIで自動広告アプリ制作