pagetakaBlog

最近リフォームと鳥取県日南町の記事多め。写真、PC、ネット等の話題も

PC、ネット、情報端末

Python:東証株式相場表(日報、PDF)を使い、株売買の道具にしたい…道は険しい、時間は限られている。

ちょっと一休みみたいな感じで、「東証株式相場表(日報、PDF)」作業の課題を備忘録的に書きだしました。 東証株式相場表(日報、PDF)を解析し、これまでにできたこと。 東証株式相場表(日報、PDF)を解析し、まだできてないこと。 東証株式相場表(日報…

Python:CSVをMySQLへ高速読込み「LOAD DATA INFILE」(VSCode)その2

この項10/27追記:フォルダ名適宜ご変更のほど ファイル名を変数にする悪あがき、マニュアルでは文字列定数…みたいだけど 前説:CSV単ファイルを処理できました。 「LOAD DATA INFILE」でフォルダ内CSVを一気にMySQLテーブルへ 恥ずかしながらのPythonスクリ…

Python:CSVをMySQLへ高速読込み「LOAD DATA INFILE」(VSCode)

CSV(BOM無し)をMySQLへ読み込む LOAD DATA INFILE をPythonスクリプトで書くとこうなった…合ってるかな? LOAD DATA INFILE をPython…CSVのcolumnとDB.TABLE.columnの関係づけは… CSV(BOM無し)をMySQLへ読み込む 環境:Win11(64)home、VSCode、Python3…

XAMPP:終了時エラーが起こる。プロパティ変更でうまくいきました。

XAMPPの「quite」(終了)ボタンを押すとエラー PC起動後、手動でXAMPPを起動しています。用事が済んで、「quite」(終了)ボタンのあとは、お決まりのように、「アクセスが拒否されました」との旨の表示が出ていました。 【XAMPP:終了時エラー。プロパティ→…

Python:東証株式相場表(PDF)をダウンロードする。

ネット上のスクリプトをお借りし、東証株式相場表(複数・PDF)DLできました。 前説:自動で東証株式相場表(PDF)をDLしたい。 「デジタル推進課」さんのブログにドンピシャのスクリプトがありました。 恥ずかしながらのPythonスクリプト 課題:CRON動かす…

VSCode:Pythonで別PCのMySQL接続、mysql.connectorで実現。

mysql.connetorで別PCのMySQLに接続できたみたいです。 前説:どこにRDBのデータ置くんだと考えたら、自PC内ではあまり都合よくないよな~と思った。 設定1:Win10PCにXAMPP入れ、その中のMySQLをつかってみることにしました。 設定2:Win11PCのVSCodeで使…

東証上場銘柄:「市場・商品区分」は整理コードがないみたい…。

【内国株式だけを残した「東証上場銘柄」(部分)】 「東証上場銘柄」には10種類の「市場区分」情報。 「内国株式」だけを「東証上場銘柄」から選択する。 関連記事 「東証上場銘柄」には10種類の「市場区分」情報。 「東証上場銘柄」(Excel、XLS)を閲覧し…

Python:Excel読込みんだらPandas.DataFrameでどうなってる…のか…。

東証上場銘柄表から、RDBのいくつかのテーブルが作れそうです。 前説:東証上場銘柄一覧(Excel:XLS)をPandasで読み込んだらDataFrameができました。 DataFrameは、「辞書型」らしい…。 課題:コード・銘柄名一覧表など各種一覧表をつくりたいです。 【東証…

Python:Pandasでweb上のエクセル(XLS)取得し、ターミナル出力(VSCode)

東証上場銘柄一覧(xls)を読み込んで、VSCodeターミナルに表示…ができたみたいです。 前説:ネット上のExcelファイルをDLし保存せずそのままPythonで処理したかった。 pandas.io.excel.read_excel(url,etc) でDataframeに取り込めるらしいというのが、まず…

Python:VSCodeでPDFMinerを使って、東証株日報PDFから表抽出(3)

東証株日報からのデータ抽出、少し前進。耄碌爺にこれ以上できるか全く不明ですが、ひとまず、世間様へ恥さらしながら…。 追記・10月12日:できあがったCSVと東証株式相場表(日報、PDF)に齟齬 10/28追記:「まとめ」UP 追記・10月10日:スクリプトの修正が…

Python:VSCodeでPDFMinerを使って、東証株日報PDFから表抽出(2)

今回できたこと:東証株日報PDFからCSVへの書き出し、部分的にできた。 PDFMiner解析の結果、異なるところにテキスト・データが…。 課題:複雑なページもある東証株日報PDF 今回できたこと:東証株日報PDFからCSVへの書き出し、部分的にできた。 東証株日報…

Python:VSCodeでPDFMinerを使って、東証株日報PDFから表抽出(1)

東証株日報PDFのテキスト抽出で少し前進がありました。 10/28追記:「まとめ」UP 前説:Java+tabula-pyでほぼ挫折していました。その後、PDFMinerでなんとかなるのではと思ってはみたものの…。 現状:lprms = LAParams(boxes_flow=None) を使って縦罫線無視…

Python:VSCodeでJavaを介在させ、東証株日報PDFから表抽出(3)

10/28追記:「まとめ」UP 前説:Java + tabula はほぼ挫折 現状:PDFMinerでテキストファイルにしてみたけど 今後:PDFMinerの字間・行間調整でちゃんとテキスト出力できるか試してみるつもりですが 10/28追記:「まとめ」UP 東証株式相場表をDLし、PDFMiner…

マウス補修に接着剤。

【動きが重たくなったマウスに接着剤使って補修】長らく使ったマウス、動きが重たくなっていました。マウスの底面、マウスパッドも洗って汚れを落としましたけど動きは変わりません。それで、購入当初「フェルト」「クッション」のようなものがついていたで…

Python:VSCodeでJavaを介在させ、東証株日報PDFから表抽出(2)

10/28追記:「まとめ」UP 前説:東証株式日報(PDF版)をPythonで処理する準備。 現状:tabulaインストールはできたようだがエラーがいろいろ出ている。 今後:ひとまず「保留」「挫折」ということで他の道具を探してみます。 17日追記:東証株式相場表でも…

Python:VSCodeでJavaを介在させ、東証株日報PDFから表抽出(1)

前説:株式売買の参考にしていた東証株式日報がExcelからPDFに変更されていた。 VSCodeでJavaを使う準備は手順が長そう。 JavaSDKをDLしてインストール。 VSCodeでJavaSDKをつかうため、Extension Pack for Javaをインストール。 VSCodeのsetting.jsonを編集…

スマホ:NFCをONにしてなかった。マイナカード読み取り…。

コロナワクチン接種証明をスマホで準備しようということで作業しました。すでに2回入力していて、3回目の作業です。 準備するものは、NFC読み取りの自分のスマホ、マイナカード、パスポート(海外用)。接種券も確認用にあった方が良いかもしれません。NFC…

ラズパイ:USBのWebカメラを使う。

前回、Webカメラの設定うまくいきませんでした 前回、USB接続のWebカメラでは静止画を一回撮れただけで終わってしまいました。カメラが捉えている様子を、モニター画面に映す(動画)というのをPythonをつかってやってみたいというのが、今回の爺の妄想です…

ラズパイ:固定IP設定

ラズパイのOS再インストール ラズパイでこれまでに以下のことができました OS再インストール ネット接続(Wi-Fi/有線LAN) ネット閲覧 日本語表示、日本語入力 音声出力(HDMI/3.5mmジャック切り替え) あとは、固定IP設定、SSHなどでしょうか…。 固定IP設定…

ラズパイ:音が出ないのをconfig.txt書き直しで解決

前説 ラズパイのOS再インストールを進めています。まだ、音が出ません。これを解決しようと、ネット徘徊しました。備忘録です。一般には、LXTerminal→sudo raspi-config→7 Advanced Options→A4 Audio→Choose the audio output→0~2を選択して設定できるみた…

ラズパイ:キーボードから日本語入力できるようする

OS再インストールの途中です:日本語入力できない状態の解決 ラズパイ最初のOSインストールがすんなりと行かなかったもので、改めてOSをインストールしなおしている途中です。 これまでに、OSインストールができ、ネット接続、Web閲覧ができました。まだ、キ…

ラズパイ初期化:マイクロSDをラズパイにセット(「OS再インストール」)

前説 ラズパイの初期化(「OS再インストール」)をしよう、といっても初回立ち上げ時に暗中模索状態でイロイロ不要なものも入れたみたいなので、復習ということで、改めてOSイメージを書き込んだマイクロSDを用意しました。 pagetaka.hatenablog.jp マイクロ…

ラズパイ初期化:OSイメージをSDに書き込む(「OS再インストール」)

9/26追記:「初期化」というより、「OS再インストール」ですね。OSイメージをマイクロSDに書き込んでラズパイに挿入したら、そういうことでしょうね。以前のセッチングの情報がラズパイ内に残る、というようなことがどうなのか、爺にはよくわからぬデス。 ラ…

ラズパイ:Raspberry Pi4を買いました。

通販でラズパイ購入 とりあえずできたこと 気づいたこと:ネット環境と別PCは必要、スターターキット購入はよく検討して これからの目論見≒妄想:ラズパイをクリーンにしてもう一度最初からやってみようかと 暇つぶしに電子工作でもしてみようかということで…

部品取り:PCマザーボードの半田が溶けにくく苦労した。

前説 用意するもの 参考にしたサイト・ページ ポイント:今回はコンデンサを基板から取る場合 反省点:力任せはNG 前説 電子工作でもして遊ぼうかと思い、古いデスクトップパソコンのマザーボードからコンデンサなどの部品を取ろうとしましたが、半田がなか…

WP:特定執筆者の記事のエクスポート

複数執筆者が複数カテゴリを書いているWPサイトの特定分だけエクスポート 爺が生活している身近なところにあるサイト管理体制の変更があり、同居していたとある団体の記事、リンクする画像などを抽出・エクスポートする必要が生じました。複数の執筆者がいろ…

MySQLの操作。

前説 pagetaka.hatenablog.jp Wordpressで使っているMySQL5.1を同5.7に移行しようとしたときの補完記事です。 さくらインターネット help.sakura.ad.jp 32MBの壁 あらかじめエクスポートしたsqlファイルをテキストエディタを使い修正したのは、(1)使用す…

MySQLの操作

さくらインターネットからメールが届き、MySQL5.5を同5.7にアップグレードして、とのことでした。 Wordpressにつかっているデータベースです。大部分は自分でできました。しかし、サイズの大きさから接続時間内にUPLOADが終わらないというのがあり、これにつ…

ETCエラー(2)

前説 pagetaka.hatenablog.jp ほとんど何事も考えず料金事務所前にたどりついたのですが… A料金事務所から一番遠い側の路側帯から、歩いて料金ゲート前を横切り同事務所へ向かいました。横切ったあたりでしょうか、事務所の中から、お二人が肉声でなにか叫ん…

ETCエラー(1)

復路、高速に入る料金所でエラー 昨日午後、NEXCO西日本の高速道路に入ろうとA料金所ゲートを通過のときエラーになりました。エラーコードは「2」と聞こえたような気がします。ゲートは開きましたので通り過ぎ路側帯に停車し、ハザードランプをつけました。…