なろう分析記録

『小説家になろう』をふくめ『ネット小説投稿サイト』を分析する。コード置き場,主にPython,javascript,たまに創作。

【作業メモ】B660-HDVのBIOSを更新したらM.2 SSDがブートの優先順位から消えてブートできなくなった時の対処方法

症状 B660-HDVのBIOSを更新したらM.2 SSDがブートの優先順位から消失。再起動をしてもBIOS画面が立ち上がるだけでM.2 SSDに入っているWindowsは起動せず 環境 メインストレージにWindowsが入ったM.2 SSDを使用。その他のファイル用にSATA接続のSSDとHDDを1つ…

【ConoHa VPS】ubuntu20.04 + Flask + apache2 + mariaDB でSSL対応Webサーバーをセットアップした作業メモ【2022年1月版】

ConoHa VPSでwebサーバーの環境を構築 ConoHa VPSで環境構築した時の作業メモです

【レンタルサーバー】バリューサーバー新仕様マイグレーションへの対応メモ【Python/Flask】

バリューサーバーのアップデート 2021/12/13頃に以前からなろう作者分析などのサイトで利用しているvalue-serverが新仕様にアップデートされ、それに伴い手動で対応しなければならなかったことのメモを書き残しておきます 環境 Python 3.7.4主要パッケージ F…

【作業メモ】pip-reviewの No module named 'pip._internal.utils'エラーをpipの手動再インストールで解決した方法

No module named 'pip._internal.utilsのエラー 久しぶりにpip-reviewを用いてPythonパッケージを一括アップデートしようとした所、pip関係と思われるエラーに遭遇したのでその解決方法のメモを残しておきます

Amazon Fire TV Stickが勝手に再起動する問題を修理したメモ

fire tvFire TV Stickの熱暴走が原因と思われる問題をグリス塗って直したメモ

【Python GUI】「tkinter」で関数実行中にウィンドウがフリーズしてしまう問題を「threading」を使って回避する方法

tkinterでGUIを作ると関数実行中に固まってしまう…… PythonのGUI実装ライブラリはいくつか存在しますが、その中でも「tkinter」はPythonに最初から入っている最もシンプルなライブラリです。今回は「tkinterで実装したGUIのボタンクリックで動作する処理がフ…

【Pythonサンプルコード】Jupyter Labからのコマンドライン操作とバージョン表記無し版『requirements.txt』の書き出し

Pythonコードからのコマンドライン操作 今回はPythonコードからコマンドラインを実行する方法と、それを利用したバージョン表記の無し版「requirements.txt」の作例をご紹介したいと思います。サンプル

【2020年版】小説家になろうの作品を分析するツール・サイト【なろう分析】

なろう分析はwebツール・webサイトを使うと手軽に行える なろうは戦場。戦場で重要なのは「己の立ち位置」を知るための分析です。そこで今回は「小説家になろう」において公開されている作品を手軽に分析できるサイトをご紹介したいと思います。 なろう分析…

【Python】joblibを用いて簡単に『並列処理』を行う方法

今回はPythonのjoblibパッケージを用いて手軽に並列処理を行う方法をご紹介したいと思います。joblib

【Python+Pandas】『既存の列』から『新しい列』をデータフレームに追加する方法

今回はPython+Pandasのデータフレーム内にある『既存の列』を元に『別の新しい列』を作成するサンプルコードをご紹介したいと思います。新しい列の追加

【Lightbox for Bootstrap】Bootstrap4でモーダル画像をお手軽に実装する方法

今回はクリックすると『フワっ』と拡大表示される『モーダル画像』を『Bootstrap4』でお手軽に実装する方法をご紹介したいと思います。モーダル

【Pythonサンプルコード】複数のエクセルファイルを1つにまとめる方法

複数のエクセルファイルを1つにまとめるPythonのpandasを用いて列名が同じ別々のエクセルファイルを一つにまとめる方法をご紹介します

【アクセス解析】はてなブログでPython系ブログを始めてから約10ヶ月経った現在のアクセス状況を調べてみる

今回はみんな大好き「アクセス解析ネタ」です。アクセス解析

【Pythonサンプルコード】PyMySQLを使ってMySQLテーブルの重複行を削除する方法

今回はPyMySQLを使って、PythonからMySQLを操作しDBテーブル内の重複レコードを削除する方法をご紹介したいと思います。PyMySQL

閏年を含めた年間日数の表

閏年を含めた年間日数のリストが欲しかったところ、ネットで探してもなかなか見つからなかったので手っ取り早く作りました。うるう年

【2020年版】とりあえず入れておくべきおすすめPythonパッケージ25選【Python】

Pythonはパッケージを使うことで高度なことが手軽に実現できる Python上達の近道はパッケージを知ることPythonは追加パッケージを導入することよって統計解析から画像処理まで様々なことが出来るようになります。今回は数多く存在するPythonパッケージの中か…

【Pythonトラブルシューティング】条件抽出したPandasのDataFrameにrange(len(df))を使った時に起こるエラーの回避方法

「pandas/_libs/index.pyx in pandas._libs.index.IndexEngine.get_value()」のエラーについて、発生原因と回避方法をメモしておきます。

【2020年正月】ディスクトップPCをWindowsごとHDDからSDDにクローン換装した作業メモ

正月にディスクトップPCをHDDからSSDにOSごとクローン換装したのでその作業メモを残しておきます。ベンチスコア

【なろう年末”誤字掃除”】今年の誤字は今年のうちに修正!なろう作品の誤字を発見しやすくサポートするPythonコード!!

年末はなろう作品の『誤字』を掃除しよう! 今年の誤字は今年のうちに修正しましょう。しかし誤字を修正するにしても、いちいちページを開いて見直して行くのは非効率ですし、誤字は見つけようとしてもなかなか見つかりません。そこで「なろう作者ID」を入力…

【Python】Pandasでエクセルファイル(.xlsx)をDBの様に使うサンプルコード

Pythonで表データの読み出し書き出し PythonではPandasを使うことで簡単に表計算を行うことができますが、データをファイルとして保存する場合には一工夫が必要です。そこで今回はPandasの表データをエクセルファイル(.xlsx)に保存/読み込みするサンプルコ…

【Python】指定したwebページに非SSL(HTTP)画像コンテンツが存在するかどうか自動チェックするサンプルコード

はじめに 前回、【Python】なろう作品の「http://」画像の存在をチェックするサンプルコードという記事を書きましたが、よく考えてみると非SSL(HTTP)サイトからの画像引用は小説家になろうに限らず行われていることであり対応が必要です。Flashを用いたweb…

【Python】なろう作品の「http://」画像の存在をチェックするサンプルコード

非SSL(HTTP)サイトの画像は標準で表示されなくなる 画像設定項目見直しのお願い - 小説家になろうグループ公式ブログ blog.syosetu.com昨今、ほとんどのwebサイトでは、よりセキュリティ性の高いSSLに対応していますが、まだ一部では従来の非SSLサイトも存在…

【Python】tweepyでRTを除外する2つの方法

RTを除外したい ツイッターAPIを利用してツイート検索をする時、リツイート(RT)を含まないオリジナルなツイートだけを取得したい場面もあると思います。そこで今回はいくつかのパターンに分けて、RTを除外する方法をご紹介したいと思います。取得例

【Pythonサンプルコード】Pandasで指定した列のユニークな要素と出現回数をリストとして取得する

ユニークな要素と出現回数をリストで取得したい Pandasを使って指定列のユニークな要素と、それに対応する出現回数が入ったリストの作り方をご紹介します。sample

【Python】IllegalCharacterErrorを回避する方法

Pandasでたまに出る「IllegalCharacterError」 スクレイピングや各種APIから文字データを取得し、Pandasでエクセルファイルに書き出そうとする時、たまに表示される「IllegalCharacterError」を回避する方法について調べてみました。

【Python】Flaskで表示された結果をHTMLファイルとして保存する

Flaskの表示結果をHTMLファイルとして保存したい Pythonの軽量webフレームワーク「Flask」を使えば、ユーザーからの入力に対して簡単に動的なhtmlを返す事ができます。ただFlaskで表示される結果は基本的に一時的なものであり、特に設定をしない限り表示され…

【Pythonサンプルコード】なろう全作品情報一括取得ファイルに『作者』に関する集計項目を追加するPythonコード

以前、全なろう作品の情報を全項目・全取得が入ったエクセルファイルを出力するPythonコードをご紹介しました。 karupoimou.hatenablog.com 今回は、そのコードで出力したエクセルファイルに対して「作者」に関する集計項目を新たに追加するPythonコードを紹…

メモ:レンタルサーバー上のMySQLにPythonでデータの出し入れ操作を行う

PythonでMySQLを操作する バリューサーバーのMySQLをPythonで操作する方法についてのメモ 準備 pip pip install PyMySQL pythonでMySQLを扱うためのモジュールはいくつか存在しますが、今回は「PyMySQL」を使用。

【Pythonサンプルコード】tweepyでURLが含まれるツイートを抽出する:expanded_url

ツイートに含まれるURLは省略されている ツイッターAPIを扱う代表的なPythonモジュールとして「tweepy」があり、tweepyを使うことで簡単にツイートのデータを検索したり、ツイート内容を抽出したりできます。これを利用することで「ツイートに含まれるURL」…

Pythonでデータの正規性を確認するサンプルコード

データの正規性を確認する 様々な統計学的な検定において、解析対象データが正規性のあるもの(パラメトリック)か、非正規(ノンパラメトリック)なものでは、適切な検定方法がことなるため、最初にデータの正規性を確認する必要があります。 そこで今回は…