• ワードプレスで作るオートブログ講座2
2014/08/26 (火) 0 467

前回はキーワードに関連した文章のみを抽出する方法を紹介しました。 今回は文章を比較して類似しない文章のみにする方法です。 ネットには類似した文章はたくさんあります。特にニュースはたくさんのサイトで引用されるので、同じ文章...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/07/26 (土) 0 359

前回はスクレイピングしたデータをクリーニングする方法を紹介しました。 今回はオートブログの要である「よりキーワードに関連性のある文章のみを抽出する」方法です。 ウェブページには複数の情報が存在します。ひとつのウェブページ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/07/25 (金) 0 349

前回はスクレイピング(抽出)をしたのですが、取得したデータには余計な改行やタブ、スペースといった見えない文字列が付随しています。そこでデータを使えるようにクリーニングをする必要があります。 例えば以下のようなウェブページ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/07/03 (木) 0 1,457

前回は分かち書きでコンテンツからキーワードを作成しましたが、今回は外部サイトにアクセスしてHTMLソースから必要な情報をスクレイピング(抽出)します。外部サイトへのアクセスには「cUrl」を使います。 外部サイトにアクセ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/06/29 (日) 0 333

間が空いてしまいましたが、前回はPHPで外部サイトにアクセスする方法を説明しました。 ここまでで下準備が大体できたことになるので、次は個々に機能を構築し、最後に統合していくことになります。 今回は外部サイトから取得したコ...続きを読む

2014/06/29 (日) 0 364

オートブログをだいたい3週間ほど稼働させてみて結果が出ました。いくつか問題点も浮かんだので対処済みです。 結果はどうかというと、大変非常に効果があることが分かりました。むしろ効果があり過ぎて色々と問題もあります。 以下は...続きを読む

2014/06/13 (金) 0 371

  中間報告です。オートブログ稼働から1週間ちょっと経ちましたが、 ・一日のユニークユーザー数6800人突破 ・リアルタイム接続68人突破 という結果となっています。この調子で行けば月間で20万UUは堅いと思わ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/06/06 (金) 0 434

オートブログ講座のオートブログボットですが、ただいま稼働実験中です。 オートブログボットは記事の要約に加えて関連画像も表示する機能を加えました。 プログラムは完成したのですが、実験データを取る必要があり、しばらく実際に稼...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/05/26 (月) 0 448

今回はPHPで外部サイトにアクセスする方法です。Goutteというライブラリを使う予定だったのですが、使用できる環境に依存するため、過去に取り上げた方法同様に「Simple HTML DOM Parser」を使うことにし...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/05/12 (月) 0 274

前回は検索エンジンの検索結果をスクレイピングして、URLとアンカーテキストの一覧を取得しました。 取得したデータは一旦AJAXとPHPを使ってサーバーに保存するのですが、この処理については後述するとして、先にPHPでコン...続きを読む

2014/05/12 (月) 0 266

前回はクロスドメインのコンテンツ取得までをやりましたが、今回は取得したコンテンツをスクレイピングする方法です。 前回はコンテンツをテキスト形式で取得していましたが、今回はHTML形式で取得します。 コンテンツはHTML形...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/05/01 (木) 0 464

では実際にひとつひとつ順を追って構築して行きたいと思います。 まずは、クロスドメインの単独テストからです。 因みにクロスドメインというのは、異なるドメインを跨いで処理をする、という意味です。要するに自分のサイトではない他...続きを読む

2014/04/29 (火) 0 412

前回は、類似のブログ記事を一つの記事に連結してコンテンツを圧縮できるジョイントプラスワンを完成させましたね。二ヶ月ほど運営してみた結果ですが成果が出ています。 ワードプレスの問題点として記事数が増えてくるとサーバーに負荷...続きを読む

2014/04/16 (水) 0 303

今回は前回までのスクリプトを実際に実装する処理です。ジョイントポストワンは今回で最後となります。 ワードプレスのテーマフォルダに外部ファイルとして読み込むためのファイルを作ります。 これは例によって使用しているテーマによ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/04/16 (水) 0 275

今回は後半のスクリプトです。 前回は「YARPP」から記事IDを配列で取得し、各記事のデータを整形しひとまとめにして保存をする処理まででしたが、後半は既に統合された記事に対して条件に沿って記事を追加する処理です。 統合さ...続きを読む

  • ワードプレスで作るオートブログ講座2
2014/04/02 (水) 0 384

今回はYARPPから抽出した記事IDの入った配列を処理するスクリプトです。 前回は記事IDを配列の「$ID_LIST」に格納したので、配列をループ処理して記事をひとまとめにする処理です。 ここで初期設定を決めておきます。...続きを読む

2014/03/21 (金) 0 331

今回はスクリプト部分の作成です。 前回、プラグインのYARPPを設定しましたね。このプラグインは関連記事を表示する機能を持っています。 ジョイントポストワンは関連記事を抽出する機能を利用して、複数の記事を一つにまとめます...続きを読む

2014/03/12 (水) 0 299

というわけで、複数の記事を一つにまとめる「ジョイントポストワン」の作り方です。 この記事から読んだ人は複数の記事を一つにまとめるメリットとはなに? と思うかもしれないので、簡単に説明しておきます。 ワードプレスの記事をた...続きを読む

2014/03/04 (火) 0 241

今月のオートブログの目玉カスタマイズは「ジョイントプラスワン」です。 以前、日本語の分かち書きで文章をバラバラにして頻出単語を抽出し、それを元に検索エンジンで検索して自動的にコンテンツを探すスクリプトを提案しましたが、そ...続きを読む

2014/02/26 (水) 0 403

今回で人気記事アライバー編が最終回です。次回より新章突入です。 前回はカウントする仕組みを作ったので、次はスケジュールに登録して自動実行させます。 編集するファイルは例によってテーマフォルダにある「functions.p...続きを読む