クローラー

DELISH KITCHENとは？DELISH KITCHEN（デリッシュキッチン）は、日本の人気レシピサイトです。このサイトでは、ユーザーが自分のお気に入りのレシピを投稿し、共有することができます。DELISH KITCHENは、美味しくて簡単な料理のレシピを中心に提供しており、多くのユーザーから支持を受けています。ユーザーが投稿したレシピを閲覧するだけでなく、自分のお気に入りのレシピを保存したり、他のユーザーとの交流を楽しむこともできます。また、ユーザー同士でのコメントや評価も行われており、お互いにアドバイスや意見を交換することができます。スクレイピングツールの概要ScrapeStormと…

だいぶんとかかりましたが連結式のキャタピラが完成、両手で持ってぶら下げると放物線を描いて垂れ下がります。気持ちいい…… これでクローラー（キャタピラ動力）を作って、と思ったのですが以前のように面白がって動力シャーシを自作する気力がぜんぜん起きません。なのでタミヤ楽しい工作シリーズのパーツを目一杯利用することにしました。 同じシリーズのパーツなので規格が統一されていて楽ちん。あまり悩まずに組み立て説明書の作例にあるヴァージョンがなんなく完成。キャタピラも何気に自然に垂れ下がって良い感じです。 良く考えられたデザインだと思いますが、ただ幅も長さもなんか少し間延びしして見えるのが……。早速バラしても…

暑いですね。こう暑ければ色々テストしたいのですが、なかなかしんどいです。ですが、行います。試行錯誤が、楽しいですから(自己奮起) このマシンは「撮影を自在に」ということをコンセプトに作成したため、カメラの位置が結構、無限大にあります。加えて、アクションカメラ(dji action 2)の設定にもロックステディ(超広角、水平撮影機構なし)とホライゾンステディ(広角なし、水平撮影機構あり)があり、一つのポジションでも二つの撮影モードを試せるため、実際、撮影や運用となると、ここはこうしていれば…と思うことが結構あります。(撮影モードは他にもあるのですが、視野の広さや、ラジコンの車載動画としての面白み…

一旦、シェイクダウンできる状態になったため、作り込み説明。 元々、ビートル x lcgで使用していた中華製のlcgフレームです。ビートルでも十分面白く、クローラー的な走りもそれなりに面白かったのです。 が、 車載カメラでは思ったように綺麗な動画撮影ができるわけでもなく、おもしろさに欠け、自身が車載カメラを撮影する上で大切にしている「冒険しているかのような動画撮影」は非常に難しかったわけです。その上、あのような重いものを装着するわけですから、走破性の低下が著しく、クローラーの面白さもかなり削がれていました。 であれば、もとより、車載カメラの自由性と冒険感のある撮影ができるようにそれを基本としたラ…

iタウンページとは？iタウンページ（アイタウンページ）は、日本の電話帳や地域情報を提供するオンラインのウェブサイトです。iタウンページは、地域ごとに電話番号や住所、企業や店舗の情報を網羅的に掲載しており、ユーザーは必要な情報を検索することができます。iタウンページは、地域情報を効率的に収集・提供することで、地域の住民や訪問者にとって便利な情報サービスとなっています。特に地域でのビジネスを展開している企業や店舗にとっては、iタウンページに掲載されることで、地域の顧客に対して広告や情報を発信することが可能です。スクレイピングツールの概要ScrapeStormとは、強い機能を持つ、プログラミングが必…

今回は「アドセンスの合否を判断するクローラーは、およそ３日おきにサイトを巡回しているのではないか」という仮説を検証したいと思います。 なぜこんなことを思ったかというと、当ブログを巡回したであろうクローラーの履歴を見ていたところ、アドセンスの審査依頼をした日から合否の連絡が来るまでに、なんとなくの規則性があるように見えたからです。 アドセンスの審査に関してGoogleから詳細は公表されていないので、結論も予想の域は出ませんが、少しくらいは有用性のある記事になっていると思います。 アドセンスの合否待ちでヤキモキしている方なんかに読んでもらえるといいかなと思います。 前提：アドセンスの合否判定はクロ…

どうも新年に突入したやつです あけましておめでとうございます 本来ならばいつもの恒例でガンプラ福袋購入してあーだこーだしたかったのですが寝坊してしまい慌てていくも無事完売無事死亡 無差別ジャンルプラモデル福袋でメガミデバイスやFAガールを引ければ幸せになれる説を考えましたが日和って帰りました… 今回は前回紹介したDEERCのMN‐99Sの走行動画を撮ったのでお供えいたします tanakaz12.hateblo.jp 車高は正義ってこと！？

10000アクセス感謝です 10000万アクセス はてなブログのアクセスカウンターが10000まで回ってましたただ、半分か半分以上はgoogleのクローラーでしょうけど・・・まぁ、記念に記事に残しておきます 近況報告 今年の投資を頑張りたいところですが、全然株価を見れていませんANAは少し下がってきてるのが少し残念ですねぇ 3月の配当落ち頃にどうなってるか気になりますね

こんにちは！長谷川です😊✨今回は「Google Search Console のエラー：クロール予算の問題」について詳しく解説します。クロール予算とは、検索エンジンのクローラーが特定のサイトをクロールする際に割り当てられるリソースのことです。サイトの規模に対してクロール頻度が低いと、ページのインデックスやランキングに悪影響を及ぼす可能性があります。本記事では、クロール予算の問題の原因とその解決策について、具体的な手順とともにご紹介します。 🌱 はじめに 📚 クロール予算の基本とその重要性 🔍 エラーの特定と主な原因 🛠️ 主な原因 🔄 クロール予算問題の改善手順 1. サイト構造と内部リンクの…

こんにちは！長谷川です😊✨今回は「Google Search Console のエラー：ファセットナビゲーションの問題」について詳しく解説します。ファセットナビゲーションは、大規模なECサイトや情報サイトで多様なフィルタリングを可能にする重要な機能ですが、その実装が検索エンジンに正しく解釈されないと、インデックスやカバレッジに問題を引き起こすことがあります。本記事では、ファセットナビゲーションの問題の原因とその解決策について、具体的な手順とともにご紹介します。 🌱 はじめに 📚 ファセットナビゲーションとその課題 🔍 エラーの特定と原因分析 🚩 代表的なエラーメッセージ例 🛠️ 主な原因 🔄 …

こんにちは！長谷川です😊✨今回は「Google Search Console のエラー：URLの長さの問題」について詳しく解説します。URLが長すぎることが原因で、検索エンジンのインデックスやカバレッジに影響が出るケースに焦点を当てます。URLの最適化は、サイトのクローラビリティやSEOにとって重要です。このガイドでは、長すぎるURLが引き起こす問題の原因とその解決策について、具体的な手順とともにご紹介します。 🌱 はじめに 📚 URLの長さの問題とは？ 🔍 エラーの特定と原因分析 🚩 代表的なエラーメッセージ例 🛠️ 主な原因 🔄 URLの長さの問題の改善手順 1. URL構造の見直し 2.…

こんにちは！長谷川です😊✨今回は「Google Search Console のエラー：JavaScriptのレンダリング問題」について詳しく解説します。特に、ページがJavaScriptに依存しすぎることが原因で、検索エンジンのクローラーが正しくコンテンツをレンダリングできず、インデックスカバレッジに問題が生じるケースに焦点を当てます。 🌱 はじめに 📚 JavaScriptレンダリング問題とは？ 🔍 エラーの特定と主な原因 🔄 改善手順 1. サーバーサイドレンダリング（SSR）の導入 2. 動的レンダリングの検討 3. JavaScriptの最適化 4. プリレンダリングサービスの利用 …

Google Search Consoleを利用してウェブサイトの状況を確認していると、「見つかりません (404)」というエラーが報告されることがあります。このエラーは、検索エンジンのクローラーがサイト内の特定のページにアクセスしようとした際、そのページが存在しないために404ステータスコードを受け取ったことを示しています。404エラーはウェブにおいて非常に一般的なものであり、ページが削除された、URLが変更された、もしくはタイプミスによるアクセスなどが原因で発生します。本記事では、404エラーの背景、具体的な原因、カバレッジへの影響、診断方法、そして解決策について順を追って丁寧に説明します…

Google Search Consoleを利用してウェブサイトの状態を監視していると、「ソフト404」というエラーが報告されることがあります。これは、存在しないページにアクセスした際、本来ならば404エラー（ページが見つからない）を返すべきところを、サーバーが200ステータスコード（正常な応答）を返してしまう状態を指します。この結果、検索エンジンはそのページを有効なコンテンツとして誤認し、サイトのカバレッジやユーザー体験に悪影響を与える可能性があります。以下では、ソフト404エラーの背景、具体的な原因、影響、診断方法、そして対策について順を追って詳しく説明します。どうぞ最後までご覧ください！…

Google Search Consoleを使用していると、特定のページについて「noindexタグが指定されている」とのエラーが表示されることがあります。このエラーメッセージは、検索エンジンのクローラーがページをクロールした際に、そのページに<meta name="robots" content="noindex">タグが存在していることを検出し、インデックス登録しないよう指示されている状態を示しています。本記事では、なぜこのエラーが発生するのか、どのような影響があるのか、そしてどのように対処すべきかについて詳しく解説します。 エラーの概要と発生状況📌 主な原因🔍 エラー発生時の影響と注意点…

Google Search Consoleを使用してウェブサイトの健全性を確認していると、「リダイレクトエラー」というエラーメッセージが表示されることがあります。これは、ウェブページが適切にリダイレクトされていない、または無限ループなどの問題が発生している場合に起こります。特に「不適切なリダイレクト設定」が原因である場合、サイトのカバレッジや検索エンジンの評価に深刻な影響を及ぼす可能性があります。以下では、このエラーの背景、具体的な原因、影響、診断方法、そして解決策について順を追って丁寧に説明します。どうぞ最後までご覧ください！😊 エラーの概要と発生状況📌 主な原因🔍 エラー発生時の影響と注意…

回転寿司チェーンにおけるシステム障害 フロントエンドレンダリング手法の解説 Cloudflareを用いた高同時接続配信サーバー構築 交換不要な自立給電型コイン電池モジュール OpenAIクローラーによる3Dスキャンデータサイトへの影響 AIのマルチモデル化に関する予測 パスキー認証方法 開発環境設定 2025年エンジニア向け開発環境紹介 NGINX用OpenTelemetryモジュール サイバーセキュリティ対策オンラインイベント 主要LLMサービスの比較 Arcブラウザの使い方と業務効率化 Pythonパッケージ管理ツールuvの使い方 PCのフォームファクタと進化 アーキテクチャカンファレンス…

youtu.be コミカルミニ四駆をベースに、ギア比を落とす＆前輪後輪が独立してツイストする構造を追加、とかそんな感じに設計しなおしたわけか。つかミニ四駆と言えばコミカルとワイルドをオフロードで走らせて以下略だったワタクシとしては、こんな感じにジリジリと悪路を乗り越えていくのってめっちゃカッコいいじゃん（CV：斎藤千和）と言うかなんというか。いいぞもっとやれ。なおこれは余談ではあるが、こういうのを見るたびにラジコンのロッククローラーが欲しくなる→値段を調べるも溜息一つついて以下略、と言うのを繰り返してるのはゴニョゴニョ。まあもちろん数千円のトイラジコンとは次元が違うのは解るんだけど…ぶっちゃけ…

タダです. 去年の年末は Bedrock を手動かして勉強をしていました.この記事はプレビューの Web クローラーをデータソースにナレッジデータベースを作った時の備忘録です. aws.amazon.com Bedrock Web Crawler とは Web Crawler では Bedrock のナレッジベースで使用するために選択した URL にアクセスしウェブサイトのページをクロールすることができます. docs.aws.amazon.com ドキュメントに沿って試しにこのブログをソースに指定し,同期範囲は Default にしています. なお同期範囲の種類は Default/Host …