tokenize

    5

    2답변

    이 작업을 수행하는 방법에 대한 기본적인 아이디어가 있지만 올바르게 작성했는지 확신 할 수 없습니다. 따라서 우리는 metod blow로 WindyString 클래스를 갖게되었습니다. 그것을 사용 후 : System.out.println(WindyString.blow( "Abrakadabra! The second chance to pass has

    0

    1답변

    매핑 파일에 동적 필드를 사용하려고하지만 사용자가 전달한 "수식"을 구문 분석하는 방법을 알 수 없습니다. 적어도 처음부터 전체 파서를 쓰지 않고! 이 작업을 수행하는 좀 더 쉬운 방법이있을 것이라고 확신하므로 아이디어를 요청하고 있습니다! 기본 아이디어 : public var testString:String = "(#TOTPOP_CY#-#HISPOP_CY

    6

    1답변

    ANSI SQL 문자열을 다양한 구성 요소로 토큰 화/파싱하는 오픈 소스 라이브러리 (모든 언어, Python/PHP를 선호)가 있습니까? 나는 다음과 같은 문자열 SELECT a.foo, b.baz, a.bar FROM TABLE_A a LEFT JOIN TABLE_B b ON a.id = b.id WHERE baz = 'snafu'; 이 있다

    2

    1답변

    현재 [cfe]를 고객 프런트 엔드의 루트로 바꾸는 것과 같이 일반적으로 사용되는 문자열을 대체하는 페이지 렌더링 방법에서 대체 기능을 구현하고 있습니다. 이 값은 사이트 버전에 따라 다를 수 있습니다. 예를 들어 이미지 폴더의 루트 ([imagepath])는 개발 및 라이브의/Images이지만 테스트의/Test/Images입니다. [productName]

    2

    1답변

    고유 한 토큰 (foo.com/g6Ce7sDygw 또는 기타)을 사용하여 링크를 생성해야하는 애플리케이션이 많은 곳이 있습니다. 각 링크는 일부 세션 데이터와 연관 될 수 있으며 사용자를 특정 컨트롤러/동작으로 안내합니다. 누구든지이 작업을 수행하는 보석/플러그인을 알고 있습니까? 구현하기는 쉽지만 각 앱마다 처음부터 작성하지 않아도됩니다.

    1

    1답변

    내가해야할 것은 원자를 토큰으로 분해하는 것입니다. 예 : tokenize_string('Hello, World!', L). 은 L=['Hello',',','World','!']을 통일합니다. 정확히 tokenize_atom/2으로합니다. 그러나 비 라틴 문자로 tokenize_atom/2을 사용하려고하면 실패합니다. 어떤 보편적 인 대체물이나 어떻게

    6

    5답변

    내 질문에 대한 간단한 요약 : 누구든지 TwitterAnalyzer 또는 을 알고 계십니까? Lucene에 대한? 더 자세한 버전 : 내가 인덱스에 루씬에서 트윗의 숫자를 원하는 @user 또는 #hashtag 그대로 같은 조건을 유지한다. StandardTokenizer는 구두점을 버리므로 작동하지 않습니다 (하지만 도메인 이름, 전자 메일 주소 또는

    0

    1답변

    저는 현재 정규 표현식을 사용하여 문서를 토큰으로 구문 분석하려고합니다. 현재 문서의 키워드와 일치 시키려고합니다. 예를 들어 다음과 같은 문서가 있습니다. 일치해야하는 키워드는 Func, Return 및 EndFunc입니다. Func 키워드와 일치시키기 위해 (\ s | ^) (Func) (\ s | $)하지만 다음과 같은 정규 표현식을 사용했으나 원하는

    17

    7답변

    이것은 바퀴를 다시 발명하지 않는 이상적인 사례이지만 내 검색은 헛된 것입니다. 직접 작성하는 대신 기존 C++ 토큰 화 프로그램을 사용하고 싶습니다. 토큰은 전체 텍스트 검색을위한 색인에 사용됩니다. 성능은 매우 중요합니다. 필자는 많은 기가 바이트의 텍스트를 구문 분석합니다. 편집 : 토큰은 검색 색인에 사용됩니다. 그러한 토큰을 만드는 것은 정확한 과

    2

    2답변

    토큰 화 된 HTML 문서가 있다고 가정합니다. 어떻게 새 문서로 변환하거나 다른 변환을 적용 할 수 있습니까? 예를 들어, 나는이 HTML이 있다고 가정 내가 현재 무엇을 쓸 <html> <body> <p><a href="/foo">text</a></p> <p>Hello <span class="green">world</span></p>